Изменения

Перейти к: навигация, поиск

Регуляризация

267 байт добавлено, 07:35, 21 января 2020
Сравнение гребниевой и лассо регрессий
{|align="center"
|-valign="top"
|[[Файл: Ridge_and_Lasso_Regression.png|400px|thumb|Рис.3. Сравнение гречневой гребневой и лассо регрессий, пример для двумерного пространства независимых переменных.<br/>Бирюзовые области изображают ограничения на коэффициенты <tex>\beta</tex>, эллипсы {{---}} некоторые значения функции наименьшей квадратичной ошибки.]]
|}
В случае с лассо регрессией:
:$\beta_{j}^* = \begin{cases} y_{j} - \lambda / 2, y_{j} > \lambda / 2 \\ y_{j} + \lambda / 2, y_{j} < -\lambda / 2 \\ 0, |y_{j}| \leq \lambda / 2 \end{cases}$
В итоге на Рис. 4 на графиках зависимости с зависимостями $\beta_{j}^*$ от $y_{j}$ можно увидеть описанные ранее особенности данных регуляризованных линейных регрессий. {|align="center" |-valign="top" |[[Файл: regularization_comparing.png|400px|thumb|Рис.4. Сравнение гребневой и лассо регрессий, пример для простой модельной задачи.]] |}
==Регуляризация в алгоритмах==
193
правки

Навигация