Изменения

Перейти к: навигация, поиск

Вариации регрессии

109 байт добавлено, 12:33, 2 февраля 2019
Логическая регрессия
'''Логическая регрессия''' (англ. ''logic regression'') {{---}} обобщенный метод регрессии, применяемый в основном в случае, когда независимые переменные имеют двоичную природу (при этом зависимая переменная не обязательно двоичная). Задачей логической регрессии является определение независимых переменных, которые могут быть выражены как результат вычисления булевой функции от других независимых переменных.
Пусть <tex>X_1x_1, X_2x_2, \dots, X_kx_k</tex> {{---}} двоичные независимые переменные, и пусть <tex>Yy</tex> {{---}} зависимая переменная. Будем пытаться натренировать модели регрессии вида <tex>g(E(Yy)) = b_0 + b_1 L_1 + \dots + b_n L_n</tex>, где <tex>L_j</tex> {{---}} булева функция от переменных <tex>X_ix_i</tex>(например <tex>L_j = (x_2 \lor \overline{x_4}) \land x_7</tex>).
Для каждого типа модели определим необходимо определить функцию счета, которая отражает качество рассматриваемой модели. For exampleНапример, for linear regression the score could be the residual sum of squares and for logistic regression the score could be the devianceдля линейной регрессии такой функцией может быть остаточная сумма квадратов. Будем стараться подобрать такие булевы выражения, при которых функция счета минимизируется, настраивая параметры Целью метода логической регрессии является минимизация выбранной функции качества посредством настройки параметров <tex>b_j</tex> одновременно с булевыми выражениями <tex>L_j</tex>.
==См. также==
276
правок

Навигация