Изменения

Перейти к: навигация, поиск

SoftMax и SoftArgMax

1 байт добавлено, 22:01, 1 июля 2022
Связь между вариациями SoftMax
*<tex>\log\left(\right.softArgMax_{i}\left(x_{1},\ldots,x_{n}\right)\left.\right) = x_{i} -softMax\left(x_{1},\ldots,x_{n}\right)</tex>
Для подсчёта, например, перекрёстной энтропии , необходимо вычислить <tex>\log\left(p_{i}\right)</tex>. Последнее свойство позволяет вычислять производную от <tex>\log\left(p_{i}\right)</tex>, когда <tex>p_{i} = 0</tex>.
==Примечания==
46
правок

Навигация