315
правок
Изменения
Нет описания правки
{{Определение
|definition =Энтропией случайной схемы называется мера содержащейся в этой схеме неопределенности.'''Энтропия случайного источника''' — функция от вероятностей исходов: <brtex> Энтропия — это H: \bigcup\limits_{i=1}^{\infty} \mathbb{R}^i \rightarrow \mathbb{R} </tex>, характеризующая количество информации, приходящейся на одно элементарное сообщение источника, вырабатывающего статистически независимые сообщения.
}}
== Свойства ==
Энтропия должна удовлетворять следующим требованиям:
* Функция <tex>H(p_1, p_2, ..., p_n)</tex> непрерывна.