Частная условная энтропия

Этот онлайн калькулятор рассчитывает частные условные энтропии H(Y|X=v) и H(X|Y=r) случайных величин X и Y по таблице вероятности состояний (X,Y)~p

Как вы могли узнать из статьи Условная энтропия, полная условная энтропия H(Y|X) это усреднение значений частной условной энтропии H(Y|X=v) по всем возможным значениям v, которые может принять случайная величина X.

Калькулятор ниже рассчитывает значения H(Y|X=v) и H(X|Y=r) для всех значений X и Y по совместной таблице вероятностей (X, Y) ~ p. Формула расчета приведена под калькулятором.

Для того, чтобы рассчитать частные условные вероятности, в поле ввода ниже нужно ввести матрицу, элемент которой на пересечении i-ой строки и j-ого столбца равен p_{(x_i, y_j)} - вероятности того, что X и Y примут значения {x_i, y_j}.

PLANETCALC, Частная условная энтропия

Частная условная энтропия

Знаков после запятой: 2
H(Y|X)
 
Файл очень большой, при загрузке и создании может наблюдаться торможение браузера.
H(X|Y)
 
Файл очень большой, при загрузке и создании может наблюдаться торможение браузера.

Формула частной условной энтропии

Частная условная энтропия случайной величины Y при условии, что случайная величина X приняла значение v это энтропия значений Y среди тех пар, где значение случайной величины X равно v:

\mathrm {H} (Y|X=v)=-\sum _{y\in {\mathcal {Y}}}{P(Y=y|X=v)\log _{2}{P(Y=y|X=v)}}

Ссылка скопирована в буфер обмена
PLANETCALC, Частная условная энтропия

Комментарии