Вычисляем общее количество энтропии за таблицей вероятностей при помощи формулы Шеннона.
Итак, если взглянуть вниз страницы, то вы увидите, перед собой два онлайн-калькулятора:
- может рассчитывать энтропию по заданной таблице вероятностей
- рассчитывает энтропию на основе простого анализа встречаемых символов в данном текстовом блоке.