Поиск по этому блогу

пятница, 4 октября 2013 г.

Измерение нформации

Как измерить количество информации, которое несет некоторое сообщение?

Сколько информации несут следующие сообщения:
  • "Москва - столица России";
  • "Чимборасо - самая высокая точка Эквадора";
  • "11101100011"?
И несут ли они информацию вообще?
Ранее мы рассматривали совершенно разные подходы к определению понятия "информация". А если есть разные подходы к определению термина, значит могут быть и разные подходы к измерению количества информации.

Мы рассмотрим с вами два подхода:
  • алфавитный;
  • содержательный.
С точки зрения алфавитного подхода количество информации совершенно не зависит от содержания сообщения, а только от количества символов и мощности алфавита, с помощью которого сообщение записано.

С точки зрения содержательного подхода имеет значение смысл сообщения, снимает ли это сообщение некоторую неопределенность.

Перейдите по ссылке и заполните таблицу, содержащую центральные понятия темы "Измерение информации"