Измерение нформации

Как измерить количество информации, которое несет некоторое сообщение?

Сколько информации несут следующие сообщения:

• "Москва - столица России";
• "Чимборасо - самая высокая точка Эквадора";
• "11101100011"?

И несут ли они информацию вообще?

Ранее мы рассматривали совершенно разные подходы к определению понятия "информация". А если есть разные подходы к определению термина, значит могут быть и разные подходы к измерению количества информации.

Мы рассмотрим с вами два подхода:

• алфавитный;
• содержательный.

С точки зрения алфавитного подхода количество информации совершенно не зависит от содержания сообщения, а только от количества символов и мощности алфавита, с помощью которого сообщение записано.

С точки зрения содержательного подхода имеет значение смысл сообщения, снимает ли это сообщение некоторую неопределенность.

Перейдите по ссылке и заполните таблицу, содержащую центральные понятия темы "Измерение информации"