Содержательный подход к измерению информации

АБРА КА ДАБРА
ЗАВТРА СРЕДА

ГДЕ БОЛЬШЕ ИНФОРМАЦИИ?

ГДЕ БОЛЬШЕ ИНФОРМАЦИИ?
ЯБЛОКО
APPLE

Неизмеримость информации в быту
Вероятностный или содержательный подход
Алфавитный подход

Три подхода
к

КЛОД ШЕННОН (1916 – 2001)

 «ИНФОРМАЦИЯ ЕСТЬ СНЯТАЯ НЕОПРЕДЕЛЕННОСТЬ»  КЛОД ШЕННОН

Сообщение, уменьшающее
неопределённость знаний
о некотором событии в 2 раза,
несёт 1 бит

2 вариант
возможных событий:
Либо выпадает «Орел»,
либо - «Решка».

Решение задач

1.Сколько бит информации несёт
сообщение о том,
что из колоды в

Решение задач

2. Сообщение о том, что Петя живёт
во втором подъезде, несёт 3

Решение задач

В коробке лежат 64 фломастера.
Все фломастеры разных цветов.
Какое количество информации

Решение задач

Имеется 2 текста на разных языках.
Первый текст имеет 32-символьный алфавит