c5f0a843-16d7-4791-875b-3b9c26b67276

Как измерить информацию?
Что такое «много информации» и «мало информации»?
Как определить, в каком сообщении больше информации?
Идея:
количество информации определяется временем ее передачи
количество информации определяется длиной сообщения.
объёмный подход

Какой код использовать?
Идея: использовать тот код, который применяется в компьютерной технике
«0»
«1»

Двоичный код
Код, в котором используются только два знака, называется двоичным. Все виды информации в компьютерах кодируются в двоичном коде.
1 бит – это количество информации, которое можно передать с помощью одного знака в двоичном коде («0» или «1»).
К. Шеннон, 1948:
bit = binary digit, двоичная цифра

1 бит
или
выбрать один из двух вариантов, если заранее договориться, что означают «0» и «1»

1 бит
1 бит – это количество информации, которое мы получаем при выборе одного из двух возможных вариантов (вопрос: «Да» или «Нет»?)
Примеры:
Эта стена – зеленая? Да.
Дверь открыта? Нет.
Сегодня выходной? Нет.
Это новый автомобиль? Новый.
Ты будешь чай или кофе? Кофе.

Сколько информации?
Определите количество информации:
2 бита
5 битов
7 битов
10 битов

Сколько вариантов?
1 бит:
2 бита:
3 бита:
4 бита: 16 вариантов!
0 1
0
00 01
10 11
000 001
010 011
100 101
110 111

Если вариантов больше…
4 варианта – 2 бита
00
01
10
11
8 вариантов – 3 бита
?
16 вариантов – 4 бита
?
32 варианта – 5 бит
?
64 варианта – 6 бит
?
128 вариантов – 7 бит
?

Если вариантов больше…
6 вариантов – между 4 (2 бита) и 8 (3 бита)
Ответ: количество информации между
2 и 3 битами

Единицы измерения
1 байт (bytе) = 8 бит
1 Кбайт (килобайт) = 1024 байта
1 Мбайт (мегабайт) = 1024 Кбайт
1 Гбайт (гигабайт) = 1024 Мбайт
1 Тбайт (терабайт) = 1024 Гбайт
1 Пбайт (петабайт) = 1024 Тбайт
210
КиБ (кибибайт)
МиБ (мебибайт)
ГиБ (гибибайт)
ТиБ (тебибайт)
ПиБ (пебибайт)

Перевод в другие единицы
5 Кбайт = байтов
15 байтов = битов
2048 Кбайт = Мбайт
1024 Mбайт = Гбайт
3 Мбайта = Кбайт
5 ·1024 = 5120 байтов
15 · 8 = 120 битов
2048:1024 = 2 Mбайта
1024:1024 = 1 Гбайт
3 · 1024 = 3072 Кбайта
1 байт = 8 битов

Перевод в другие единицы
=
<
<
>
=
Сравните (поставьте знак <, > или =):
3 байта 24 бита
1000 байтов 1 Кбайт
250 байтов 0,25 Кбайт
1 Мбайт 1000 Кбайт
8192 бита 1 Кбайт