4. Інформатика
• Наука про інформацію та інформаційні
процеси, а також про способи їх
автоматизації з використанням
комп'ютерної техніки
5. Кількість інформації
• Змістовний підхід
Повідомлення, зменшує невизначеність знань в два
рази, несе один біт інформації
Ni
2
Кулька під першими двома стаканчиками? - Ні
Шарик під третім стаканчиком? - Так
Клод Шеннон
(1916 - 2001)
6. Чи містить повідомлення
інформацію?
• 2+2=4
Якщо деяке повідомлення призводить до
зменшення невизначеності знань, то можна сказати,
що таке повідомлення містить інформацію
7. Кількість інформації
• Алфавітний підхід
Кожен символ деякого повідомлення має певну
інформаційну вагу - несе фіксовану кількість
інформації
У двійковому коді кожна двійкова цифра несе одну одиницю
інформації, яка називається один біт
N - потужність алфавіту (кількість символів в алфавіті)
i – інформаційна вага символу
бiтiN ii
1222
8. Інформаційна вага символу
• Алфавітний підхід
У російському алфавіті (не рахуючи літери «ё») 32
символа. Визначити інформаційну вагу одного символу.
Ni
2 N – кількість символів в алфавіті
i – інформаційна вага символу
9. Інформаційна вага символу
• Алфавітний підхід
У російському алфавіті (не рахуючи літери «ё») 32
символа. Визначити інформаційну вагу одного символу.
Ni
2 N – кількість символів в алфавіті
i – інформаційна вага символу
10. Інформаційний обсяг повідомлення
• Алфавітний підхід
У російському алфавіті (не рахуючи літери «ё») 32
символа. Визначити інформаційний обсяг
повідомлення «інформатика - наука про інформацію»
Ni
2 iKI
11. Інформаційний обсяг повідомлення
• Алфавітний підхід
У російському алфавіті (не рахуючи літери «ё») 32
символа. Визначити інформаційний обсяг
повідомлення «інформатика - наука про інформацію»
Ni
2 iKI