Основні поняття та теореми теорії інформації

У посібнику розглянуто основи теорії інформації. Зокрема, основну увагу звернено на визначення середньої швидкості передавання інформації та розв’язання задачі максимізації цієї швидкості застосуванням відповідного кодування. Викладено ентропію джерела дискретних повідомлень, поняття умовної ентропії, основні властивості взаємної інформації, епсілон-ентропії. Викладено теорему К.Шеннона, код Шеннона-Фано. Оптимальні статистичні кодування повідомлень    . Висвітлино характеристики ймовірностей і втрат інформації на виході нелінійного елемента та ефективність систем передавання інформації
Викладено основні поняття кодування джерел інформації та каналів зв’язку. Розглянуто коректувальні, циклічні, несистематичні, ітеративні коди; коди Боуза–Чоудхурі–Хоквінгема та ефективність систематичних коректувальних кодів.
Контрольні запитання і задачі допоможуть студенту в підготовці до перевірки знань. 
Навчальний посібник призначений для студентів, які навчаються за спеціальностями з напряму “Телекомунікації”, а також може бути корисний для аспірантів, викладачів навчальних закладів відповідних спеціальностей, фахівців, які обслуговуть телекомунікаційні мережі зв'язку.