Учебное пособие. — Интернет-университет информационных технологий, 2007. — 86 с.
В курсе излагаются основные понятия и факты теории информации. Рассмотрены способы измерения, передачи и обработки информации.Значительное внимание уделено свойствам меры информации, характеристикам канала связи, помехозащитному, уплотняющему и криптографическому кодированию. Кроме того, рассмотрены вопросы формализации информации, в частности, в документах Internet. Изложение сопровождается большим количеством примеров и упражнений.
Введение
Предмет и основные разделы кибернетикиФормальное представление знаний
Виды информации
Хранение, измерение, обработка и передача информации
Базовые понятия теории информацииСпособы измерения информации
Вероятностный подход к измерению дискретной и непрерывной информации
Смысл энтропии ШеннонаСемантическая информация
Сжатие информацииПростейшие алгоритмы сжатия информации
Арифметическое кодированиеАдаптивные алгоритмы сжатия. Кодирование Хаффмена
Адаптивное арифметическое кодирование
Подстановочные или словарно-ориентированные алгоритмы сжатия информации. Методы Лемпела-ЗиваLZ-алгоритмы распаковки данных. Примеры
Особенности программ-архиваторов
Сжатие информации с потерямиИнформационный канал
Помехозащитное кодирование
Математическая модель системы связиМатричное кодирование
Групповые кодыСовершенные и квазисовершенные коды
Полиномиальные коды
Понятие о кодах Боуза-Чоудхури-ХоккенгемаЦиклические избыточные коды
Основы теории защиты информацииКриптосистема без передачи ключей
Криптосистема с открытым ключом
Электронная подпись
Стандарт шифрования данных
Информация в InternetHTML, XML и SGML
TeX
PostScript и PDF
Дополнительные материалыУправляющие коды ASCII
Кодировка видимых символов ASCII
Кодировка букв русского алфавита
Элементы теории чисел
Используемые обозначения