М., ГИФМЛ, 1960 г. – 392 с.
Из предисловия автора
Введение
Определение информации
Определение информации
Системы единиц
Обобщение и примеры
Информация и алфавит
Информация, содержащаяся в cовoкyпности cимволов с различными априорными вероятностями
Общие замечания
Применение определений и общее обсуждение
Определения
Свойство А
Свойство В
Свойство С
Зависимые события
Условная информация
Избыточность в языке
Корреляция и зависимые события
Корреляция в языке
Избыточность в языке
Некоторые эксперименты
Кодирующие устройства
Принципы кодирования; пропускная способность канала
Введение
Определение канала и его пропускной способности
Символы, слова и сообщения при кодировании последовательностей
Обсуждение
Примеры
Вычисление пропускной способности канала
Согласование кода с каналом
Общая задача: символы различной длины
Проблема согласования
Проблемы статистики слов
Решение проблемы согласования
Приложение
Проблемы кодирования
Алфавитное кодирование; двоичная система
Алфавитное кодирование; троичная система
Алфавит и числа
Двоичное кодирование слов
Алфавитное кодирование слов
Кодирование, основанное на группах букв и на корреляции
Коды, обнаруживающие и исправляющие ошибки
Коды, обнаруживающие ошибки
Коды, исправляющие одиночную ошибку
Коды, исправляющие одиночную ошибку и обнаруживающие двойную
Эффективность исправляющих кодов
Пропускная способность двоичного канала с шумом
Приложения к некоторым специальным проблемам
Задача о расположении с применением смешанной ячейки
Расположение с перекрестными ссылками
Наивыгоднейшее число элементов на одну элементарную ячейку
Анализ сигналов: метод Фурье и процедуры отсчетов
Ряд Фурье
Явление Гиббса и сходимость рядов Фурье
Интеграл Фурье
Pоль конечной ширины полосы частот
Соотношение неопределенности для времени и частоты
Степени свободы сообщения
Метод отсчетов Шеннона
Информационные ячейки Гэйбора
Автокорреляция и спектр; формула Винера-Хинчина
Линейные преобразования и фильтры
Анализ Фурье и метод отсчетов в трех измерениях
Исследование кристаллов рентгеновыми лучами
Приложение
Основы термодинамики
Введение
Два начала термодинамики; энтропия и негэнтропия
Невозможность вечного движения; тепловые машины
Статистическое толкование энтропии
Примеры статистических рассуждений
Флуктуации энергии; формула Гиббса
Квантованный осциллятор
Флуктуации
Тепловое движение и броуново движение
Тепловое движение
Случайное блуждание
Дробовой эффект
Броуново движение
Тепловое движение в электрической цепи
Приложение
Тепловой шум в электрической цепи; формула Найквиста
Moдeль со случайными импульсами
Метод Найквиста
Обсуждение и приложения
Обобщения формулы Найквиста
Тепловое движение в выпрямителе
Негэнтропийный принцип информации
Связь между информацией и энтропией
Негэнтропийный принцип информации; обобщение принципа Карно
Hecкoлько типичных физических примеров
Несколько общих замечаний
Демон Максвелла и негэнтропийный принцип информации
Демон Максвелла; исторический обзор
Изгнание демона
Обсуждение
Действие демона как преобразование информации в негэнтропию
Негэнтропия, требуемая при наблюдении
3aдaчa Силарда: полностью информированная тепловая машина
Рассуждение Гэйбора
Приложение
Приложение II
Негэнтропийный принцип информации в общей физике
Проблема измерения в физике
Наблюдения над осциллятором
Высокочастотный резонатор и цена наблюдения
Эксперименты, требующие многих одновременных наблюдений при низких частотах
Проблемы, требующие высокой надежности
Более подробное обсуждение экспериментов с высокими частотами
Пример, доказывающий наименьшую негэнтропию, необходимую для наблюдения
Наблюдение и информация
Экспериментальные ошибки и информация
Измерения длины с низкой точностью
Измерения длины с высокой точностью
Эффективность наблюдения
Измерение расстояния с помощью интерферометра
Другая схема для измерения расстояния
Измерение промежутков времени
Наблюдения под микроскопом
Рассуждение о фокусе в волноводе
Примеры и обсуждение
Заключение
Теория информации, принцип неопределенности и физические пределы наблюдаемости
Общие замечания
Наблюдение есть необратимый процесс
Общие ограничения точности физических измерений
Пределы евклидовой геометрии
Возможность использования тяжелых частиц вместо фотонов
Соотношения неопределенности в экспериментах с микроскопом
Измерение импульса
Неопределенность в измерении поля
Негэнтропийный принцип информации в применении к связи
Анализ сигналов с конечной шириной полосы
Сигналы и тепловой шум: представление в многомерном пространстве
Пропускная способность канала с шумом
Обсуждение формулы Таллера-Шеннона
Практический пример
Негэнтропийный принцип в применении к канал у с шумом
Видоизмененная формула Гэйбора и роль биений
Письмо, печать и чтение
Передача информации: живая информация
Проблема чтения и письма
Мертвая информация и как ее оживить
Письмо и печать
Обсуждение специального примера
Новая информация и избыточность
Проблема вычисления
Вычислительные машины
Вычислительная машина как математический элемент
Вычислительная машина как элемент схемы; отсчитывание и восстановление
Вычисление по отсчетам в момент t
Коэффициент передачи вычислительной машины
Схемы, содержащие вычислительную машину; проблема устойчивости
Обсуждение устойчивости программы
Hecкoлько примеров
Информация, организация и другие проблемы
Информация и организация
Информация, содержащаяся в физическом законе
Информация, содержащаяся в числовой таблице
Общие замечания
Примеры проблем, выходящих за рамки данной теории
Проблемы семантической информации
Предметный указатель
Введение
Определение информации
Определение информации
Системы единиц
Обобщение и примеры
Информация и алфавит
Информация, содержащаяся в cовoкyпности cимволов с различными априорными вероятностями
Общие замечания
Применение определений и общее обсуждение
Определения
Свойство А
Свойство В
Свойство С
Зависимые события
Условная информация
Избыточность в языке
Корреляция и зависимые события
Корреляция в языке
Избыточность в языке
Некоторые эксперименты
Кодирующие устройства
Принципы кодирования; пропускная способность канала
Введение
Определение канала и его пропускной способности
Символы, слова и сообщения при кодировании последовательностей
Обсуждение
Примеры
Вычисление пропускной способности канала
Согласование кода с каналом
Общая задача: символы различной длины
Проблема согласования
Проблемы статистики слов
Решение проблемы согласования
Приложение
Проблемы кодирования
Алфавитное кодирование; двоичная система
Алфавитное кодирование; троичная система
Алфавит и числа
Двоичное кодирование слов
Алфавитное кодирование слов
Кодирование, основанное на группах букв и на корреляции
Коды, обнаруживающие и исправляющие ошибки
Коды, обнаруживающие ошибки
Коды, исправляющие одиночную ошибку
Коды, исправляющие одиночную ошибку и обнаруживающие двойную
Эффективность исправляющих кодов
Пропускная способность двоичного канала с шумом
Приложения к некоторым специальным проблемам
Задача о расположении с применением смешанной ячейки
Расположение с перекрестными ссылками
Наивыгоднейшее число элементов на одну элементарную ячейку
Анализ сигналов: метод Фурье и процедуры отсчетов
Ряд Фурье
Явление Гиббса и сходимость рядов Фурье
Интеграл Фурье
Pоль конечной ширины полосы частот
Соотношение неопределенности для времени и частоты
Степени свободы сообщения
Метод отсчетов Шеннона
Информационные ячейки Гэйбора
Автокорреляция и спектр; формула Винера-Хинчина
Линейные преобразования и фильтры
Анализ Фурье и метод отсчетов в трех измерениях
Исследование кристаллов рентгеновыми лучами
Приложение
Основы термодинамики
Введение
Два начала термодинамики; энтропия и негэнтропия
Невозможность вечного движения; тепловые машины
Статистическое толкование энтропии
Примеры статистических рассуждений
Флуктуации энергии; формула Гиббса
Квантованный осциллятор
Флуктуации
Тепловое движение и броуново движение
Тепловое движение
Случайное блуждание
Дробовой эффект
Броуново движение
Тепловое движение в электрической цепи
Приложение
Тепловой шум в электрической цепи; формула Найквиста
Moдeль со случайными импульсами
Метод Найквиста
Обсуждение и приложения
Обобщения формулы Найквиста
Тепловое движение в выпрямителе
Негэнтропийный принцип информации
Связь между информацией и энтропией
Негэнтропийный принцип информации; обобщение принципа Карно
Hecкoлько типичных физических примеров
Несколько общих замечаний
Демон Максвелла и негэнтропийный принцип информации
Демон Максвелла; исторический обзор
Изгнание демона
Обсуждение
Действие демона как преобразование информации в негэнтропию
Негэнтропия, требуемая при наблюдении
3aдaчa Силарда: полностью информированная тепловая машина
Рассуждение Гэйбора
Приложение
Приложение II
Негэнтропийный принцип информации в общей физике
Проблема измерения в физике
Наблюдения над осциллятором
Высокочастотный резонатор и цена наблюдения
Эксперименты, требующие многих одновременных наблюдений при низких частотах
Проблемы, требующие высокой надежности
Более подробное обсуждение экспериментов с высокими частотами
Пример, доказывающий наименьшую негэнтропию, необходимую для наблюдения
Наблюдение и информация
Экспериментальные ошибки и информация
Измерения длины с низкой точностью
Измерения длины с высокой точностью
Эффективность наблюдения
Измерение расстояния с помощью интерферометра
Другая схема для измерения расстояния
Измерение промежутков времени
Наблюдения под микроскопом
Рассуждение о фокусе в волноводе
Примеры и обсуждение
Заключение
Теория информации, принцип неопределенности и физические пределы наблюдаемости
Общие замечания
Наблюдение есть необратимый процесс
Общие ограничения точности физических измерений
Пределы евклидовой геометрии
Возможность использования тяжелых частиц вместо фотонов
Соотношения неопределенности в экспериментах с микроскопом
Измерение импульса
Неопределенность в измерении поля
Негэнтропийный принцип информации в применении к связи
Анализ сигналов с конечной шириной полосы
Сигналы и тепловой шум: представление в многомерном пространстве
Пропускная способность канала с шумом
Обсуждение формулы Таллера-Шеннона
Практический пример
Негэнтропийный принцип в применении к канал у с шумом
Видоизмененная формула Гэйбора и роль биений
Письмо, печать и чтение
Передача информации: живая информация
Проблема чтения и письма
Мертвая информация и как ее оживить
Письмо и печать
Обсуждение специального примера
Новая информация и избыточность
Проблема вычисления
Вычислительные машины
Вычислительная машина как математический элемент
Вычислительная машина как элемент схемы; отсчитывание и восстановление
Вычисление по отсчетам в момент t
Коэффициент передачи вычислительной машины
Схемы, содержащие вычислительную машину; проблема устойчивости
Обсуждение устойчивости программы
Hecкoлько примеров
Информация, организация и другие проблемы
Информация и организация
Информация, содержащаяся в физическом законе
Информация, содержащаяся в числовой таблице
Общие замечания
Примеры проблем, выходящих за рамки данной теории
Проблемы семантической информации
Предметный указатель