Информативность — характеристика сообщения¶

Информативность — характеристика сообщения, текста, сигнала или данных, отражающая степень их полезности, содержательности и объёма передаваемой информации относительно цели адресата. Информативность — количественная и качественная мера того, насколько сообщение сокращает неопределённость получателя в отношении некоторого объекта или события. Понятие применяется в теории информации, лингвистике, журналистике, теории перевода, информатике и когнитивных науках.

¶Теоретические основы

¶Информация и энтропия

Понятие информативности восходит к работе Клода Шеннона «Математическая теория связи» (1948). В ней информация измеряется через энтропию — меру неопределённости случайной величины. Чем выше энтропия источника, тем больше информации содержит одно его сообщение. Однако математическая мера Шеннона не учитывает смысловую сторону: бессмысленная последовательность символов может нести максимум информации в шенноновском смысле, оставаясь бесполезной для получателя.

¶Семантическая информация

Для описания полезности сообщения была введена концепция семантической информации, связанная с именами Рудольфа Карнапа и Яна Бар-Хиллела. Семантическая информативность оценивает, насколько утверждение сужает пространство возможных состояний мира с точки зрения адресата. Утверждение «сегодня идёт дождь» информативно для того, кто не знает погоды, и неинформативно для того, кто смотрит в окно.

¶Прагматическая информация

Прагматическая информативность учитывает контекст и цель сообщения. Одно и то же высказывание может быть высокoinformatивным в одном контексте и тривиальным в другом. Прагматический подход развивался в рамках теории речевых актов Джона Остина и Джона Сирла, а также в прагматике Дэниела Вандервена.

¶Информативность в лингвистике

¶Принцип информативности Грайса

В лингвистике ключевую роль играет максима информации Пола Грайса, сформулированная в лекциях 1967 года (опубликованы в 1975). Согласно максиме, участники коммуникации должны давать столько информации, сколько требуется для цели разговора, и не давать больше, чем требуется. Нарушение этой максимы создаёт импликатуры — скрытые смыслы, выводимые из контекста.

¶Информативность в теории перевода

В теории перевода информативность выделяется как одна из трёх базовых функций текста наряду с экспрессивной и аппеллятивной (терминология Катлард-Левера). Информативный текст — это текст, основная цель которого передать содержание: научная статья, учебник, документация, новостной репортаж. Переводчик информативного текста обязан прежде всего сохранить точность содержания.

¶Информативность в журналистике

В журналистике информативность — одно из центральных качеств публикации. Критерии информативности включают новизну, фактографичность, точность, объективность и полноту освещения. Информативный материал отвечает на вопросы «что, где, когда, кто, почему и как» и опирается на проверяемые факты.

¶Информативность в информатике

¶Энтропия и сжатие данных

В информатике информативность данных напрямую связана с их сжимаемостью. Данные с высокой энтропией плохо сжимаются, поскольку содержат мало повторяющихся закономерностей. Алгоритмы сжатия (LZ77, Huffman, арифметическое кодирование) реализуют идею минимизации избыточности — противоположности информативности.

¶Информативность признаков

В машинном обучении информативность признака (feature) определяется его способностью различать классы объектов. Меры информативности признаков включают взаимную информацию, энтропийный критерий, хи-квадрат и методы на основе дерева решений. Отбор информативных признаков — стандартный этап построения моделей.

¶Измерение информативности

¶Применение

Понятие информативности применяется при проектировании пользовательских интерфейсов, где информативность экрана оценивается по плотности полезного содержания. В образовании информативность учебного материала связана с его соответствием зоне ближайшего развития. В теории кодирования информативность определяет пределы сжатия данных. В когнитивной психологии информативность стимула связывается с новизной и неожиданностью, вызывающими ориентировочную реакцию.

¶Критика и ограничения

Единой формализованной меры информативности, пригодной для всех областей, не существует. Шенноновская энтропия игнорирует смысл, семантические меры требуют модели мира адресата, прагматические — знания контекста. В лингвистике критикуется сама возможность количественного измерения информативности естественного языка, поскольку значения слов многозначны и контекстуально изменчивы.

¶Литература

• Шеннон К. Математическая теория связи // Работы по теории информации и кодированию. — М.: Мир, 1963.
• Грайс П. Логика и речевое общение // Новое в зарубежной лингвистике. Вып. XVI. — М.: Прогресс, 1985.
• Катлард-Левер Р. Перевод как средство коммуникации. — М.: Прогресс, 1974.
• Вандервэн Д. Прагматика. — М.: Языки славянских культур, 2005.