Студопедия
Случайная страница | ТОМ-1 | ТОМ-2 | ТОМ-3
АвтомобилиАстрономияБиологияГеографияДом и садДругие языкиДругоеИнформатика
ИсторияКультураЛитератураЛогикаМатематикаМедицинаМеталлургияМеханика
ОбразованиеОхрана трудаПедагогикаПолитикаПравоПсихологияРелигияРиторика
СоциологияСпортСтроительствоТехнологияТуризмФизикаФилософияФинансы
ХимияЧерчениеЭкологияЭкономикаЭлектроника

Понятие избыточности информации

Читайте также:
  1. A) философское понятие, которое отражает единство качества и количества
  2. Cостав и расчетные показатели площадей помещений центра информации - библиотеки и учительской - методического кабинета
  3. I. Виды угроз информации.
  4. I. Понятие издержек производства, стоимости и себестоимости продукции. Виды себестоимости.
  5. I. Семинар. Тема 1. Понятие и методологические основы системы тактико-криминалистического обеспечения раскрытия и расследования преступлений
  6. I.1. Понятие корпоративной культуры и ее уровни.
  7. II. Этапы преобразования информации стратегического менеджмента.

Как известно, мерой количества информации служит снятая неопределенность. Начальное количество передаваемой информации целиком определяется энтропией ИИ: чем больше энтропия, тем больше начальное количество информации. В свою очередь, величина энтропии ИИ зависит от свойств ансамбля сообщений: количества и взаимной зависимости элементов выборочного пространства, их вероятностных характеристик. Из нескольких ансамблей сообщений максимальную среднюю информационную нагрузку на элемент алфавита имеет тот, у которого больше выборочное пространство, элементы алфавита равновероятны и отсутствует взаимная зависимость между элементами. С другой стороны, добиваясь равновероятности и отсутствия взаимной зависимости между элементами, ту же информационную нагрузку на элемент можно обеспечить, используя алфавит с меньшим по объему выборочным пространством. Таким образом, ряд факторов, типичных для выбранного первичного алфавита, могут привести к недоиспользованию его элементов как переносчиков информации. В связи с этим говорят об избыточности алфавита или просто об избыточности ИИ. Однако избыточным может быть и вторичный алфавит. Поэтому различают избыточность естественную и искусственную. Естественная избыточность характерна для первичных алфавитов, а искусственная - для вторичных.

Естественная избыточность подразделяется на семантическую и статистическую.

Семантическая избыточность состоит в том, что для выражения конкретной мысли можно подобрать более короткую фразу по сравнению с имеющейся. Если сложное сообщение можно сократить без изменения смысла, а затем на приемной стороне восстановить содержание, то оно обладает семантической избыточностью. Например, рассмотрим сообщение: "Отправка заявленной Вами продукции в предусмотренные контрактом сроки не может быть осуществлена по причине возникшей чрезвычайной ситуации в нашей местности и, в связи с этим, мобилизации всех грузовых транспортных средств на проведение спасательных работ". Очевидно, что без особой потери ценности информации это сообщение может быть передано в виде: "Отправка заявленной Вами продукции временно задерживается по причине мобилизации всех транспортных средств на проведение спасательных работ". Второе предложение короче, с большей информационной нагрузкой на каждое слово, то есть первое предложение обладает семантической избыточностью по отношению ко второму. В данном учебном пособии проблема уменьшения семантической избыточности не рассматривается.

Статистическая избыточность обусловливается неравновероятностью элементов первичного алфавита и их взаимной зависимостью. Именно она взята за основу изучаемых вопросов.

Введем величину И и назовем ее "избыточность представления информации".


Дата добавления: 2015-07-11; просмотров: 237 | Нарушение авторских прав


Читайте в этой же книге: Понятие линии и канала связи | Постановка задачи | Понятие энтропии как меры неопределенности, неполноты знаний | Свойства безусловной энтропии | Условная энтропия | Свойства условной энтропии | Совместная энтропия или энтропия объединения | Дискретные источники информации и их основные характеристики | Дискретные каналы связи и их основные характеристики | Бинарные (двоичные) каналы связи |
<== предыдущая страница | следующая страница ==>
Вычисление количества информации при передаче сообщений от дискретного источника информации по дискретному каналу связи| Оценка избыточности представления информации при использовании меры Хартли

mybiblioteka.su - 2015-2024 год. (0.005 сек.)