Информатика и вычислительная техника


Количественные оценки и показатели качества информации


Для измерения количества информации вводятся два параметра: количество информации 1 и объем данных Vg. Эти параметры по - разному интерпретируются в зависимости от рассматриваемой формы адекватности. Каждой форме адекватности соответствует своя мера информации.

Синтаксическая мера информации. Эта мера количества информации оперирует с обезличенной информацией, не выражающей смыслового отношения к объекту.

Объем данных в текстовом сообщении измеряется количеством символов (знаков) в этом сообщении. Поэтому часто объем данных называют длиной сообщения. Очевидно, что в зависимости от языка той или иной национальности этот объем может быть различным для сообщения одного и того же смыслового содержания.

В компьютерной технике, как известно, все данные, подлежащие обработке, представляются в кодированном виде с использованием, как правило, двоичной системы счисления. В этой системе счисления минимальной единицей измерения объема данных служит бит (один двоичный разряд). Например, сообщение в виде шестиразрядного двоичного кода 110010 имеет объем данных Vg = 6 бит. В современных компьютерах применяется также более укрупненная единица измерения - байт, который соответствует 8 бит. Отметим, что с увеличением основания системы счисления для одного и того же сообщения требуется меньшее количество цифровых знаков, что приводит к соответствующему уменьшению объема данных. Так, по сравнению с двоичной системой счисления восьмеричная, десятичная и шестнадцатеричная системы счисления приводят к такому уменьшению, соответственно, в 3; 3,33 и 4 раза.

Количество информации I обычно связывают с оценкой неопределенности системы (энтропии системы). Действительно, получение информации о какой - либо системе всегда связано с изменением степени неосведомленности получателя о состоянии этой системы. Такой вероятностно - статистический подход к измерению количества информации был впервые предложен К.Э.Шенноном в его работе "Математическая теория связи", опубликованной в 1948 году.




Начало  Назад  Вперед