меняет свое значение. Например, по-итальянски я могу по-разному произносить "e" в словах
"bene" и "cena", но разница в произношении не изменит значения слов. Напротив, если, говоря по-
английски, я произношу "i" в словах
"ship" и "sheep" (транскрибированных в словаре соответственно "∫ip"
и "∫i:p") по-разному, налицо оппозиция двух фонем, и действительно, первое слово означает "корабль", второе — "овца". Стало быть, и в этом случае можно говорить об
информации, возникающей за счет бинарных оппозиций.
III.3.
Вернемся, однако, к нашей коммуникативной модели. Речь шла о единицах информации, и мы
установили, что когда, например, известно, какое событие из восьми возможных осуществилось, мы получаем три бита информации. Но эта "информация "имеет косвен-
10 См библиографию в Lepschy, cit, и у Якобсона (Якобсон P. Избранные работы М , 1985) 41
ное отношение к собственно содержанию сообщения, к тому, что мы из него узнали. Ведь для
теории информации не представляет интереса, о чем говорится в сообщениях, о числах, человеческих именах, лотерейных билетах или графических знаках. В теории информации зна-
чимо число выборов для однозначного определения события. И важны также альтернативы, которые — на уровне источника — представляются как со-возможные. Информация это не
столько то, что говорится, сколько то, что может быть сказано. Информация — это мера
возможности выбора. Сообщение, содержащее один бит информации (выбор из двух
равновероятных возможностей), отличается от сообщения, содержащего три бита информации
(выбор из восьми равновероятных возможностей), только тем, что во втором случае
просчитывается большее число вариантов. Во втором случае информации больше, потому что
исходная ситуация менее определенна. Приведем простой пример: детективный роман тем более
держит читателя в напряжении и тем неожиданнее развязка, чем шире круг подозреваемых в
убийстве. Информация — это свобода выбора при построении сообщения, и, следовательно, она
представляет собой статистическую характеристику источника сообщения. Иными словами, информация — это число равновероятных возможностей, ее тем больше, чем шире круг, в
котором осуществляется выбор. В самом деле, если в игре задействованы не два, восемь или
шестьдесят четыре варианта, a n миллиардов равновероятных событий, то выражение
I = Lg2l09n
составит неизмеримо большую величину. И тот, кто, имея дело с таким источником, при
получении сообщения осуществляет выбор одной из n миллиардов возможностей, получает
огромное множество битов информации. Ясно, однако, что полученная информация представляет
собой известное обеднение того несметного количества возможностей выбора, которым
характеризовался источник до того, как выбор осуществился и сформировалось сообщение.
В теории информации, стало быть, берется в расчет равновероятность на уровне источника, и эту
статистическую величину назывют заимствованным из термодинамики термином энтропия 11 . И
действительно, энтропия некоторой системы — это состояние равновероятности, к которому
стремятся ее элементы. Иначе говоря, энтропия
11 См Норберт Винер. Кибернетика С. E. Shannon, W. Weaver, The Mathematical Theory of information, Urbana, 1949, Colin Cherry, On Human Communication, cit, A. G. Smith, ed , Communication and Culture (часть I), N Y.
1966; а также работы, указанные к прим. 2 и 4.
42
связывается с неупорядоченностью, если под порядком понимать совокупность вероятностей, организующихся в систему таким образом, что ее поведение делается предсказуемым. В
кинетической теории газа описывается такая ситуация: предполагается, впрочем, чисто гипоте-
тически, что между двумя заполненными газом и сообщающимися емкостями наличествует некое
устройство, называемое демоном Максвелла, которое пропускает более быстрые молекулы газа и
задерживает более медленные. Таким образом в систему вводится некоторая упорядоченность, позволяющая сделать прогнозы относительно распределения температур. Однако в
действительности демона Максвелла не существует, и молекулы газа, беспорядочно сталкиваясь, выравнивают скорости, создавая некую усредненную ситуацию, тяготеющую к статистической
www.koob.ru
равновероятности. Так система оказывается высокоэнтропийной, а движение отдельной молекулы
газа непредсказуемым.
Высокая энтропийность системы, которую представляют собой буквы на клавиатуре пишущей
Читать дальше