Шеннон Клод Эльвуд

(Shannon Claude Elwood, Шэнан Клод Элвуд) (1916–2001) — отец-основатель электронной коммуникации, американский математик и инженер, автор математической теории и модели передачи информации в системах связи (модель коммуникации Шеннона–Уивера), ряда терминов КОК и теории коммуникации. Образование: Мичиганский университет, степени по математике и электротехнике (1936), докторская степень по математике и магистерская — по электротехнике в Массачусетском технологическом институте (1940). Многолетняя работа Шеннона в компании Bell Telephone Laboratories была связана с электронными цепями и устройствами, работающими на основе представления информации в виде последовательности нулей и единиц и двоичной системы счисления. Вклад Шеннона в разработку цифровых компьютеров касается их важнейших функций. Он предложил использовать цифровые релейные цепи, во-первых, для выполнения сложных вычислений, включающих не только математические, но и логические операции; во-вторых, для передачи информации внутри и между компьютерами. Хотя первоначально задачей Шеннона было улучшение телефонной и телеграфной связи, его вывод о необходимости «упаковки» передаваемой информации для снижения потерь сыграл решающую роль в создании электронных сетей. Пакетная переда ча данных используется в них до сих пор, в том числе в мобильном интернете, и включает передачу исходных данных небольшими блоками; сборку полученных данных в надлежащем порядке; проверку данных после сборки на наличие ошибок. Во время Второй мировой войны Шеннон вместе с Норбертом Винером и Уорреном Уилером участвовал в работах по созданию электрических самонаводящихся систем управления зенитным огнем, а также криптографических систем с коррекцией ошибок кодирования, что, по его собственному выражению, «подтолкнуло» его к созданию математической теории коммуникации. В рамках данной теории он предложил модель технически опосредованной коммуникации (модель Шеннона–Уивера), определил «бит» как минимальную единицу объема информации и меру информации через «информационную энтропию». Полезная информация и энтропия (шум) связаны в рамках данной модели соотношением: информация – энтропия = 1. Если полученное сообщение в точности совпадает с отправленным, энтропия равна 0, а количество правильно переданной информации 1. Чем больше отличий, тем меньше количество переданной правильно информации. На основе этого определения во второй половине 1950-х гг. Шеннон доказал теорему о пропускной способности каналов связи. Согласно теореме, всякий зашумленный канал характеризуется своей предельной скоростью передачи информации, называемой пределом Шеннона. При скоростях передачи выше этого предела неизбежны ошибки в передаваемой информации. Теорема не могла быть проверена на практике в те годы, когда была доказана, т. к. ламповая электроника имела слишком низкий предел Шеннона и сколько-нибудь значительные объемы информации не могли передаваться без ошибок. Однако с появление высокоскоростных микросхем и каналов связи проблема высокой точности передачи практически любых объемов информации была решена. Определение информационной энтропии Шеннона впоследствии было также использовано для измерения связей между категориальными переменными (теоретико-информационные меры связи).
Литература Шеннон К. Работы по теории информации и кибернетике. М.: Изд. иностр. лит. 1963. Shannon C. E. Collected Papers. NewYork: IEEE Press, 1992. О. Терещенко