10108

Количество информации (содержательный и алфавитный подходы)

Доклад

Информатика, кибернетика и программирование

Количество информации содержательный и алфавитный подходы. Первый подход называется содержательным. В нем информация рассматривается с субъективной точки зрения т.е. с точки зрения конкретного человека. В этом случае количество информации в сообщении не равно нулю е...

Русский

2013-03-21

17.25 KB

30 чел.

Количество информации (содержательный и алфавитный подходы).

Первый подход называется содержательным. В нем информация рассматривается с субъективной точки зрения, т.е. с точки зрения конкретного человека. В этом случае количество информации в сообщении не равно нулю, если сообщение пополняет знания человека.

Второй подход называется алфавитным. Этот способ не связывает количество информации с содержанием сообщения, и называется он алфавитным подходом. Алфавитный подход является объективным способом измерения информации в отличие от субъективного, содержательного, подхода. Следовательно, при алфавитном подходе к измерению информации количество информации от содержания не зависит. Количество информации зависит от объема текста (то есть от числа знаков в тексте).

Содержательный подход к измерению информации

Сообщение несет информацию для человека, если содержащиеся в нем сведения являются для него новыми и понятными. 
Единица измерения информации называется «бит». Её определение звучит так: Сообщение, уменьшающее неопределенность знаний в два раза, несет 1 бит информации.

Неопределенность знаний о некотором событии – это количество возможных результатов события(пример:монетка-2,кубик-6)

Сообщение о том, что произошло одно событие из двух равновероятных, несет один бит информации(с монеткой мы получили 1 бит информации).

Количество информации i, заключенное в этом сообщении, и число событий N связаны формулой:

2i = N(I=log2n, n-неопределённость)

Алфавитный подход к измерению информации

Алфавитный подход основан на том, что всякое сообщение можно закодировать с помощью конечной последовательности символов некоторого алфавита.

Алфавит — упорядоченный набор символов, используемый для кодирования сообщений на некотором языке.

Мощность алфавита — количество символов алфавита.
Двоичный алфавит содержит 2 символа, его мощность равна двум.
Сообщения, записанные с помощью символов ASCII, используют алфавит из 256 символов. Сообщения, записанные по системе UNICODE, используют алфавит из 65 536 символов.

Чтобы определить объем информации в сообщении при алфавитном подходе, нужно последовательно решить задачи:

  1. Определить количество информации (i) в одном символе по формуле 2i = N, где N — мощность алфавита
  2. Определить количество символов в сообщении (m)
  3. Вычислить объем информации по формуле: I = i * K.

Количество информации во всем тексте (I=log2n), состоящем из K символов, равно произведению информационного веса символа на К:

I = i * К.


 

А также другие работы, которые могут Вас заинтересовать

23682. ДВА ПОДХОДА К ЧЕЛОВЕКУ В СОЦИАЛЬНОЙ ТЕОРИИ 252.5 KB
  Трудно предсказать как пойдет дальше процесс самоутверждения экономической теории и социологии всякая популярность не вечна но сегодня обе дисциплины переместились в центр внимания и возникла необходимость определения их методологических границ. В нашем распоряжении уже имеются примеры удачного описания эволюции представлений о человеке в экономической теории. Кратко ознакомившись с этими этапами в первых двух лекциях следуя сначала за экономистами а затем за социологами в третьей лекции мы перейдем к исходному определению предмета...
23683. ХОЗЯЙСТВЕННАЯ МОТИВАЦИЯ И ТИПЫ РАЦИОНАЛЬНОСТИ 157 KB
  ХОЗЯЙСТВЕННАЯ МОТИВАЦИЯ И ТИПЫ РАЦИОНАЛЬНОСТИ После определения сравнительных контуров экономикотеоретического и экономикосоциологического подходов следует подробнее остановиться на одном из наиболее сложных вопросов характере мотивации поведения человека в экономике. Если некое благо оказывается значимым желаемым для человека то оно превращается в стимул внешний объект стремления актуализированную потребность. Когда же импульс стремления к этому объекту проходит через сознание человека стимул перерастает в мотив внутреннее...
23684. ПРЕДПРИНИМАТЕЛЬСТВО КАК ЭКОНОМИЧЕСКАЯ ФУНКЦИЯ И ИСТОРИЧЕСКИЙ ФЕНОМЕН 99.5 KB
  ПРЕДПРИНИМАТЕЛЬСТВО КАК ЭКОНОМИЧЕСКАЯ ФУНКЦИЯ И ИСТОРИЧЕСКИЙ ФЕНОМЕН €œЭкономический человек€ в политической экономии впервые появляется в качестве предпринимателя и под ним подразумевается отнюдь не €œсредний€ человек а именно предприниматель. Предпринимательство относится к числу понятий чрезвычайно богатых по своему содержанию и привлекает внимание целого ряда исследовательских дисциплин. Задача данной и последующей лекций рассмотреть предпринимательство с различных точек зрения: экономиста психолога социолога....
23685. ПРЕДПРИНИМАТЕЛИ КАК СОВОКУПНОСТЬ СОЦИАЛЬНЫХ ГРУПП 100 KB
  Не станем отрицать существования €œприродных€ €œпсихологических€ предпринимателей этих неуемных энтузиастов постоянно генерирующих организационные проекты; начинающих новое предприятие еще не успев реализовать предыдущую идею и оставляющих свое детище на чужое попечение в случае его успеха. В противовес функциональному подходу социологи чаще опираются на структурный подход выделяя предпринимателей как социальный слой21. Принципиальные различия между группами предпринимателей связаны с масштабами и сферой хозяйствования его...
23686. ЧЕЛОВЕК В ХОЗЯЙСТВЕННОЙ ОРГАНИЗАЦИИ 147 KB
  И задачей данной лекции является определение ее ключевых признаков рассмотрение основных экономических и социологических подходов к хозяйственной организации. Будучи продуктом социального и экономического действия индивидов организации обретают особую ранее не существовавшую независимость и образуют те структурные рамки в которых теперь развивается весомая часть всякой хозяйственной деятельности. Несмотря на важность организационного переустройства экономики вклад экономистов основного потока в теорию организации оказался достаточно...
23687. Краткие теоретические сведения и требования к электротехническим сталям 157.5 KB
  Удельные потери в стали слагаются из потерь от гистерезиса и вихревых токов. В соответствии с назначением выпускаемые горячекатаные и холоднокатаные стали разделяются на два класса: изотропные и анизотропные. Изотропные – все марки малотекстурованной стали с анизотропией магнитных свойств ограниченной определенным уровнем и марки горячекатаной стали имеющие слабо выраженную текстуру. Изотропные электротехнические стали по степени легирования кремнием разделяются на шесть групп указанных в табл.
23688. Оптимизация технологического процесса нитрации с детальной разработкой фазы кислотоотжима нитроцеллюлозы на центрифуге 662 KB
  Легкость воспламенения, возможность превращения путем желатинизации в медленногорящий материал, активный кислородный баланс молекулы, выделение большого количества газов при разложении и доступность исходных материалов объясняют применение нитратов целлюлозы для производства бездымного пороха.
23689. Внутрипартийная борьба. Борьба за власть. Репрессии и большой террор 145.5 KB
  Между приступами болезни Ленин диктовал письма и статьи излагая в них свои мысли о дальнейшем развитии страны и задачах партии. В Письме к съезду названным впоследствии Завещание Ленина Ленин дал характеристики шести видным членам ЦК партии от взаимоотношения которых зависело единство партии и то что нужно увеличить количество большевиков с десятка и до сотни тысяч. О Бухарине: Бухарин не только ценнейший и крупнейший теоретик партии он также законно считается любимцем всей партии но его теоретические воззрения очень с большим...
23690. Растровое кодирование графической информации 23.89 KB
  1 слайд 2. 2 слайд В компьютере мы можем хранить всю информацию а где именно в памяти 3 слайд. 4 слайд Что же вы хотите узнать при изучении данного вопроса 5 слайд Мы узнаем как же кодируется графическая информация в памяти компьютера. 6 слайд.