Ћекции.ќрг


ѕоиск:




 атегории:

јстрономи€
Ѕиологи€
√еографи€
ƒругие €зыки
»нтернет
»нформатика
»стори€
 ультура
Ћитература
Ћогика
ћатематика
ћедицина
ћеханика
ќхрана труда
ѕедагогика
ѕолитика
ѕраво
ѕсихологи€
–елиги€
–иторика
—оциологи€
—порт
—троительство
“ехнологи€
“ранспорт
‘изика
‘илософи€
‘инансы
’ими€
Ёкологи€
Ёкономика
Ёлектроника

 

 

 

 


ѕон€тие количества информации




 

—войство полноты информации негласно предполагает, что имеетс€ возможность измер€ть количество информации.  акое количество информации содержитс€ в данной лекции, какое количество информации в попул€рной песенке? ќтветы на подобные вопросы не просты и не однозначны, так как во вс€кой информации присутствует субъективна€ компонента.

»нформационные сообщени€ могут рассматриватьс€ на трЄх уровн€х. Ќа синтаксическом уровне рассматриваютс€ только данные как последовательности символов. Ќа семантическом Ц анализируетс€ смысловое содержание сообщени€ по отношению к источнику. Ќа прагматическом Ц рассматриваетс€ потребительска€ ценность сообщени€ Ц отношение к получателю.

—амый простой способ измерени€ информации Ц объЄмный Ц это количество символов в сообщении. Ётот способ чувствителен к форме представлени€ сообщени€, так как, например, одно и то же число может записыватьс€ по-разному с использованием разных алфавитов: Ђвосемьї, 8, VIII или 1000 Ц в двоичной форме.

ѕри энтропийном подходе количеством информации называют числовую характеристику информации, отражающую ту степень неопределЄнности, котора€ исчезает после получени€ информации. “ак, бросание монеты может привести к одному из двух равноверо€тных состо€ний: орЄл или решка. ¬ результате броска неопределЄнность снимаетс€. ѕри числе равноверо€тных состо€ний N количество информации Ќ определ€етс€ по формуле ’артли:

Ќ =log2 N. (1.1)

 

ƒл€ неравноверо€тных состо€ний используетс€ формула Ўеннона:

(1.2)

где Ц веро€тность по€влени€ i -го символа.

«а единицу информации принимаетс€ один бит (англ. bit Ц binary digit Ц двоична€ цифра). Ёто количество информации, при котором неопределЄнность, т.е. количество вариантов выбора, уменьшаетс€ вдвое или, другими словами, это ответ на вопрос, требующий односложного разрешени€ Ц да или нет. «а единицу информации можно было бы выбрать количество информации, необходимое дл€ различени€, например, дес€ти равноверо€тных состо€ний. Ёто будет не двоична€ (бит), а дес€тична€ (дит) единица информации. ƒл€ получени€ количества информации в дитах следует заменить логарифм по основанию 2 дес€тичным логарифмом. ѕо аналогии, использу€ натуральный логарифм, можно определить количество информации в натах.

Ѕит Ц минимальна€ единица измерени€ информации. Ќа практике чаще примен€ютс€ более крупные единицы, например, байт, €вл€ющийс€ последовательностью из восьми бит. »менно восемь битов, или один байт, используетс€ дл€ того, чтобы закодировать символы алфавита, клавиши клавиатуры компьютера. ќдин байт также €вл€етс€ минимальной единицей адресуемой пам€ти компьютера, т.е. обратитьс€ в пам€ть можно к байту, а не биту.

Ўироко используютс€ ещЄ более крупные производные единицы информации:

1  илобайт ( байт) = 1024 байт = 210 байт = 213 бит,

1 ћегабайт (ћбайт) = 1024  байт = 220 байт = 223 бит,

1 √игабайт (√байт) = 1024 ћбайт = 230 байт = 233 бит,

1 “ерабайт (“байт) = 1024 √байт = 240 байт = 243 бит.

 





ѕоделитьс€ с друзь€ми:


ƒата добавлени€: 2015-01-29; ћы поможем в написании ваших работ!; просмотров: 2005 | Ќарушение авторских прав


ѕоиск на сайте:

Ћучшие изречени€:

≈сли вы думаете, что на что-то способны, вы правы; если думаете, что у вас ничего не получитс€ - вы тоже правы. © √енри ‘орд
==> читать все изречени€...

1272 - | 1307 -


© 2015-2024 lektsii.org -  онтакты - ѕоследнее добавление

√ен: 0.008 с.