, , : [2]
:
:
: , , .
.
, . , :
( ), : () ("" " ").
, , , : , : () () .
, . , 1 , .. , , .
, , , 1,5 , . , , .
1. . , , .
2. .
1. : .
2. : , . , .
3. , .
4. .
5. , .
. , , . , . - .
( ), , , , .
|
|
B-
b - ( b 2, 3, ) (), :
:
(b = 3) , () ( ) ( , ) () :
.
(b = 4) , () ( ) ( , ) (), :
.
(, q u, ), , (, , ), , . .
( ) , ( , ):
, , , .
, [3].
. . ( ) , . :
, , , , . , , :
:
, : ( , , , , ).
( ) , , .
|
|
, :
, , , . , , , 1. :
. , :
( ) , :
/ , , : .
.
1948 , , , , . : , , , .
, , A Mathematical Theory of Communication, Bell System Technical Journal 1948 .
:
- ?
- ?
- .
3. .
:
:
1. ?
2. .
3. , .
4. .
.
, :
= ,
:
I = H1-H2 (3.1)
,
=
. :
(3.2)
:
m :
().
:
(/),
() ,
, , :
1. . .
|
|
2. ( , ).
3. , , .
4. , , . .