На головну

глава 2

  1. Аліментні обов'язки батьків і дітей (глава 13).
  2. У більшості суб'єктів Російської Федерації, де інститут уповноваженого з прав людини відсутня, при главах регіонів створені комісії з прав людини.
  3. Вступна глава
  4. ВСТУПНА ГЛАВА
  5. Глава!. ЗАГАЛЬНА ТЕОРІЯ ДЕРЖАВНОЇ ПОЗИКИ
  6. Глава 1
  7. ГЛАВА 1

то при її киданні ймовірності випадання «орла» і «решки» будуть відрізнятися.

Формулу для обчислення кількості інформації в разі різних ймовірностей подій запропонував К. Шеннон в 1948 році. У цьому випадку кількість інформації визначається за формулою:

U С2-2) / = - ?>, log2p "

$ 7 м -

де / - кількість інформації;

N - Кількість можливих подій;

р1 - Ймовірність i-го події.

Наприклад, нехай при киданні несиметричною чотиригранної піраміди ймовірності окремих подій дорівнюватимуть:

Pl = 1/2, р2 = 1/4, р3 = 1/8, р4 = 1/8. Тоді кількість інформації, яку ми отримаємо після реалізації одного з них, можна розрахувати за формулою (2.2):

I = - (L / 2-log2l / 2 + l / 4-log2l / 4 + l / 8-log2l / 8 + l / 8-log2l / 8) = = (1/2 + 2/4 + 3/8 + 3/8) бітів = 14/8 бітів = 1,75 біта. Цей підхід до визначення кількості інформації називається імовірнісним.

Для приватного, але широко поширеного і розглянутого вище випадку, коли події рівноймовірно (pt= 1 / iV), величину кількості інформації / можна розрахувати за формулою:

1 * (2.3) / = -У-1од2 - = 1од2Л /.

За формулою (2.3) можна визначити, наприклад, кількість інформації, яку ми отримаємо при киданні симетричною і однорідної чотиригранної піраміди:

/ = Log24 = 2 біта. Таким чином, при киданні симетричною пірамідки, коли події рівноймовірно, ми отримаємо більшу кількість інформації (2 біта), ніж при киданні несиметричною (1,75 біта), коли події неравновероятни.




Попередня   46   47   48   49   50   51   52   53   54   55   56   57   58   59   60   61   Наступна

Глава 1 | Прикладне програмне забезпечення | Комп'ютерні віруси і антивірусні програми | Глава 1 | Глава 1 | Інформація. Двійкове кодування інформації | Інформація. Двійкове кодування інформації | незнання | глава 2 | Інформація. Двійкове кодування інформації |

© um.co.ua - учбові матеріали та реферати