Mérési adatok (részletes kifejtését)

A válasz a kérdésre, hogy „hogyan kell mérni az információ?” Ez attól függ, mit értünk információkat. Értékelésekor a beérkező információkat lehet szubjektív megközelítés: amennyire ez az információ érdekes vagy fontos számunkra. Ez a megközelítés vezet minket, hogy az a tény, hogy ugyanaz az információ lesz a különböző becslések. Próbáljuk elmagyarázni ezt az elképzelést.

Nézzük meg az álláspontot, hogy az információt az ember - a tudás. Ebből következik, hogy az üzenet tájékoztató jellegű, ha megtelik az emberi tudás. Például egy üzenetet, hogy a 2 * 2 = 4 informatív egy első osztályos, és informatív középiskolásoknak.

Így lehetetlen, hogy egyenlőségjelet tesznek a „információ” és a „tájékoztató üzenet”.

Ha az üzenet nem informatív az emberek. Az információk mennyisége azt a szempontból az ember eltűnik. Az információk mennyisége informatív üzenet nagyobb, mint nulla.

Üzenet információt hordoz az a személy, ha az információ benne foglalt új és érthető neki.

A kvantitatív mérési adatokat bemutatjuk a „tudás bizonytalanság csökkentése,” magyarázza azt a példát. Tegyük fel, hogy dobjon egy pénzérmét zagadyvaya esnek: fej vagy írás? Már csak két lehetőség lehetséges kimenetelét essek egy érmét. Sőt, ezek közül egyik sem megvannak a maga előnyei, mint a másik. Ebben az esetben, hogy egyformán valószínű.

Tehát, ebben az esetben, mielőtt a pénzfeldobást tudással kapcsolatos bizonytalanság az eredmény egyenlő kettő.

Kocka hat oldalán lehet egyenlő valószínűséggel ezek közül bármelyik. Ennélfogva, a bizonytalanság a tudás eredménye dobott kocka hat.

Egy másik példa: a sportoló síelő a verseny előtt sorsolással határozza meg annak sorszámát az elején. Ha a verseny szóban 100 sportoló, a sportoló tudás bizonytalansága a szoba száz.

Megjegyzendő, hogy míg az általunk bevezette a bizonytalanság példát egyformán valószínű eseményeket. De vedb események lehetnek nonequiprobability. Naprmer, egy nyilatkozatában az időjárás, az évszaktól függően, információkat, amelyek a hó vagy az eső, eltérő lehet a valószínűsége. Nyáron valószínűleg egy üzenetet az eső, télen - a hó, és lehet, hogy ugyanolyan valószínűséggel az átmeneti időszakban.

Ezen kívül vannak olyan „jelentős eseményeket” - eseményeket, melyek feltétlenül, mint a nappal és az éjszaka. Vannak „lehetetlen” események nem történt meg.

A mintákhoz visszatérve az érme. Miután kilép, és nézd meg, hogy van egy vizuális üzenet, hogy esett, például a sas. Ez volt a két lehetséges eseményeket. Bizonytalanság tudás megfeleződött: két lehetősége volt, volt egy. Így megtudja az eredményeket essek egy érmét, van egy bit információt.

Üzenet, hogy proihoshlo egy két egyformán valószínű események hordozza 1 bit információt.

És most egy ilyen probléma: a vizsga a hallgató kaphatja a négy fokozat: „kiváló”, „jó”, „megfelelő” és a „nem kielégítő”. Képzeljük el, hogy a barátja elment, hogy a vizsga. Sőt, azt megtanulja egyenetlenül és egyformán valószínű, hogy ezek közül bármelyik becsléseket. Aggódsz érte, várja az eredményt. Végül jött, és azt mondta, hogy megkapta a négy. Hány bit információt tartalmaz az üzenet?

Ahhoz, hogy erre a kérdésre válaszolni, akkor fokozatosan kap választ. Kérdéseket úgy, hogy minden válasz hozta egy bit információt, és így csökkentette a bizonytalanságot tudásunk megduplázódott.

Az első kérdés:
- Magasabb pontszám háromágyas?
- Igen!
Miután ez a válasz variációinak száma a felére csökkent. Csak a „4” és „5”. Kapott 1 bit információt.
A második kérdés:
- Van öt?
- Nem!
Tepe az eredmény teljesen világos. Az így kapott 1 egyéb bit információt. Összegezve, van két bit.

Egy üzenet, hogy egyike volt a négy egyformán valószínű események hordozza 2 bit információt.

Az általános esetben, hadd
N - a számos lehetséges eredménye az esemény, hogy a bizonytalanság.
Jelöljük i az információ mennyiségét az üzenetet, hogy proizroshlo egyik N eseményeket.
A kapcsolat ezen értékek között van kifejezve a következő képlettel:

Beszélve a „fontos” információt a számítógép az információt kapó, egyszerűen értelmetlen. Továbbra is felmérést végez információ mennyiségileg. Ha arra gondolunk, mint a mért értékeket a fizika, világossá válik, hogy mennyiségi semmit függ, hogy választott referencia. Ön tud nyújtani, hogy készítsen felmérést az információt, mintául véve a szavak száma, vagy a karakterek ebben a kiadványban. De mi tekinthető gépi szó, szimbólum vagy géppel, ha az információ kódolt egy számítógép jelek formájában két típusa van: mágnesezett - a mágnesezett vagy kikapcsolása, magasfeszültségű vagy alacsony. A matematikai modell elfogadott leírni a két állam, elég egyszerű: egy fogadott vel jelöljük száma 0, a másik 1. Ez a kódolás az úgynevezett bináris, a 0 és 1 számok nevezzük bit.

A karakterkészlet használható az adatok megjelenítésére, az úgynevezett ábécé. Így feltételezhető, hogy a gép két ábécé karaktereit. Általában az ábécé bykvy csak megértsék, hanem azért, mert a szöveg jelenik meg írásjeleket, számokat, konzolok, ők, mi is szerepel az ábécé.

A teljes száma alfanumerikus karakter az úgynevezett teljesítmény az ábécé. És jelöljük ezt az értéket a levél N.

Például a hatalom a magyar ábécé betűit 33, és ha tartalmazza a további karaktereket az ábécé, akkor kap egy ereje 54 ábécé.

Alapján a betűrendes megközelítés a mérési adatok is kimutatták, hogy a minimális számosságú az ábécé megfelelő információ átvitelére kettő. Ez ábécé nevezzük bináris kódot.

Képzeljük el, hogy kap egy szöveges szekvencia, egy karakter, mint egy papír szalag, kimászni a távíró. Tegyük fel, hogy az egyes szimbólumok megjelenő azonos valószínűséggel lehet bármilyen szimbólum ábécé. Így, ha minden helyzetben a szövegben egyaránt fogadni vagy N szimbólumokat. A bizonytalanság előfordulása egyes charset érték N. Ezért minden somvol medve i bit információt, amelyet a következő egyenletből számítható:

Az N = 54, a logorifmov táblázat, megkapjuk i = 5755 bit. Ez mennyire információt egy karakter a magyar ábécé!

Most, hogy megtalálják az információk mennyisége az egész szöveget, meg kell számolni a karakterek száma, és szorozzuk i

Következésképpen, ha a betűrendes alapuló módszerrel mérik az információk mennyisége a tartalommal kapcsolatos információkat független. Az információ mennyisége függ a szöveg mennyisége (vagyis a karakterek számát a szövegben) és monoSTU ábécé.

Ebből következik, hogy nem lehet összehasonlítani az információ mennyisége írott szövegek különböző nyelveken, de a kötet. Ezek különböznek a súly adatok egy karakter, mint a hatalom ábécé különböző nyelvek eltérő.