Claude Shannon – Las Vegas
Claude Shannon’s development of information theory is the basis of the modern age and he used it to cheat at roulette and make money on..
Usuditi se reći da rešenje problema u razvoju telekomunikacija može da se opiše nulama i jedinicama bio je neobično kreativan potez. Nadovezati se na to tvrdnjom da je informacija koja se prenosi iz jedne tačke u drugu nezavisna od fizičkog nosioca bilo je revolucionarno. Sve zajedno, zvučalo je suludo, a iza svega je stajala čista matematika.
Američki matematičar Klod Šenon bio je tek dvadesetogodišnji student MIT-a kad je prvi put uvideo vezu između Bulove algebre i rešavanja numeričkih i logičkih problema digitalnih električnih kola. Dve decenije kasnije, 1948. godine, u tehničkom časopisu Bell Systems objavio je rad „Matematička teorija komunikacije“; delo od kapitalne važnosti za teoriju informacija, disciplinu u jeku napretka.
Šenon je matematičkim jezikom napisao jedinstvenu teoriju informacija i rešio dotadašnje nejasnoće. Od suštinskog je značaja bila činjenica da način prenošenja poruke nije bio važan; nije bila važna ni njena vrsta. Smatrao je da bilo kakav sadržaj može da se predstavi bitovima (binarnim ciframa). Bitove je proglasio jedinim relevantnim i usvojio ih kao osnovnu jedinicu mere teorije informacija.
Zahvaljujući Šenonu, ovo je jedna od retkih naučnih disciplina čiji je jasan početak moguće istorijski lokalizovati.
U Šenonovoj teoriji, sama informacija zavisila je od konteksta. Primera radi, ako se zovete Dragoslav i živite u Srbiji, vaše ime ne daje mnogo informacija, već je za identifikaciju potrebno i prezime. S druge strane, u Mongoliji bi sigurno bilo jasno o kome je reč samo na osnovu imena.
Matematičkim jezikom, kontekst je određen verovatnoćom poruke. U našem slučaju, naići na nekog Dragoslava u Mongoliji mnogo je manje verovatno nego naići na Dragoslava u Srbiji. Ako je pverovatnoća poruke, informacija se predstavlja kao 1/p.
Šenon je pokazao da, ako poruci dodamo dovoljno dodatnih bitova, oni bi pomogli ispravljanju grešaka uzrokovanih šumovima. U godinama koje su usledile, njegove ideje su se proširile na razne druge oblasti kao što su kriptografija, matematička verovatnoća i druge.
Neki tvrde da je Šenon napravio teoriju o prenosu signala. Međutim, kao što delimično vidimo, ona je gotovo čist matematički račun. Njene primene su moguće gde god su ispunjivi aksiomi koje je postavio i gde se korisnici susreću sa pitanjem koja poruka može, a koja ne može da se prenese.
Savremena literatura uglavnom zaobilazi matematički deo posla i predstavlja ove koncepte jednostavnim shematskim prikazima pod nazivom „Šenonov linearni model komunikacije“. Kao što je napomenuto, tačno je da je Šenon bio zaokupljen problemom prenosa informacije i reprodukcijom poruke koja se šalje iz jedne tačke u drugu. Međutim, ova teorija obezbeđuje mnogostran matematički račun; ne samo jedan, komunikacioni model.
Uočavanjem kako određena količina izbora u jednoj tački utiče na na one koji su doneti u drugoj tački, ova teorija postavlja fundamentalne granice na svim nivoima ljudske komunikacije.
izvor: Elementarijum
Claude Shannon’s development of information theory is the basis of the modern age and he used it to cheat at roulette and make money on..
The (Unspeakable) Ultimate Machine Claude Shannon invented the modern mathematical definition of information, casting it in terms of bits..
Shannon’s Juggling Theorem (F+D)H=(V+D)N F is the time a ball spends in the air (Flight) D is the time a ball spends in a hand (Dwell),..