Dakle, predmet je Teorija informacija i kodova i nisam znao na kojem podforumu da postavim temu, ali posto se sve svodi na kombinatoriku, kapiram da je odje najpodobnije.
Zadatak je:
H(x)=2 Shenona. Koliko ova entropija iznosi u bitima? ili obrnuto
H(x)=3 bita. Koliko ova entropija iznosi u Shenonima?
Unaprijed hvala.
21.01.2008. u 17:06
Daniel011 Beograd
Član broj: 76088 Poruke: 1067 *.dynamic.sbb.co.yu.
Shannon je najmanja mera za količinu informacije i to je količina informacije koju nosi jedan bit (pod uslovom da su podjednake verovatnoće da taj bit ima vrednost 0 ili 1).
Niz od N bita nosi informaciju od N Shanona.
H(x)=p(x)*log(p(x)) , p(x) je vjerovatnoca pojavljivanja nekog simbola (jedinice ili nule npr. )
E sad, ako je logaritam sa osnovom 2 onda se H(x) predstavlja u bitima, a ako je logaritam sa osnovom e(epsilon) onda se H(x) predstavlja u shenonima. Barem smo tako mi ucili. Sad mene zanima kako da pretvorim to dvoje.
21.01.2008. u 21:06
Daniel011 Beograd
Član broj: 76088 Poruke: 1067 *.dynamic.sbb.co.yu.