Zeleo bih da pokrenem ovde diskusiju o Senonovoj informacionoj entropiji i njenoj vezi sa statistickom entropijom. Cini mi se da jos ne uvidjam njen pravi znacaj i voleo bih da u nekoj diskusiji produbim neko znanje, a i zainteresujem ljude s ovog Foruma da se malo ukljuce.
http://en.wikipedia.org/wiki/Information_entropy
Iz ovog teksta se vidi da Senonova entropija ima veze sa informatikom (kodovanjem). Te bi bilo lepo ako bi neko to mogao da mi pojasni od informaticara npr.
Statisticka entropija se u kvantnoj statistici definise kao
uz uslove da su
nenegativne i da je 
.
Informaciona entropija se definise kao
gde su
verovatnoce za odigravanje dogadjaja iz nekog konacnog skupa 
Pa ako su svi dogadjaji iz skupa
podjednako verovatni sistem je maksimalno neuredjen, a samim tim je informaciona entropija, gore definisana, maksimalna. I trivijalno sledi
Iz maksimalnosti entropije se izvode kvantno- statisticki ansambli. Prva varijacija nula, druga veca od nule. (varijacija se koristi jer kod ansambala zamrznemo vreme i posmatramo mozaik) Mene zanima vise o ovoj vezi. I kolko je informaciona entropija bitna za statisticku fiziku.
http://en.wikipedia.org/wiki/Information_entropy
Iz ovog teksta se vidi da Senonova entropija ima veze sa informatikom (kodovanjem). Te bi bilo lepo ako bi neko to mogao da mi pojasni od informaticara npr.
Statisticka entropija se u kvantnoj statistici definise kao
uz uslove da su
nenegativne i da je .Informaciona entropija se definise kao
gde su
verovatnoce za odigravanje dogadjaja iz nekog konacnog skupa Pa ako su svi dogadjaji iz skupa
podjednako verovatni sistem je maksimalno neuredjen, a samim tim je informaciona entropija, gore definisana, maksimalna. I trivijalno slediIz maksimalnosti entropije se izvode kvantno- statisticki ansambli. Prva varijacija nula, druga veca od nule. (varijacija se koristi jer kod ansambala zamrznemo vreme i posmatramo mozaik) Mene zanima vise o ovoj vezi. I kolko je informaciona entropija bitna za statisticku fiziku.