Explore les origines et l'interprétation de l'entropie, en mettant l'accent sur son rôle dans la mesure du trouble et du contenu de l'information dans un système.
Explore le binning aléatoire dans la théorie de l'information avancée, en se concentrant sur l'attribution d'étiquettes basées sur la typicité et en atteignant des taux d'erreur négligeables dans le codage source.