Informationsteori kring diskreta och kontinuerliga variabler: Entropi, Krafts-olikhet, relativ entropi, redundans , ömsesidig information, asymptotisk ekvipartition.
Förlustfri kodning: Icke-adaptiva koder: Shannon, Huffmann, aritmetiska koder. Universella och adaptiva koder. Ziv-Lempel- koder.
Rate-distortion teori: Rate-distortion funktionen, Shannons nedre gräns, resursfördelning över oberoende variabler, omvänd vattenpåfyllning, Blahut-algoritmen.
Höghastighetskvantisering: Upplösningsbegränsad och entropibegränsad kvantisering. Skalär- och vektorkvantisering.
Låghastighetskvantisering: Lloyds algoritm för upplösningsbegränsade och entropibegränsade fall.
Transformkodning: Ortonormala transformer, transformkodningsvinst, Karhunen-Loeve-transformen, Energikoncentration.
Prediktiv kodning: MSE-optimal linjär prediktion, linjär prediktionsvinst, kodning av prediktionsfel.