EE376A - Information Theory I

Kursutvärdering 93/94

Gunnar Farnebäck


Kursansvarig:

Prof. J. Gill

Kurslitteratur:

Cover & Thomas, Elements of Information Theory, Wiley En utmärkt bok som ger en bra och lättläst framställning, utan att drabbas av det typiskt amerikanska fenomenet att upprepa allting gång på gång. Rekommenderas.

Kursinnehåll:

Definitions and properties of entropy and mutual information, source coding theorem, Huffman codes, arithmetic codes, channel capacity, channel coding theorem, differential entropy, the Gaussian channel, capacity of band-limited channels, definition of rate-distortion function, rate-distortion theorem.

Förkunskaper:

Sannolikhetslära, stationära stokastiska processer och/eller signalteori.

Föreläsningar:

Bra och trevliga föreläsningar. Liten grupp med mycket studentaktivitet (förvisso var det väl en person som gärna kunde varit lite mindre aktiv...).

Övrig undervisning:

Kursen var för liten för att ha en TA (15-20 personer) så det enda som fanns förutom föreläsningarna var professorns kontorstider vilka jag utnyttjade ett antal gånger för att fråga om inlämningsuppgifterna.

Inlämningsuppgifter:

8 omgånger med typiskt 5-6 uppgifter vardera. Mycket blandad svårighetsgrad, vissa uppgifter väldigt enkla medan andra knappt ens har känd lösning. De senare vad dock 'optional' och hade den roliga egenheten att poängen på dem lades till ovanpå maximum. På det sättet lyckades jag komma upp i en totalsumma omkring 20 poäng över ordinarie maximum. Förmodligen la jag mer tid än det var lönt på extrauppgifterna men de var oftast de roligaste. Inlämningsuppgifterna räknas med 20% vikt in i betyget.

Midterm:

75 minuter, open books, open notes. Inte precis gott om tid men inte alls lika stressigt som i EE363. Räknas med 30% vikt in i betyget.

Final:

3 timmar, open books, open notes. Förvånansvärt gott om tid. Jag fick till och med tillfälle att i lugn och ro gå igenom uppgifterna och ändå få några minuter över. Ganska lätt tenta. Räknas med 50% vikt in i betyget

Sammanfattning:

En bra och kul kurs. Den lär vara ännu bättre när Cover (som skrivit boken) har den men det kan inte jag verifiera.