本教程关注信息理论在统计学中的应用。被称为信息散度或Kullback-Leibler距离或相对熵的信息度量起着关键作用。涵盖的主题包括大偏差、假设检验、指数族的最大似然估计、列联表的分析以及具有“信息几何”背景的迭代算法。同时,还介绍了通用编码的理论,以及由通用编码理论驱动的最小描述长度原理的统计推理。
https://www.nowpublishers.com/article/Details/CIT-004