1. 链接
2. KL散度
2.1. 简介
KL散度就是相对熵，是两个概率分布间差异的非对称性度量
2.2. 定义
设$P(x)$与$Q(x)$是随机变量X上的两个概率分布，则在离散和连续变量的情形下，KL散度的定义分别为:
$KL(P||Q)=\sum P(x)log\frac{P(x)}{Q(x)}$
$KL(P||Q)=\int P(x)log\frac{P(x)}{Q(x)}dx$
3. 置信度
3.1. 置信水平/置信区间
置信水平(confidence level)是指特定个体对待定命题真实性相信的程度。置信水平是指总体参数值落在样本统计值某一区间的概率，而置信区间是指在某一置信水平下，样本统计值与总体参数值间误差范围。置信区间越大，置信水平越高。
read more
Comments