检测分类问题的一致性指标, 模型预测和实际分类之间的一致性,依旧是说只能检测两个对象的分类结果
计算公式
kappa基于混淆矩阵计算,这里的混淆矩阵定义为$A_{i,j}$表示A标注为$i$并且B标注为$j$的数据个数
$$ \text { kappa }=\frac{p_{o}-p_{e}}{1-p_{e}} $$
$p_{o}=\frac{\text { 对角线元素之和 }}{\text { 整个矩阵元系之和 }}$, $p_{e}=\frac{\sum_{i} \text { 第 } i \text { 行元素之和*第 } i \text { 列元素之和 }}{\left(\sum \text { 矩阵所有元素 }\right)^{2}}$