📖 术语库 · 信度

Cohen's κ 系数

κ 把原始一致率里的偶然成分扣掉。公式、.61-.80 甜点区与患病率悖论。

首页›术语库›Cohen's κ 系数

Cohen's κ = (观察一致率 − 偶然一致率)÷(1 − 偶然一致率)。它回答的是:我的评分人比抛硬币更一致吗?

🧮 计算公式

κ = (po − pe)/(1 − pe),po 为观察一致率,pe 为期望偶然一致率。

✏️ 算一遍

初筛卷与专家组的判定 90% 相同,但专家组 85% 的标签都压在同一侧——κ 只有 .41,高一致率是假象。

🎯 什么时候用

两个评分人、两类别(或少量有序类别)、中小样本:及格线判定、风险标记、标注质检。

⚠️ 常见坑

悖论在于:标签越偏斜,κ 越容易崩而一致率越高。两个都报;严重偏斜时改用 PABAK 或 Gwet's AC。

从业者常问

κ 多少可信?

.61-.80 为实质一致,.81 以上几乎完美;低于 .60 且标签偏斜时,先查基率再怪评分人。

κ 与一致率该报哪个?

一致率讨好,κ 保守。两个都报,并附 n 与标签分布。

把概念变成在线评估:Cohen's κ 系数

浏览模板 →

术语库

李克特量表 克隆巴赫α系数 重测信度 评分者间信度 ∞