SPSS Kappa 分析：一致性检验结果怎么判断

Kappa 分析应同时看观察一致率、扣除机遇后的系数与区间，再判断它们能否满足研究用途。本文三位评价者采用逐对的简单 Cohen 系数；显著高于零只说明超出机遇水平，不等同于评价准确或已经达到应用要求。

一致性数据怎么排：同一行必须是同一个对象

以下结果来自本站演示数据（模拟生成，不代表真实研究结论）：完整表共 150 个对象，三位阅片者分别给出阴性、可疑或阳性判断。方法说明见Kappa一致性检验；本文讨论本站的配对报告，不描述其他软件的操作菜单。

列名	数据含义	配置前核对
阅片者甲判读	甲的分类判断	每个对象一项判断
阅片者乙判读	乙的分类判断	与甲逐行对应
阅片者丙判读	丙的分类判断	使用相同类别集合

三列的行次必须一致。把某位评价者单独排序后再拼表，会破坏对象配对；此时即使每列的类别频数仍然相同，配对一致性也已改变，单看各列分布无法发现这个错误。

本次三位评价者均使用了全部三类，数据没有缺失。类别是否互斥、评价过程是否独立、不同对象是否相互独立，仍需用研究记录说明；报告里的样本数和列联结构能帮助查资料，却不能事后恢复被破坏的设计。

Kappa 分析怎么做：先确认选择的是配对方法

1. 选择「Kappa一致性检验」，将三位评价者各自的判断列配置为分析变量，核对类别拼写与对象对应关系。
2. 本次使用简单 Cohen 方法，开始分析后会形成三个配对结果。若研究目标是多评价者总体一致性，应明确另一个方法的估计对象，避免把逐对平均误称为总体系数。
3. 先读主结果及区间，再结合观察一致率与类别分布解释。开通会员后可导出 Word / PDF 报告、使用 AI 解读。

下面截图保留本次报告的结论与数据概览入口，帮助核对方法名称和评价者数量。配对层面的判断仍需返回各行结果，报告中的整体概括不应覆盖某个配对的区间或特殊分歧。

一致性检验结果：点估计和区间各说明什么

甲与乙的 κ 为 0.680，95%CI 为 0.581～0.778；甲与丙为 0.720，95%CI 为 0.626～0.813；乙与丙的估计同甲乙相近，其区间为 0.582～0.778。区间反映抽样不确定性，两个配对的点估计不同并不自动证明它们之间存在统计学差异。

三个配对针对 κ=0 的原始检验均为 p<0.001。论文中应将“高于机遇水平”与“一致程度是否符合应用要求”分开：前者由当前检验回答，后者还取决于使用场景及预先规定的标准，尤其要考虑严重分歧带来的后果。

热力图把同一组配对结果放进对称矩阵，对角线是评价者与自身的比较。读图时应看非对角格，并结合主结果表的区间；对角格的满值并非额外的重复性研究证据。

一致率与kappa值：为什么两列数不同

甲乙的观察一致率为 0.7867，机遇一致率为 0.3342。前者数的是两人实际给出相同类别的比例，后者根据两人的边际类别分布计算；κ 在这两个量之间做机遇校正，所以它并非实际一致人数的百分比。

类别极不均衡时，较高的观察一致率也可能伴随较低的 κ。核对时应保留各评价者的类别分布和实际分歧位置，而不是只比较一个系数；本次类别使用较为均衡，仍没有理由据此宣布评价过程完全没有系统差异。

下面示意图给出整理分歧记录的顺序，它不为对象另行指定真实类别。若要找出分歧原因，研究中还需核查标注规则和原始记录，而不是直接用多数意见充当可信参照。

配对比较与研究报告怎样衔接

报告还提供 Holm 校正后的检验，三个配对在校正后均仍显著高于零。是否预先指定主要配对、怎样组织比较家族，应在分析方案里交代；显著性结果没有检验哪一位评价者“更正确”，也没有直接比较两项 κ 的差值。

下图补充不同研究问题的资料要求，用于限定论文结论的外推范围。准备后续研究时，可据此先确定需要收集什么资料，再决定使用哪类指标，而非把已有的一个系数用于回答全部问题。

对模拟对象的三位评价者判断进行逐对 Cohen 一致性分析，同时报告各配对系数、区间、观察一致率及类别构成。三个配对均检出高于机遇水平的一致性；结果仅评价当前对象与分类规则下的评价者间一致程度，未据此推断正确性或重复施测稳定性。

一致性结果常见错误

• 因甲丙的点估计较高，就说它显著优于甲乙：当前各行只检验自身系数与零的差异，没有估计两个配对系数之差，区间也不是该差值的区间。
• 把甲乙的观察一致率直接填到 κ 栏：对照本例观察一致率与机遇一致率，保留机遇校正后的主表系数；两列数回答的对象不同。
• 把这三行的平均值写成总体 Fleiss 结果：本次选的是逐对 Cohen 方法，平均只是配对结果的汇总，未重新估计多评价者总体参数。
• 按三条原始显著行认定所有应用要求都已达到：回查每行区间与具体用途，先明确要保障哪一种判断及误判后果；本次没有执行针对某个应用下限的达标检验。

延伸阅读

• Kappa一致性检验