量表信效度检验与报告

量表信效度检验与报告

1. 适用与不适用场景

适用：

• 自编量表/问卷，需要说明它测得准不准
• 引进或翻译国外量表，需要说明翻译程序与在本样本中的信效度
• 修订已有量表，需要报告修订后的结构是否成立
• 投稿或答辩被要求"补充信效度证据"
• 已收完数据，要写"研究工具"或"测量质量"那一节

不适用，别硬套：

跟相邻 Skill 的分工：instrument-design 管题目怎么编出来，本 Skill 管编出来之后怎么证明它可用，analysis-plan 管证明之后怎么用它做分析。三者依次衔接，不重叠。

---

2. 开工前必须确认的信息

样本拆分的硬要求（最常被忽略）：

探索性因子分析与验证性因子分析不应使用同一批样本。用同一批样本做完探索再做验证，等于让数据自己验证自己，拟合指标会好看但没有意义。三种合规做法：

1. 收集两个独立样本，样本一做探索、样本二做验证（最优）
2. 一个大样本随机对半拆，一半探索、一半验证（可接受，须写明随机拆分）
3. 只有一个样本时，报告交叉验证的做法并明确标注这一局限（降级）

重要说明：本 Skill 中出现的全部阈值（0.70、0.50、0.90、0.08 等）均为常用经验参考值，学界对其是否适用于所有情境存在争议。使用时须核对原始出处〔待核〕，并对照目标期刊或本学科的惯例。阈值是参考，不是及格线——达到阈值不等于质量合格，未达到也不等于报废，关键是给出解释。

---

3. 输出结构（七段）

第 1 段：量表来源与合法性说明

翻译引进量表的报告写法模板：

本研究采用 〔量表原名〕（〔第一作者, 年份〕）的中文版。翻译程序包括：由两名研究者独立正译，经讨论形成初稿；由一名未见过原量表的译者回译；比对回译稿与原稿后修订；由 〔人数〕 名专家评定内容效度；最后在 〔人数〕 人的小样本中预试并修订表述。量表使用已获原作者授权。

做了几步就写几步。 只做了正译却写成"严格遵循翻译程序"，是评审一眼能看穿的问题。

第 2 段：题目净化（项目分析）

按顺序列出每一道待考察的题，逐条给判据：

删除题项的判据（须同时满足统计理由与内容理由）：

• 题总相关过低（常用参考值 < 0.30）
• 删除该题后所属维度的 α 明显上升
• 因子载荷过低（常用参考值 < 0.40）
• 交叉载荷差值过小（常用参考值 < 0.20，即在两个因子上载荷接近，区分不开）

铁律：不许只看数字删题。 每删一题都要给出内容上的理由（语义重复、表述歧义、超出构念范围），并在正文写明。反过来也成立——不许为了把 α 提到 0.70 以上而连续删题，这种做法会让量表变得越来越窄，且属于事后操纵。

第 3 段：结构效度

(a) 探索性因子分析（仅在维度结构尚未确定时做）

必报项清单：

(b) 验证性因子分析（维度结构已有假设时做）

必报项清单：

必须写明的两条：

1. 估计方法——数据不满足多元正态时，最大似然估计会低估标准误并扭曲拟合指标，应改用稳健估计（如 MLR）并报告稳健版本的拟合指标
2. 模型修正的做法——若根据修正指数添加残差相关，必须写明改了几处、依据是什么。只报修正后的拟合指标、不报原始模型，属于选择性报告。

第 4 段：信度

关于 α 的两条必须写清的事实：

1. α 是内部一致性的下界估计，不是"信度"本身。 α 高不代表量表单维——题数足够多时，即使测量多个不同构念，α 也可能很高。因此报 α 必须同时报告维度结构证据，单报一个 α 不够。
2. α 随题数变化。 题少会低估，题多会虚高。题项少于 4 道时不宜只看 α，应同时报 ω 或题项间平均相关。

计分方式为二分类或等级数很少时，α 会低估内部一致性，应改用对应的 ordinal 版本或 ω，并写明理由。

第 5 段：效度（内容效度与效标效度）

(a) 内容效度

必须写明专家人数、专业背景、评定的是哪个维度（相关性、清晰度还是必要性）。

(b) 聚合效度与区分效度（基于 CFA）

(c) 效标关联效度

须写明效标是什么、为什么选它、预期方向、实测相关。同时必须说明效标数据是否来自同一来源——自变量与效标都来自同一份自陈问卷时，相关会被共同方法偏差抬高，须说明是否已作处理（口径照 analysis-plan）。

第 6 段：测量不变性（多群组比较时才做）

若研究要比较不同群体（性别、年级、城乡），必须检验量表在不同群体间测量的是不是同一个东西，否则组间均值比较没有意义。

逐级检验，每级报告拟合变化：

未达到某级不变性时，不许跨组比较该层级对应的统计量。 载荷不变性未达成却比较相关，截距不变性未达成却比较均值——这是多群组研究里最常见的硬伤。

第 7 段：可直接抄进方法章的写法

中文模板：

本研究采用 〔量表名称〕（〔出处〕）测量 〔构念〕，共 〔题数〕 题，采用 〔级〕 级李克特计分，含 〔数量〕 道反向计分题。量表在本样本中的 Cronbach's α 为 〔值〕，McDonald's ω 为 〔值〕。验证性因子分析结果显示模型拟合良好：χ²/df = 〔值〕，CFI = 〔值〕，TLI = 〔值〕，RMSEA = 〔值〕（90% CI 〔区间〕），SRMR = 〔值〕，各题标准化载荷介于 〔最小〕 至 〔最大〕 之间。组合信度 CR 为 〔值〕，平均方差抽取量 AVE 为 〔值〕，表明聚合效度良好；〔区分效度检验方式与结果〕。〔若有多群组比较，补测量不变性结果〕。

英文模板：

〔Construct〕 was measured using the 〔scale name〕 (〔citation〕), comprising 〔n〕 items rated on a 〔k〕-point Likert scale, with 〔n〕 reverse-scored items. Internal consistency in the present sample was satisfactory (Cronbach's α = 〔value〕; McDonald's ω = 〔value〕). Confirmatory factor analysis indicated adequate model fit: χ²/df = 〔value〕, CFI = 〔value〕, TLI = 〔value〕, RMSEA = 〔value〕 (90% CI 〔range〕), SRMR = 〔value〕. Standardized factor loadings ranged from 〔min〕 to 〔max〕. Composite reliability was 〔value〕 and the average variance extracted was 〔value〕, supporting convergent validity; 〔discriminant validity evidence〕.

---

4. 必报指标速查（按量表来源分）

---

5. 铁律

1. 不报没做的分析。 没做验证性因子分析就不许写"结构效度良好"，只能写"本研究的样本量不足以进行验证性因子分析，结构效度证据有限"。
2. 探索与验证不得用同一批样本，除非按第 2 节三种做法之一处理并明确标注。
3. 不许只报修正后的模型。原始模型拟合差、靠修正指数改到好看，必须两个都报。
4. 不许为了达标而删题。 α 不够就删题、拟合不好就删题，都属于事后操纵，须指出。
5. 不虚构任何指标数值。 本 Skill 提供的是该报什么、怎么报，数值全部由用户实跑填入。
6. α 不等于信度，也不等于单维。 报 α 必须同时报维度结构证据。
7. 引进量表必须说明翻译程序与授权。 做了几步写几步，没获授权要提示版权风险。
8. 阈值是参考不是及格线，须核对原始出处〔待核〕并对照目标期刊惯例。
9. 多群组比较前必须做测量不变性，未达成对应层级不许比较对应统计量。
10. 拟合指标要报全。 只挑 CFI 和 RMSEA 报、隐去 TLI 和 SRMR，属于选择性报告。
11. 不服从多元正态时须用稳健估计，否则拟合指标与标准误都不可靠。

---

6. 常见错误对照

---

7. 降级路径

样本量不足（如有效样本少于 100）——不硬做多因子结构检验。改报：内部一致性、题总相关、与效标的相关，并明确写"受样本量限制，本研究未进行验证性因子分析，结构效度证据有限"，同时把这一条挂到具体结论上（格式照 discussion-writer）。

只有一个样本且已收完——做交叉验证：随机对半拆，一半探索一半验证，须写明这是权宜做法，结构稳定性需在后续研究中由独立样本确认。

量表为单维且题数少（3 到 4 题）——不报 α 作为唯一证据，改报题项间平均相关与 ω，并说明题数少时 α 会被低估。

既有成熟量表在本样本中拟合不佳——不许静悄悄换分析、也不许删题救拟合。改为：报告原始拟合，讨论可能原因（文化差异、样本特殊性、翻译问题），并写明这对结论的影响。

质性研究——不用信效度框架，改报可信性、可转移性、可靠性、可确认性，或报编码一致性百分比与编码员间协商过程，走 qual-coding。

二手数据——至少报本样本的内部一致性，并引用原量表信效度出处；样本量允许时补结构效度。

---

8. 交付前自检

• [ ] 量表来源、授权、翻译程序（引进时）已逐项写明，没做的步骤未被含糊带过
• [ ] 探索与验证的样本来源已说明，未出现同批样本兼任的情况（或已标注局限）
• [ ] 题目净化表逐题给出判据，每道删除的题都有统计理由加内容理由
• [ ] 结构效度必报项全：KMO、Bartlett、提取方法、旋转方法与理由、载荷范围、拟合指标全套
• [ ] RMSEA 已附 90% 置信区间
• [ ] 若做过模型修正，原始模型与修正后模型都已报告
• [ ] 信度除 α 外已报 ω 或 CR，并说明两者关系
• [ ] 聚合效度与区分效度均已报告，区分效度给出了完整矩阵或 HTMT
• [ ] 若有多群组比较，已报告逐级不变性结果
• [ ] 所有阈值处已标〔待核〕或已对照期刊惯例说明
• [ ] 中英文模板的填空位已标出，未替用户填虚构数值
• [ ] 全文未出现"信效度良好"这类无证据的概括句

9. 完整输出范例

见 references/worked-example.md——含一个翻译引进量表的完整七段报告，演示删题的双重理由、同批样本随机拆分的局限写法、测量不变性的硬规则，以及三处被拦下的处理（删题救 α、同批样本兼任探索与验证、跳过不变性直接比较均值）。范例中量表、题项与统计量均为占位，阈值标〔待核〕。