更新于 2026年11月21日
要编写能够衡量知识掌握程度的选择题,需要做到三点。题干只提一个问题,不看选项也能读懂。正确答案无可争议。错误选项取自真实的常见错误,并且与正确答案形式一致。三个选项就足够了。其余工作,就是去掉那些让人不懂也能答对的提示。
是什么让选择题的题目可靠?
一道选择题由三部分组成:题干、正确答案和错误答案,也就是“干扰项”。美国医学考试机构 NBME 在其命题指南(2016年第4版)中,把题目的缺陷分为两类。一类会帮助熟悉选择题套路的考生。另一类会让题目因与考查主题无关的原因而变难。
这些缺陷会改变谁能通过考试。在Steven Downing 对四场医学考试的研究(2005年)中,36% 至 65% 的题目至少存在一处缺陷。这些题目比无缺陷的题目难 0 至 15 个百分点。在标准部分,共有 53% 的学生达到及格线,而在有缺陷的部分为 47%。
以下规则还参考了Haladyna、Downing 和 Rodriguez 于2002年验证的31条规则清单。NBME 和 Downing 来自医学教育领域,而非职业培训领域。这些规则针对的是只有一个正确答案的单选题。
如何编写选择题的题干?(规则1至4)
- 题干本身足以作答。遮住选项:懂的学员应当能给出正确答案(NBME 指南中的“cover the options”规则)。因此核心意思要放在题干里。
- 一道题只考一个培训要点。每道题检验的是模块的一个目标,而不是教材中的某个细枝末节。
- 不用否定句,或者将否定词加粗。Thomas Haladyna(2022年)不建议使用“以下哪项不是”和“除……外”。如果非用不可,就把否定词加粗,但不要太指望这一招:根据 NBME 指南,即使加粗,仍有考生会漏看“除……外”。
- 重复的内容放进题干。如果所有选项都以相同的词开头,就把这些词移到题干里。
以一家虚构的公司为例,其内部规定要求警报响起时禁止乘坐电梯。
修改前。以下哪项不是良好做法?A. 前往集合点。B. 乘坐电梯。C. 随手关门。D. 以上全部。
修改后。您在3楼时,火警警报响了。您如何下楼?A. 走最近的楼梯。B. 乘电梯,如果电梯马上就到。C. 先回办公桌,再走主楼梯。
修改前,不看选项,题干根本没有提出任何问题(规则1)。题干是否定句(规则3),而且在否定句之后,“以上全部”毫无意义(规则8)。修改后,题干可以独立理解,每个错误选项都对应一种真实的本能反应:节省时间、取回个人物品。
如何写出好的错误选项?(规则5至8)
- 错误选项取自真实的错误。从培训中听到的混淆点和想当然的看法入手。没人选的错误选项毫无用处;而针对性的错误则能给出精准的反馈(参见分数之后,反馈)。
- 长度、形式、语法保持一致。NBME 指南把更长、更精确或更完整的正确答案,或者唯一与题干语法一致的答案,都列为提示线索。
- 不用“总是”,也不用“从不”。这类绝对化的词同样被 NBME 列为线索:熟悉套路的考生什么都不懂也会排除它们。反过来,“有时”或“可能”会让几乎所有选项都说得通。
- 不用“以上全部”,也不用“以上都不是”。Haladyna 不建议使用,因为它们会给出提示。NBME 指南认为,当题目要求做判断时,“以上都不是”存在问题。
还是这家公司,来看一道关于报销单的题。
修改前。报销单应在多长时间内提交?A. 在费用发生后30天内,并将扫描的凭证上传到管理工具中。B. 从不。C. 总是当天。D. 想什么时候交就什么时候交。
修改后。根据公司流程,您应在多长时间内提交报销单?A. 费用发生后30天。B. 月底后30天。C. 费用发生后60天。
修改前,正确答案凭长度就能认出来(规则6),“从不”和“总是”不用懂也能排除(规则7),“想什么时候交就什么时候交”没有人会选(规则5)。修改后,各选项形式一致,两个错误选项都是真实的混淆:月底,以及前雇主的期限。
应该给几个选项,正确答案放在哪里?(规则9和10)
- 三个精心设计的选项就够了。根据Michael Rodriguez 的元分析(2005年,涵盖80年的研究),三个选项能让同样时间内出更多的题。内容覆盖更全面,又不影响分数的质量。Haladyna 认为,第4个和第5个选项很少有区分度,或者根本没人选。从五个减到三个时,要去掉没人选的那两个,而不是随便去掉两个。如果您有四个可信的选项,就都保留。
- 变换正确答案的位置。在整套测验中,正确答案不应总是落在B或C:2002年的清单把这一点列为规则。如果顺序无关紧要,采用中性顺序(时间顺序、数字顺序、字母顺序)可以避免出现规律。
只有三个选项时,蒙对的概率是三分之一:多出的题目正好弥补了这一点。
审核 AI 生成的测验:检查清单
请用以下8点审核每一道 AI 生成的题目,这些要点同样适用于手写的测验。
- 准确:正确答案依据的是您的文档,而不是 AI 的常识。
- 唯一:只有一个答案站得住脚,即使面对专家也是如此。
- 可独立阅读:不看选项也能读懂题干(规则1)。
- 有用:题目检验的是模块目标,而不是源文档中的细枝末节(规则2)。
- 无形式提示:正确答案既不是最长的,也不是最精确的(规则6)。
- 无呼应:题干中的词没有只在正确答案中重复出现。
- 无自动作答线索:没有“总是”“从不”“全部”“都不是”(规则7和8)。
- 分布均衡:在整套测验中,正确答案的位置有变化(规则10)。
Complement 的 AI 创作工具可根据您的文档生成章节末测验。每道题都可以修改,既可以手动修改,也可以使用“AI 修改”按钮:这份检查清单正是用于此环节的审核。随后,仪表盘会按章节显示测验通过率。所有人都答错或者所有人都答对的题目,应该最先复查。
想在根据您自己的文档生成的测验上试试这种审核:7天免费试用,无需绑定银行卡。
