AI出题准不准?高质量出题是怎么做出来的

放大镜审阅试卷上的对错标记

2026 年的主流大模型,在出题范围被明确圈住的时候,已经很少再出事实性错误。一款工具准不准,差别落在模型交卷之后:有没有第二道审核,审得细不细,查出问题是修正还是原样交付。

懒人学霸的做法是每道题都过二审:出题模型交出的题,先让第二个模型不看答案自己做一遍,再把标准答案抛给它对账,能改的当场改,改不动的打回重出。

高质量出题的三个条件

条件做到了会怎样没做会怎样
范围锁死题扣着指定的知识点走,不会飘到还没教的章节裸写 prompt,超纲和偏题是最常见的问题
生成后复核答案错、条件缺、题干泄底这类问题在交付前被拦住模型一次输出直接交付,错了要靠用户自己发现
反馈闭环用户指出问题能当场核对、修正,并回流到出题策略反馈石沉大海,同样的错反复出现

第一条是知识库型产品的天然优势,第二条是拉开差距的地方,第三条决定长期质量会不会往上走。

懒人学霸的一道题要过几关

第一关:出题的范围是用户定的

每次出题下发给模型的是一组固定信息:知识点的名称与释义、这个知识库的出题侧重点、学科与年级、指定的题型与难度,以及这个知识点最近已经出过的 8 道题面(提示它避开,换角度问)。

模型不是「随便出点初二物理」,而是「按这条释义、这个难度、避开这几道,出一道题」。范围一窄,事实性错误和超纲的概率一起往下掉。

第二关:二审,先盲解再对账

题生成出来不直接交给用户,先交给第二个模型审一遍,两步走:

  1. 盲解:只给题面和选项,不给标准答案,让它自己作答,并评估这道题的难度。它要是回「无法作答」,说明题干缺条件、缺图或者自相矛盾,这道题直接打回重出。
  2. 对账:这时才把标准答案、讲解、知识点释义和难度要求抛给它,逐项核对——答案对不对、讲解和答案是不是一回事、有没有脱离知识点、答案是否唯一、题干有没有泄露答案、题型对不对得上、难度是否严重不符、有没有违背常识。

两步的顺序是刻意的。模型有维护自己结论的倾向:先让它给出自己的答案,再看到一个不一样的标准答案,它会去较真;顺序反过来先给答案,它多半跟着附和,错题就漏过去了。

对账之后三种结果:没问题原样放行;小毛病按原题型的格式回传修正后的题面、答案或讲解;设计上有硬伤、改不动的打回重出,重出的题再审一轮。单选、多选、判断、填空、简答这五种题型,每一道都走这一轮。

第三关:事后抽检,只记录不干预

最终采用的题还会异步送一个专做判断的模型打分:答案是否有误、是否脱离知识点、题干是否泄露答案、讲解是否自相矛盾、说了「如图」却没有图。

这一轮不改用户手上的题,作用是发现某类学科、某种题型上反复出现的问题,回过头改出题策略。质量会不会逐月变好,看的就是有没有这一层。

第四关:用户指出的问题能当场核对

每道题旁边都有「AI 讨论」。写下疑问,AI 会对照题干、选项、答案和讲解逐条复核,确实错了会承认并给出正确的,同时留一条记录交平台核查。

如果这个知识库是用户自己建的,问题又出在知识点释义上(漏了条件、范围写偏),讨论里可以直接改释义,之后这个知识点的出题就按新释义走。完整机制见使用文档的出题质量是怎么保证的。

常被担心的四类问题,各由哪一关挡住

问题类型表现挡在哪一关
知识性错误概念、公式、史实记错二审盲解:审核模型自己解一遍,答案对不上就修正或打回
逻辑性错误题干条件不足、无解或多解二审盲解:解不出来直接判「无法作答」,重出
超纲 / 偏题超出指定章节或难度第一关的范围约束 + 二审对账里的「脱离知识点」「难度严重不符」
格式瑕疵选项重复、题号错乱、解析敷衍卷面的题号、答题空、版式由排版引擎生成,不经过 AI;选项重复与讲解自相矛盾在二审和抽检里各查一次

选型时怎么判断一款工具有没有做这件事

产品页上通常不会写「我们有二审」,用三个办法看得出来:

  1. 同一个知识点连出十道题,看它会不会开始重复。有避让机制的产品,题面会持续换角度;没有的,三五道之后就开始绕圈。
  2. 挑两道有陷阱的题核对答案与讲解,重点看讲解和答案是不是一回事。只做一次生成的产品,这两者对不上的概率明显更高。
  3. 指出一道题的问题,看它怎么回应。能逐条复核、承认并给出修正的,背后有一套核对流程;只会道歉重出的,多半没有。

选型的其他检查点见AI出题软件哪个好,出题范围和难度怎么指挥见AI出题指令怎么写。

什么场景直接用,什么场景还要人过一眼

场景建议
日常练习、课后巩固、周测直接用
错题变式重练直接用,重点看变式题有没有扣住原考点
教师单元测验直接用,出完自己过一遍是排版和分值的事
期中 / 期末 / 模拟考命题AI 出初稿,答案与分值人工定稿
标准化考试的官方命题走命题流程,与用不用 AI 无关

后两行不是对 AI 的特殊要求。任何正式命题,哪怕全是老师手写的题,也要过审题、定分值、核答案这几道流程。把它当成「AI 不可靠所以要终审」是误读。

让出题更准的三件事

  1. 知识点释义写具体。出题只看释义里写了什么,所以要写清这个点考什么、关键规则是什么、容易错在哪,而不是只丢一个词条名。
  2. 用出题侧重点约定长期规格。要对标哪类考试、偏重哪种题型、哪些内容不考,写进知识库的出题侧重点,以后每次出题都会带上。
  3. 把错题接回复习。做错的题进错题本、出变式题重练,比纠结某一道题更能提分,做法见错题本整理方法。

五套真实练习卷的逐题拆解见懒人学霸出题质量怎么样。想自己验一轮的,注册送 10 题、首充 1 元再得 100 题,拿手上的教材在 app.lanrenxueba.com 出两套就有数了。

常见问题

AI出题靠谱吗?

在范围被知识点锁住、且生成后有二次审核的产品里,日常练习可以直接用。区别不在模型本身,而在产品有没有做第二道审核。懒人学霸的每道题都要过一轮「盲解—对账」,答案错、条件缺、题干泄底这类问题在交到用户手上之前就被修正或打回重出了。

AI出题的利与弊有哪些?

利:出题快、能按薄弱点定向出、同一个考点能一直出新题防背答案、客观题自动判分。弊主要集中在裸用通用聊天 AI 的场景:没有知识点约束容易超纲偏题,一次生成没有复核,错了只能靠自己发现。用知识库锁范围、生成后再审一轮的专用工具没有这两个问题。

AI 出题会改错题目吗?

会修正。二审查出答案或讲解有问题时,会按原题型的格式回传修正后的题;问题严重到改不动的,整道打回重出。用户在使用中指出的问题也能当场核对:AI 逐条复核,错了会承认并给出正确的,同时留记录交平台核查。

AI出题好用吗?和题库 App 比呢?

解决的是不同问题。题库 App 在固定题目里刷,题目是死的,刷两轮就开始背答案;AI 出题是学到哪出到哪,同一个知识点能出十道不同的题,难度和题型规格还能按你指定的考试来对标。要跟教材进度、出变式、打印批改一条龙,AI 出题工具更顺手。