最新

AI 怎么生成多选题题库

让模型出题看着简单,真用起来常发现选项矛盾、答案对不上原文。这篇讲源材料怎么切、格式怎么定、出完怎么逐题核验。

让模型出题看着简单,真拿去用就会发现选项互相矛盾、答案和原文对不上。问题多半不在模型,而在源材料怎么给、格式怎么定、出完怎么核。这篇讲一套能复现的流程。

入口在哪

  • 出题靠的是对话式大模型,或者带文档解析功能的同类工具。入口就是对话框,不是某个专门的题库模块。
  • 前提是先有源材料。教材章节、产品手册、培训讲稿、条款原文都行。没有源材料,模型只能凭印象编。
  • 支持上传文件的工具可以直接把文档交给它;不支持的就自己先切片,一次喂一小段。
  • 题目最后要落到表格或者题库系统里,所以输出格式在第一步就得定死,别等出完再整理。

具体步骤

  1. 切分源材料。按知识点切成一小段一小段,每段只讲一个概念,长度控制在一屏能读完。整本书一次丢进去,出的题会全堆在开头。
  2. 定题型和分布。选择题、判断题、填空题各占多少,难易各占多少,先写清楚,别让模型自己决定。
  3. 定输出格式。一题一行,列固定成题干、选项、正确答案、依据原文的一句、知识点标签,并要求它只输出这个格式,不加解释。
  4. 先出五道试格式。确认能直接粘进你的工具、列没有错位,再往下批量出。
  5. 分批出题。每批只针对一段材料,出完立刻存档。上下文越滚越长,后面的质量会明显下滑。
  6. 要求标注出处。每道题都要指向源材料里的原句,标不出出处的题直接作废。
  7. 人工复核。先按出处逐条比对,再抽一部分自己答一遍,答不对的题要么改要么删。

几个坑

  • 不给源材料直接让它出题。它会编出看起来很像的选项和答案。
  • 一次喂太多。后面的材料被忽略,题目全落在前几页。
  • 格式说得含糊。只说「出几道题」,拿回来的是散文,还得手工拆。
  • 选项里出现「以上都对」这类写法。靠排除法就能猜中,考不出掌握程度。
  • 否定式题干。让你选出不正确的一项,模型和人一样容易看错,答案经常反着给。
  • 同一知识点反复出。看着题量很大,实际覆盖很窄。
  • 答案和出处对不上。这是最常见也最难发现的一条,必须逐条比对原文。
  • 数字和单位出错。参数、剂量、期限类的题目要单独复核,这类错误最容易被直接带进使用现场。

怎么验证

  • 出处核对。随机抽一部分题,按标注的原文位置找过去,确认答案确实来自那里。
  • 自答测试。把题干和选项单独发给模型,不给答案,让它再答一遍。两次不一致的题挑出来人工判断。
  • 覆盖统计。按知识点标签数一遍,看有没有整段材料一道题都没出。
  • 干扰项检查。错误选项如果极其荒谬,说明这题没有区分度。
  • 连着通读二十道。看有没有重复的题干结构和雷同的选项。
  • 换人复核。自己出的题自己看容易顺拐,找同事盲答一轮最有效。

常见问题

模型总是给出「以上都不对」这类选项怎么办

在格式要求里明确禁掉这几个选项,同时要求每个错误选项都对应一个具体的常见误解。只禁止不要求,它会换成别的偷懒写法,比如把正确项写得特别长。

怎么让它出更难或者更简单的题

用行为描述定难度,别用简单、困难这类形容词。比如要求错误选项必须是容易混淆的相邻概念,或者要求正确答案要跨两段材料才能得出。难度靠约束,不靠形容词。

出的题重复率太高怎么处理

把已经出过的题干和知识点标签一起回传,要求新一批避开这些。批与批之间隔开材料,重复会明显下降。同一段材料确实榨不出更多题时,就该换材料而不是降标准。

一句话总结:出题质量取决于三件事,源材料切得够细、格式定得够死、每道题都能在原文里找到出处。