Design Ai Benchmarking · Aperivue/medsci-skills

设计AI与专家对比评测方案

在正式收集评分前,审查AI系统与人类专家小组对比评测的研究设计,包括评分量表、校准题目、评审小组组建和评分者一致性目标,适合研究者在开展AI评测或读片研究前使用。

适合做什么

  • 设计AI输出与专家评分的量表
  • 为读片研究规划校准测试题
  • 制定评分者一致性达标标准

开源技能由原作者维护,知己AI 按原样收录并注明来源。效果取决于任务与资料是否匹配。

试试这样开始

帮我设计一个严谨的AI与专家对比评测研究方案。

下一件得意之作,从这里开始。

一个问题、一份资料,或一个还没想好的点子。