Design Ai Benchmarking · Aperivue/medsci-skills

設計AI與專家對比評測方案

在正式收集評分前,審查AI系統與人類專家小組對比評測的研究設計,包括評分量表、校準題目、評審小組組建和評分者一致性目標,適合研究者在規劃AI評測或讀片研究前使用。

適合做什麼

  • 設計AI輸出與專家評分的量表
  • 為讀片研究規劃校準測試題
  • 制定評分者一致性達標標準

開源技能由原作者維護,知己AI 依原樣收錄並註明來源。效果取決於任務與資料是否相符。

試試這樣開始

幫我設計一個嚴謹的AI與專家對比評測研究方案。

下一件得意之作,從這裡開始。

一個問題、一份資料,或一個還沒想好的點子。