专家打分要跑几轮

专家打分要跑几轮

用专家打分做趋势判断,难点不在请人,而在什么时候停。轮次太少,意见没收敛;轮次太多,专家开始敷衍。停的时机,决定了结论能不能用。

三轮是常见配置

第一轮开放提问,收集判断和理由。第二轮给出汇总分布,请专家修正。第三轮只针对分歧最大的三项再问一次。多数议题在三轮内能形成可用结论。超过五轮,边际信息已经很少。

专家要覆盖三类人,一线操作者、管理者、外部顾问。全是管理者,判断会偏向预算和战略。全是外部顾问,又容易脱离实际。三类比例大致各占三分之一,名单和领域要写进报告。

匿名与反馈

全程匿名,只反馈分布和理由,不透露姓名。反馈里要包含中位数、四分位距和主要分歧点。只给平均分,专家无法判断自己的位置。反馈质量决定了后两轮有没有意义。

什么时候停

四分位距连续一轮缩小到 1 分以内,或中位数不再变化,就可以停止。分歧始终不收敛的议题,单独列为待观察项,不强行给结论。强行统一,往往是把分歧藏起来。

记录下来

每轮保存原始打分、理由和汇总结果。最终报告写清样本量、轮次和未收敛项。没有这些信息的预测,事后无法复盘,也无法判断可信度。报告留档,下一次预测才有参照。

本文为行业观察与科普,不构成医疗建议;具体方案请以正规医疗机构面诊为准。免责声明