IT之家 AI·· 11 天前评分70
OpenAI 发布 MentalHealthBench:1215 段对话评估 AI 心理健康应对能力
摘要
IT之家 9 月 24 日消息,OpenAI 今日推出了 MentalHealthBench,这是一个开放式基准测试,包含 1215 段合成心理健康对话,用于评估 AI 系统在真实场景下的应对能力,覆盖从日常心理健康话题到紧急心理健康事件等不同情况。 据IT之家了解,该基准由来自 22 个国家和地区的 80 多名持证心理学家和精神科医生共同参与制定。这些专家共使用 19 种语言,覆盖近 20 个心理健康专业领域。每段对话都配有由专家团队制定的评分标准。根据配套研究论文,完整数据集共包含 5262 条由专家撰写的评分标准。OpenAI 表示,此次公开发布 MentalHealthBench,是希望其他研究人员能够审查其方法、开展独立评估,并在此基础上进一步研究。 OpenAI 表示,目前针对 AI 在心理健康领域表现的多数评估主要集中于紧急情况,并使用宽泛的预设标准衡量模型表现,因此对于模型如何应对完整范围的心理健康对话,仍存在一...
本站只提供摘要与原文入口。完整内容请阅读原文。
来源:IT之家 AI · ithome.com