OpenAI开源HealthBench,60个国家合力开发5000段真实对话
币圈财经报道:OpenAI开源了一个专门面向医疗大模型的测试评估集——HealthBench。与以往测试集不同的是,该测试集的5000段核心测试对话,全部由来自60个国家/地区的26个专业262名医生打造,极大增强了该测试集的难度、真实性以及丰富度。并且采用了多轮对话测试,而不是简单的答题或选择题模式。根据测试数据显示,大模型在医疗保健领域的表现有了显著提升。例如,从之前的GPT-3.5Turbo的16%到GPT-4o的32%,再到o3的60%,整体性能有了显著进步。尤其是小型模型的进步更为突出,GPT-4.1nano不仅在性能上超越了GPT-4o,而且成本降低了25倍。
文章版权声明:除非注明,否则均为数币资讯网原创文章,转载或复制请以超链接形式并注明出处。

币安交易所
全球第一大所,币圈用户必备,新用户可得注册奖励最高可达500USD
欧易交易所
全球前三大交易所之一,新用户注册可拆数字盲盒,100%可以获得数字货币
更多交易所入口
一站式注册各大交易所、点击进入加密世界、永不失联,币安Binance/欧易OKX/GATE.IO芝麻开门/Bitget/抹茶MEXC/火币Huobi