什么值得买App下载 App ›
连续签到专享现金活动

大模型宣称“通过中医医考”,哪些说法站不住

「用中医执业医师资格考试真题测过」「经过权威机构测评」「通过中医类别医师资格考试」——近期医疗大模型宣传里最常见的这三句话,在国家中医药管理局中医师资格认证中心11月21日晚发布的声明面前,一句都站不住。 所谓"通过医考",从一开始就不是一个AI能够独立完成、也没有任何机构替它背书的事件。

11月21日晚,国家中医药管理局中医师资格认证中心通过官方公众号发布声明,就近期部分大模型产品及其运营、推广主体宣称经过中医类别医师资格考试试题测试一事作出公开回应。声明本身不长,但它把"大模型×医考"这条宣传链路一次堵死了。每日经济新闻北青深一度IT之家

官方声明只划了两条线

声明的核心就两条。其一,市场上以"历年真题"“官方真题”“内部题库”"原题还原"等名义提供、销售或用于训练、测评人工智能大模型的内容,均非中心提供;其二,中心未与任何人工智能大模型企业、平台或相关机构建立合作关系,未对任何大模型产品开展过测评、认证、认可或者推荐,并要求相关单位或个人立即停止不当宣传、删除下架,保留依法追究法律责任的一切权利。每日经济新闻IT之家北青深一度

发声方不是边缘角色。官网介绍显示,国家中医药管理局中医师资格认证中心2000年12月19日经中央编办批准成立,承担中医药行业相关考试和人才评价等工作——它正是中医类别医师资格考试的官方组织方之一。需要说明的是,这份声明没有点名任何具体企业,截至目前也没有公开后续处置的披露。北青深一度

话术一:「官方真题测过」——这个前提本身不成立

宣传里最常见的写法,是宣称模型"用医师资格考试真题测过",甚至有团队直接写进路演材料:“我们的中医大模型,用中医执业医师资格考试真题测过”。可声明第一条已经把这个前提作废:官方真题从未公开过,市面上流通的任何题库无论叫什么名字,都不是出题方给的。也就是说,被"测"的不是这场考试,而是一套来源无法核验的题目。更要紧的是,如果这些流传题库早已进入模型的训练语料,跑分高就更接近"背过答案",而不是"具备新能力"——连分数本身都很难作为能力证据。小红书

话术二:「通过权威测评」——"权威"两个字查无出处

医疗大模型面向医院和政企采购时,“医师资格考试"几乎是被默认的权威背书,因为采购方很难核验一句宣传的真假,招标文件里也很难设判据。但声明把测评的主体撇得干干净净:中心没有做过、也没有授权任何主体做"通过”“认证”"推荐"这类表述,所谓"经过权威测评"是自述,不是事实。未经授权把官方机构的名称和考试数据包装成产品卖点,属于典型的不当宣传;声明发出后,同样这句话就从难核验的套话变成了可追溯的合规风险。小红书哔哩哔哩

话术三:「通过中医执业医师考试」——"通过"轮不到AI

这句话在考试制度层面就讲不通。医师资格是准入类考试,报考主体是有中医专业学历、在医疗机构试用期满的人员,AI从报名环节就不具备资格。考试也分实践技能与医学综合笔试两部分,实践技能由省级医师资格考试领导小组组织实施、原则上在国家实践技能考试基地进行,考的是针灸操作、急救技术、病案分析这类现场动手环节。一个语言模型连考场的门都进不去,所谓"测试"充其量是有人让它答了几道选择题,与官方及格线、发证程序没有任何法律关系。把"答对题"说成"通过考试",是整套话术里跨度最大的一次偷换。知乎

为什么这套话术大行其道

中医垂直大模型这几年扎堆上线,行业内已超过30个,而中医领域至今缺乏公认的模型评测标准:一个中医大模型宣称"辨证准确率92%",用的什么测试集、谁做的复核,往往都答不上来。标准缺位,厂商就转向借用有公信力的考试给自己打分——"通过医考"比任何一个自建榜单都更容易听懂,也更难当场证伪。知乎

大模型宣称“通过中医医考”,哪些说法站不住

对用户和采购方来说,识别这类宣传只需要三个追问:题库从哪来,让对方出具数据来源说明;测评是谁做的,要求出示报告原文和评分口径;宣传里有没有出现官方机构的名称或暗示。拿不出前两项的"高分",都不必当真。声明之后,这套话术的合法替代空间其实很清楚:模型可以宣传自己在公开基准和可复核的临床验证中的表现,"通过中医医考"这一句不在其中。它真正测的不是模型能力,而是听众会不会把一句自述当成官方结论。

评论

评论区空态插画

当前文章无评论,是时候发表评论了