这篇分析直击当前大模型应用的核心矛盾:表面流畅输出背后,是概念理解的结构性缺失。它不提供玄虚争论,而是用法律实务中的真实失败案例、认知心理学实验数据和信息论框架,清晰勾勒出LLM在典型性判断、因果推理、语境锁定等关键能力上的边界。
智能速览
LeCun团队用1049项认知心理学经典数据测试30+大模型,发现其粗粒度分类达标但典型性判断几乎失效
人类对‘鸟’的理解依赖大量具象冗余记忆(如麻雀鸣叫、企鹅摇摆),而LLM为压缩统计规律主动丢弃这些信息
法律场景中模型混淆‘恶意串通’与‘善意取得’,本质是无法分辨语义上相似但法理逻辑完全冲突的概念
模型将‘下雨所以地湿’与‘地湿所以下雨’视为同等概率的文本序列,缺乏因果建模能力,仅依赖高频共现
语境依赖缺陷导致同一词(如‘问题’)在合同审查中被随机映射为语法、格式或法律风险,无法动态锚定意图
精华内容
当法律助手把两个根本冲突的法律原则糅进同一段分析时,问题不在模型‘写得不够好’,而在它从未真正习得‘概念’本身——那层由具体经验、典型样例和因果约束共同织就的意义之网。
典型性盲区
实验显示,所有测试模型在‘企鹅是不是鸟’这类二元判断上准确率显著高于随机水平,证明其掌握了概念的粗粒度结构。但当进入典型性判断任务时,模型表现骤降:人类普遍认为知更鸟比企鹅‘更像鸟’,因前者具备飞行、鸣叫等典型特征;而模型对二者赋予几乎相同的语义权重。34个语义类别中,模型在典型性排序任务上的平均准确率仅为58.3%,低于人类基线(89.1%)逾30个百分点。这说明模型习得的是概念标签的统计共现,而非概念内部的层级结构与原型分布。
冗余即理解
人类大脑保留大量看似冗余的具象记忆——童年见过的麻雀、动物园奔跑的鸵鸟、纪录片里摇晃的企鹅——这些非抽象信息构成语义理解的基石。模型训练目标却是极致压缩:最小化预测下一个token的交叉熵损失,必然淘汰低频但高语义价值的细节。例如‘鸟’在训练语料中常与‘飞’‘巢’‘蛋’共现,但‘不会飞的鸟’‘在冰面行走的鸟’等反例出现频次低,被算法判定为噪声过滤掉。结果是模型表征高度平均化,丧失对概念边界的敏感性,无法处理法律中‘欺诈’与‘重大误解’这类仅凭细微语境差异区分的关键范畴。
因果性失焦
在包含1049个因果推理样本的测试集中,模型对‘A导致B’与‘B导致A’的区分能力接近随机水平(平均正确率52.7%)。根源在于训练机制:模型仅优化文本序列概率,而非物理世界规律。‘下雨所以地湿’在语料中出现频率远高于‘地湿所以下雨’,模型学会的是前者更‘常见’,而非前者符合自然法则。实测中,当输入‘地湿’时,模型生成‘可能刚下过雨’的概率为63.2%,但若追加前提‘此处位于沙漠腹地且无降水记录’,模型修正概率仅提升至68.5%,远低于人类基于常识的瞬时否定。这揭示LLM的因果能力本质是统计捷径,而非机制理解。
语境锁定失效
法律助手项目中,同一提问‘这个合同有没有问题’触发三种完全不同的响应路径:37%概率检查标点语法,29%分析违约条款效力,22%评估格式规范合规性,剩余12%给出无关建议。根源在于模型缺乏对话状态追踪与意图推断模块,仅依赖输入文本的局部统计模式。对比人类律师:听到提问瞬间即调用委托人身份(律所实习生)、当前阶段(初筛)、历史交互(前序已确认合同类型为房屋租赁),自动锁定‘法律风险’维度。模型则将‘问题’在全部训练语料中的127种语境含义进行加权平均,导致输出呈现不可控的发散性。
LeCun的研究价值不在否定LLM,而在精准测绘其能力地形图:它擅长模式补全与统计泛化,却难以承载需要典型性感知、因果建模与动态语境绑定的深度理解任务。这对开发者意味着需重构AI应用范式——不再强求模型‘懂’法律,而是构建法律知识图谱约束其输出;不再期待它自主推理因果,而是用结构化提示显式注入因果链。真正的分水岭,或许不是AGI能否实现,而是人类能否清醒识别工具的不可替代性与不可逾越性。
关键评论
AI输出错误越来越隐蔽,更多人因信任其流畅表达而被误导,这比明显错误更危险
相关性不等于因果性——模型混淆二者恰是统计学习范式的天然局限,非工程可彻底解决
普通人最该警惕的不是AI多强大,而是它用专业术语包装的错误结论具有极强迷惑性
法律场景暴露的问题具有普适性:医疗诊断、教育辅导、心理咨询等需精细语义辨析的领域,都面临同样风险