张大妈

GLM-5实测:编程与Agent能力的全面进化

源自抖音:Karminski

02-13 10:26

GLM-5发布仅距GLM-4.7一个月,展现了惊人的迭代速度。通过编程、Agent和长上下文能力的全面测试,发现该模型在编程实现、自主规划和视觉美学方面都有显著提升,特别是在Agent任务中展现了前所未有的元认知能力。

GLM-5实测:编程与Agent能力的全面进化智能速览

  • 编程能力实现全面进化,鞭炮炸鱼缸测试效果媲美Claude Opus 4.6

  • Agent测试中展现自主规划意识,全程跟踪任务进度并设定目标

  • 长文本召回率98%以上,但蒙对率51.4%让置信度存疑

  • 视觉美学显著提升,特别偏好科技感的Orbitron字体

  • 硅基骑手测试得分738.69元,比前代提升29.2%

GLM-5实测:编程与Agent能力的全面进化精华内容

GLM-5的这次升级不仅仅是参数量的提升,更是在编程实现、自主任务执行和视觉呈现等多个维度实现了质的飞跃。

编程能力突破

新引入的鞭炮炸鱼缸测试要求模拟四种粒子效果混合在流体中,GLM-5的折射效果还原度已经与Claude Opus 4.6几乎无差别。

在鞭炮连锁爆炸测试中,GLM-5精准还原了所有提示词参数,而GLM-4.7会忽略高度5的设置。视觉效果上,玻璃箱效果、色调映射达到了电影级画质。

Python杯子倒水测试新增了顶点碰撞检测,防止粒子从杯子漏出。甚至为2D粒子添加了模拟3D高光效果,大幅提升了视觉真实感。

Agent智能进化

在硅基骑手测试中,GLM-5获得了738.69元的成绩,比GLM-4.7的571.91元提升了29.2%。测试难度也增加了5倍订单量。

关键发现是GLM-5具备了前所未有的元认知能力,每轮对话都会跟踪剩余轮次(如"254/300,还有46轮"),这让模型能够合理分配工作节奏。

更有趣的是,GLM-5会给自己设定小目标"突破700元大关",达成后短暂庆祝就继续工作,直到第300轮结束。相比之下,GLM-4.7在第198轮就提前开香槟不干了。

文本召回性能

GLM-5在各长度上下文召回测试中均达到98%以上,表现相当出色。但在无原文参考的四选一测试中,蒙对率达到51.4%,这让分数的置信度存疑。

测试发现,模型甚至能精准脑补出哈利波特小说的英文原文。虽然绝对召回能力很强,但建议官方优化训练语料以提高测试的可信度。

值得注意的是,Agent测试本身就需要处理超过100K的上下文,GLM-5在该测试中的出色表现间接证明了其长文本处理能力没有问题。

视觉美学提升

GLM-5在视觉呈现上有了显著提升,特别偏爱使用充满科技感的Orbitron字体。UI设计也更加精致,提供了进度条、帧率显示、状态信息和多种快捷键操作。

在大象牙膏测试中,GLM-5使用了60段细分点和指数曲线模拟锥形瓶形状,精心制作了瓶口纯边效果。虽然精细度提升也带来了新的问题,但整体视觉效果明显改善。

陀飞轮机芯等测试也展现了一眼可见的提升,体现了模型在细节处理和美学追求上的进步。

GLM-5的这次升级展现了大模型在编程实现、自主规划和视觉美学方面的全面进步,特别是Agent任务中展现的元认知能力让人印象深刻。虽然长文本召回的测试方法需要优化,但整体性能提升显著。期待GLM-5V会带来怎样的惊喜。

精选参考来源

GLM-5发布啦! 给大家带来实测! 大模型进入月更节奏! GLM-4.7 才发布一个月, 智谱又掏出了 GLM-5, 这迭代速度属实离谱. 照例给大家带来编程、Agent、长上下文能力全面测试! 本次编程能力提升巨大: 新引入的鞭炮炸鱼缸测试, 要求模拟水滴/碎屑/烟雾/气泡四种粒子效果混合在流体中, 折射效果还原度已经和 Claude Opus 4.6 几乎没区别了. 鞭炮连锁爆炸测试指令遵循大幅提升, GLM-4.7 会忽略的参数 GLM-5 都能精准还原, 视觉上玻璃箱效果、色调映射达到了电影级画质. Python 杯子倒水新增了顶点碰撞检测, 甚至给2D粒子加了模拟3D高光! 大象牙膏测试实现了三层碰撞检测, 引入动画阶段机制精准还原 prompt 要求. 陀飞轮机芯也是一眼可见的提升. Agent 能力再次刷新纪录: 硅基骑手测试 (这次订单量加了5倍!) GLM-5 拿到 ¥738.69, 对比 GLM-4.7 的 ¥571.91. 关键发现是, GLM-5 每轮对话都在跟踪剩余轮次 ("254/300, 还有46轮"), 这种元认知是 GLM-4.7 未有过的. 它甚至给自己定了个小目标 "突破700元大关", 达成后庆祝了一下就继续干活. 而 GLM-4.7 在第198轮就开香槟不干了... 长文本召回: 各长度上下文召回均 98% 以上, 但有个问题 - 不给原文时四选一蒙对率达到 51.4%, 模型甚至能脑补出哈利波特小说英文原文, 所以分数置信度存疑. 不过 Agent 测试本身上下文就超过 100K, 召回性能实际上没问题. 总结: GLM-5 编程全面进化, Agent 能力展现出自主规划意识, 视觉美学也显著提升 (这次它特别偏爱科技感的 Orbitron 字体). 这么猛的表现, 很期待接下来的 GLM-5V! 另外官方账号还发了个马的图案, 看来之前的 pony alpha 是 GLM-5 石锤了! (P.S. 本次测试的是内测版本) #GLM5 #智谱 #智谱GLM #AIAgent #GLM
内容由AI生成

精选参考来源

GLM-5发布啦! 给大家带来实测! 大模型进入月更节奏! GLM-4.7 才发布一个月, 智谱又掏出了 GLM-5, 这迭代速度属实离谱. 照例给大家带来编程、Agent、长上下文能力全面测试! 本次编程能力提升巨大: 新引入的鞭炮炸鱼缸测试, 要求模拟水滴/碎屑/烟雾/气泡四种粒子效果混合在流体中, 折射效果还原度已经和 Claude Opus 4.6 几乎没区别了. 鞭炮连锁爆炸测试指令遵循大幅提升, GLM-4.7 会忽略的参数 GLM-5 都能精准还原, 视觉上玻璃箱效果、色调映射达到了电影级画质. Python 杯子倒水新增了顶点碰撞检测, 甚至给2D粒子加了模拟3D高光! 大象牙膏测试实现了三层碰撞检测, 引入动画阶段机制精准还原 prompt 要求. 陀飞轮机芯也是一眼可见的提升. Agent 能力再次刷新纪录: 硅基骑手测试 (这次订单量加了5倍!) GLM-5 拿到 ¥738.69, 对比 GLM-4.7 的 ¥571.91. 关键发现是, GLM-5 每轮对话都在跟踪剩余轮次 ("254/300, 还有46轮"), 这种元认知是 GLM-4.7 未有过的. 它甚至给自己定了个小目标 "突破700元大关", 达成后庆祝了一下就继续干活. 而 GLM-4.7 在第198轮就开香槟不干了... 长文本召回: 各长度上下文召回均 98% 以上, 但有个问题 - 不给原文时四选一蒙对率达到 51.4%, 模型甚至能脑补出哈利波特小说英文原文, 所以分数置信度存疑. 不过 Agent 测试本身上下文就超过 100K, 召回性能实际上没问题. 总结: GLM-5 编程全面进化, Agent 能力展现出自主规划意识, 视觉美学也显著提升 (这次它特别偏爱科技感的 Orbitron 字体). 这么猛的表现, 很期待接下来的 GLM-5V! 另外官方账号还发了个马的图案, 看来之前的 pony alpha 是 GLM-5 石锤了! (P.S. 本次测试的是内测版本) #GLM5 #智谱 #智谱GLM #AIAgent #GLM

0
扫一下,分享更方便,购买更轻松
0评论

当前文章无评论,是时候发表评论了
提示信息

取消
确认
评论举报

最新文章 热门文章