千问最新发布的Qwen3 Coder Next 80B模型,官方SWE-Bench测试得分高达70.6%,挑战现有格局。然而,高分背后实际体验究竟如何?其代码生成、逻辑推理能力是否名副其实?通过多项实测对比,揭示其真实表现与潜在短板。
智能速览
Qwen3 Coder Next 80B在SWE-Bench基准测试中得分70.6%。
在SVG动画生成任务中,代码质量表现平平。
代码智能体尝试构建手机模拟器,但效果不佳且缺乏交互功能。
执行Python六边形小球动画时出现卡顿并崩溃,修复尝试也未成功。
在MLX框架下,6比特量化的模型推理速度达到53.87 tokens/s。
精华内容
尽管纸面数据亮眼,但实际代码能力才是检验模型成色的试金石。下面将通过几项具体任务,深入考察其真实表现。
SVG动画生成
首个测试任务是生成一个“小狗骑自行车”的SVG动画。在苹果MLX框架下,6比特量化版本的推理速度达到了53.87 tokens/s,表现相当迅速。然而,对于生成的SVG代码质量,评价为“非常一般”。测试者同步放出了GLM4.7 Flash生成的代码作为对比,供读者自行判断两者在代码优雅度和功能实现上的差异。
代码智能体任务
进一步测试其代码智能体能力,要求生成一个手机操作系统模拟器。模型成功输出了代码,但运行效果被评价为“非常一般”。界面呈现出“浓浓的AI感”,且缺少返回等基本交互功能,实用性堪忧。同样,测试者也提供了GLM4.7 Flash的生成结果作为参照,凸显了两者在完成复杂任务时的表现差距。
Python程序执行
在经典的Python六边形小球动画测试中,Qwen3 Coder的表现同样不尽人意。生成的程序运行时非常卡顿,并且在运行一段时间后直接崩溃。模型自身似乎也察觉到了问题,并尝试着手修复代码,但修复后的版本效果并无明显改善,运行结果依旧不理想。
综合对比分析
从SVG动画到手机模拟器,再到Python动态程序,三项实测结果均显示Qwen3 Coder Next 80B的当前表现未达预期。尽管其官方基准测试分数高达70.6%,但在这些具体的编程任务中,其输出质量和稳定性似乎与当前顶尖的本地代码模型GLM4.7 Flash存在明显差距。
综合来看,Qwen3 Coder Next 80B虽在基准测试中成绩斐然,但在本次实测的代码生成与执行环节,表现并未达到预期,与直接竞品相比存在差距。这或许预示着高分模型与实际应用落地之间仍有鸿沟。未来的迭代更新能否弥补这些短板,真正发挥其参数优势?值得持续关注。