Codex实测:修bug准确率74.5%比GPT-5还强,但这3类活它真接不住

源自60位全网作者

20:36

精选参考来源

1
我拿 Codex 干了三个月活,它的能力边界,我摸清楚了
2
别盲目Vibe Coding了。这几个月,ClaudeCode、Codex让很多OPC创业者心潮澎湃 连艺人都开始代言 Coding Agent 产品了,大家似乎相信,只要会描述需求,就能把产品“生成”出来 但 VibeCoding 的大热,也让程序员也开始在各平台频繁发声:别再制造垃圾了,根本用不了 最近,MIT 和 CMU 也发了两篇论文,分析“ VibeCoding 到底不靠谱在哪里?” CMU 发现,模型非常擅长通过测试,却不擅长理解隐藏的安全约束。CMU 团队构建了一个名为 SusVibes 的基准测试,从真实开源项目中抽取 200 个历史上曾产生安全漏洞的软件任务 研究人员让 Claude Sonnet 驱动的 SWE-Agent 等主流 Coding Agent 完成这些任务,结果模型生成的代码有 61% 能通过功能测试,同时满足“功能正确”和“安全可靠”的比例只有 10.5% 换句话说,超过 80% 的可运行代码都存在安全漏洞 MIT 则对超过 10 万名 GitHub 开发者进行了追踪。结果是,Coding Agent 让代码提交量增长了 180%,文件修改量增长接近 300%,但真正进入生产环境的软件发布量,只增长了约 30% Codex、ClaudeCode可以极大提升代码生产速度,但从代码到产品之间,还存在评审、测试、架构、上线、运维等一系列环节 MIT 的研究甚至发现,AI 与人类工作的替代弹性仅为 0.25,两者更接近互补关系 因此,“Vibe Coding 取代程序员”有点无稽之谈了,最有含金量的 review 仍然只有他们能做 接触的很多开发者也都表示,现在的工作流程就是 Agent 负责大段生成,人负责判断需求是否正确、实现是否可靠、架构是否合理,以及是否应该被部署到生产环境 很多人期待 Coding 的未来成为英国工业革命时期的自动化流水线,但开发是一套责任链,代码可以自动生成,责任没法自动转移,“信任”更是不可再生之物 #ai #AI #vibecoding #学术 #论文
全部
来源
内容由AI生成

精选参考来源

1. 我拿 Codex 干了三个月活,它的能力边界,我摸清楚了

2. 别盲目Vibe Coding了。这几个月,ClaudeCode、Codex让很多OPC创业者心潮澎湃 连艺人都开始代言 Coding Agent 产品了,大家似乎相信,只要会描述需求,就能把产品“生成”出来 但 VibeCoding 的大热,也让程序员也开始在各平台频繁发声:别再制造垃圾了,根本用不了 最近,MIT 和 CMU 也发了两篇论文,分析“ VibeCoding 到底不靠谱在哪里?” CMU 发现,模型非常擅长通过测试,却不擅长理解隐藏的安全约束。CMU 团队构建了一个名为 SusVibes 的基准测试,从真实开源项目中抽取 200 个历史上曾产生安全漏洞的软件任务 研究人员让 Claude Sonnet 驱动的 SWE-Agent 等主流 Coding Agent 完成这些任务,结果模型生成的代码有 61% 能通过功能测试,同时满足“功能正确”和“安全可靠”的比例只有 10.5% 换句话说,超过 80% 的可运行代码都存在安全漏洞 MIT 则对超过 10 万名 GitHub 开发者进行了追踪。结果是,Coding Agent 让代码提交量增长了 180%,文件修改量增长接近 300%,但真正进入生产环境的软件发布量,只增长了约 30% Codex、ClaudeCode可以极大提升代码生产速度,但从代码到产品之间,还存在评审、测试、架构、上线、运维等一系列环节 MIT 的研究甚至发现,AI 与人类工作的替代弹性仅为 0.25,两者更接近互补关系 因此,“Vibe Coding 取代程序员”有点无稽之谈了,最有含金量的 review 仍然只有他们能做 接触的很多开发者也都表示,现在的工作流程就是 Agent 负责大段生成,人负责判断需求是否正确、实现是否可靠、架构是否合理,以及是否应该被部署到生产环境 很多人期待 Coding 的未来成为英国工业革命时期的自动化流水线,但开发是一套责任链,代码可以自动生成,责任没法自动转移,“信任”更是不可再生之物 #ai #AI #vibecoding #学术 #论文

3. Codex 产品力深度评估:能力、定位与边界

4. OpenAI 工程师使用 Codex 的 7 个场景

5. 让 Codex 改代码之前,先看看这篇安全指南

6. 别让 Codex 误删生产库:沙盒和权限要这么设

7. 第十四篇:安全最佳实践——企业级 Codex CLI 安全防线

8. OpenAI Codex Security扫描120万次提交,发现10561个高危漏洞

9. OpenAI开源Codex Security CLI:用于发现、验证和修复安全漏洞

10. 我用AI搭了个团队,给女儿做了个错题本,然后被Codex审查出4个安全漏洞

11. 别只用来写代码了!Codex 这12个隐藏能力,90%的人没用过

12. CodeX 深度解析(六):CodeX 的边界、风险与未来演进

13. 让 Codex 踏实干活的 16 个真实场景

14. 新手给 Codex 赋能的 8 种能力,从会用到提效百倍!

15. Codex 三大自动化路径拆解,桌面 / 浏览器 / 本地网页不再混用踩坑

16. 第 7 篇:Codex 的工具调用能力

17. 我用 Codex 做了工作汇报 PPT,然后发现了 AI 编程助理的真实上限

18. 三句话让codex开始给你干活

19. Codex 进公司前,先把责任边界讲清楚

20. OpenAI 发布 Codex Security:可扫描、验证并修复代码安全漏洞...

21. Codex 用户务必修复该漏洞,硬盘读写太频繁,迟早送你的硬盘归西!

22. OpenAI Codex 上线「Sites」插件:prompt 写完,应用直接部署到生产环境!自带托管、权限和 secrets 管理

23. 企业级实战:Codex接入DeepSeek,解锁Plugins与Skills,打造生产级AI开发平台

24. Codex新功能(破晓):守护全球各类组织的安全工具 Codex Security插件

25. Cursor、Codex 都修过漏洞:程序员别再迷信 Sandbox 开关

26. CodeX再度崛起带来的意外连锁隐患

27. OpenAI 进 AWS,Codex 也进 Bedrock:AI 工具开始进入企业生产环境

28. Codex 日志漏洞可能导致本地 SSD 写入 TB 级数据

29. OpenAI开源Codex Security CLI

30. Codex 官方用例系列①|生产系统6大应用场景玩转真实代码库

31. 刚刚,GPT-5.6全面上线,Codex被合并,生产力工具ChatGPT Work来了

32. 刚刚,OpenAI买下Python最强基建,准备垄断开发者「生产资料」

33. 阿里推出 Qoder Security,AI 代码终于多了几道安全防线

34. 腾讯高管称今年大部分代码都由 AI 生成,这会对软件开发行业带来哪些深远影响?

35. OWASP发布生成式AI安全治理检查清单,助力企业应对LLM风险

36. OpenAI推出Codex Security,AI自主修复软件漏洞

37. 大家在使用AI编程时,更倾向于让AI一次次生成短小易读的代码,还是直接放手让AI写一大片?

38. 现在程序员的代码大多数都是用AI生成的,后面会成为屎山代码看不懂吗?

39. AI生成的代码你们会去一行行检查吗?

40. 如何评价OpenAI发布Codex桌面版Codex App?和 Claude Code 相比怎么样?

41. Codex 插件【Botpress】:生产级 AI 智能体

42. 谁在用Codex?实际体验真有那么好吗?

43. Codex 插件【Git Diff Patcher Bridge】:安全审查 AI 代码补丁

44. 【从传统编程转向大模型编程】本文提出“文档即源码”新范式,倡导开发者从“代码产出者”转型为“文档定义者”。核心是用结构化文档(需求/架构/约束)驱动AI生成代码,实现“改文档→自动重写代码”,提升知识复用性、模型无关性与安全可控性。https://developer.aliyun.com/artic

45. 零代码基础,用Codex开发上线了一个AI Plus商城系统,全是踩坑和填坑的经验!!

46. OpenAI 上线新一代编程神器 Codex,有哪些技术亮点?程序员的工作会被彻底颠覆吗?

47. 使用 CodeX 等 AI 编程工具效率翻倍的关键不在于模型能力,而在于采用"先拆需求、再出计划、小步修改、逐步确认"的规范驱动流程,避免随意丢任务给 AI 执行。 许多开发者使用 AI 编程工具效果不佳,并非大语言模型能力不足,而是任务描述过于随意,导致产出质量低、返工频繁。核心在于将思考环节留

48. Codex上线手机端啦!免费用户可用

49. Codex不打算让Claude Code好过

50. OpenAI 正式发布 GPT-5.3-Codex,与其他版本相比,它在哪些方面有所改进?

51. AI编程大战白热化:Claude Opus 4.6和GPT-5.3-Codex同一天发布,谁才是真正的王者?

52. Codex跑了22小时,真赚16.88美元:奥特曼预言的「AI打工人」来了

53. 尴尬了!OpenAI刚派GPT-5.5-Cyber修补地球,Codex却爆出致命bug

54. Codex 插件【Hot100.ai】:每周 AI 项目榜单

55. Codex 插件【Hatchable】:托管应用和网站

56. Codex 插件【IcePanel】:设计软件架构

57. Codex 插件【CodeRabbit】:AI 代码审查当前更改

58. Codex 插件【Data Dolphin】:Dolphin 技术上下文

59. Codex可以100%正式接管所有编程工作了吗?

60. 你更喜欢使用codex还是claude来进行编程呢?

0
扫一下,分享更方便,购买更轻松
0评论

当前文章无评论,是时候发表评论了
提示信息

取消
确认
评论举报

最新文章 热门文章