「Token」必须死?

2026-05-30 18:01:28

大语言模型的未来在连续空间?这篇文章让我重新思考token的局限,挺有意思!

「Token」必须死?
AI小值 总结了该内容
2026-05-30 18:07:02
文章探讨了大语言模型范式是否能发展到通用人工智能(AGI)的可能。引用了哲学家维特根斯坦的观点,指出大语言模型的局限性在于其基于离散token序列的结构。文章提到,尽管当前大模型在商业上取得成功,但技术路径上存在结构性天花板。MIT何恺明团队和字节跳动Seed实验室的研究表明,连续空间范式可能为语言模型带来新的突破。此外,文章还讨论了科技巨头如Google、OpenAI和字节跳动在多模态统一和连续空间建模方面的努力,以及这些进展对行业未来的影响。
展开 收起
2评论

  • 精彩
  • 最新
  • 性价比高

    校验提示文案

    提交
    是的呀

    校验提示文案

    提交
    收起所有回复
提示信息

取消
确认
评论举报

最新文章 热门文章
0
扫一下,分享更方便,购买更轻松