张大妈

国产芯片训练的GLM-Image多模态模型开源

源自知乎:量子位

01-15 18:09

智谱华为合作开源GLM-Image,中国首个全程在国产芯片上训练的SOTA多模态模型,在文字渲染领域实现突破,API生成图片仅需0.1元。

国产芯片训练的GLM-Image多模态模型开源智能速览

  • GLM-Image在CVTG-2K和LongText-Bench双榜单位列第一

  • 基于华为Ascend A2芯片全程训练,实现国产算力突破

  • 混合架构结合自回归和扩散解码器优势

  • 原生支持1024x1024至2048x2048任意比例输出

  • 中文文字渲染准确率达0.9116,超越国外模型

  • API调用成本低至0.1元/张,大幅降低使用门槛

国产芯片训练的GLM-Image多模态模型开源精华内容

GLM-Image的出现不仅是技术突破,更是国产AI生态的重要里程碑。它证明了中国自主研发的多模态模型完全可以达到世界领先水平。

技术架构创新

GLM-Image采用自回归+扩散解码器的混合架构,打破传统生图模型的技术路线局限。这种架构让模型先理解文本布局,再生成视觉内容,特别擅长处理中文文字的准确渲染。在CVTG-2K评测中,文字准确率达到0.9116,归一化编辑距离为0.9557,双项指标均排名第一。

相比单一架构,混合模型能更好地平衡生成质量与文字准确性,解决了AI生图不识字的行业痛点。

国产算力突破

GLM-Image全程基于华为Ascend A2芯片训练,从数据预处理、预训练到RLHF全流程都在国产算力集群完成。智谱与华为深度合作,优化Mindspeed-LLM框架,特别是在强化学习后训练阶段进行了专项优化。

这次突破证明国产算力完全能支撑复杂的多模态模型训练,摆脱对国外硬件的依赖。模型参数规模达到几十亿级别,在国产算力极限压力测试下依然达到SOTA水平。

多场景应用实测

GLM-Image在小红书封面生成测试中表现出色,能准确理解并生成符合平台风格的设计。鲜艳配色、醒目标题与画面完美融合,人物逼真度接近实拍效果。

商业海报测试中,模型能处理复杂的摄影参数描述,包括光线、构图、色调等细节要求。中式酒饮广告图中,文字嵌入自然,国风元素运用恰当,展现了强大的商业设计能力。

文字渲染能力

中文文字生成是GLM-Image的核心优势,在LongText-Bench评测中,中文、英文及平均分数均位列开源模型第一。模型能准确生成AI手抄报、插画、海报等包含大量中文的场景。

实测显示,无论是标题、段落还是标语,GLM-Image都能保持高度准确,不存在缺笔少划或自创文字的问题。文字与图像的融合自然,不会出现突兀的排版错误。

成本优势明显

GLM-Image API调用价格仅为0.1元/张,大幅降低了商用门槛。相比国外闭源模型,这种开源策略让更多开发者和企业能够接入使用。

低成本配合高质量输出,为内容创作、广告设计、社交媒体运营等领域提供了经济高效的解决方案。开源特性也促进了社区生态建设,技术透明度高。

多分辨率原生支持

GLM-Image改进了Tokenizer策略,原生支持从1024x1024到2048x2048的任意比例输出。无需重新训练或后期调整,直接生成竖图、横图或方形图。

这一特性极大提升了实际使用便利性,可适配不同平台需求。无论是社交媒体封面、横幅广告还是竖版海报,都能一次生成,避免裁剪变形问题。

GLM-Image的开源标志着国产AI多模态技术进入新阶段,在文字渲染、成本控制、算力自主等方面都实现了突破。随着生态完善,这个国产大香蕉必将推动更多创新应用落地。

内容由AI生成
0
扫一下,分享更方便,购买更轻松
0评论

当前文章无评论,是时候发表评论了
提示信息

取消
确认
评论举报

最新文章 热门文章