美团开源海报生成AIGC体系:文字渲染准确率逼近行业顶尖,商家分钟级产出专业级营销素材
01美团发布海报生成AIGC技术体系
02PosterCraft实现高精度文字渲染
PosterCraft模块聚焦于基础海报生成能力,采用端到端统一优化框架替代传统模块化流水线。该模型通过大规模文字渲染优化及多阶段强化学习,解决了AI在处理中文、多行文本及复杂排版时的错漏问题,在文字渲染准确率上已接近行业顶尖水准。该模块采用四阶段级联训练流程:首先在Text-Render-2M数据集(200万样本)进行文本渲染优化;随后在HQ-Poster-100K数据集(10万样本)进行区域感知的高质量海报微调;接着基于Poster-Preference-100K偏好数据集进行审美强化学习;最后引入Poster-Reflect-120K反思数据集与联合视觉-语言反馈实现迭代精修。实验数据显示,PosterCraft文本召回率达到0.787,显著高于Flux1.dev的0.723和SD3.5的0.565。PosterCraft论文已获ICLR 2026会议收录。456
03PosterOmni统一六大设计任务
PosterOmni模块定位于智能设计助手角色,将扩图、补全、比例调整、风格迁移等六类设计任务统一于单一模型之中。该模块涵盖四类局部编辑任务:Extend(扩图)、Fill(补全)、Rescale(改比例)、Identity-driven(ID保持),以及两类全局创作任务:Style-driven(风格参考)与Layout-driven(布局参考)。训练过程采用四阶段工作流程:先分别训练局部编辑专家和全局创作专家,再通过任务蒸馏将专家知识压缩进统一模型,随后引入统一奖励信号进行强化学习,确保模型在所有场景下保持稳定输出。该技术方案已在PosterOmni-Bench基准测试中于参考遵循度、全局构图质量和美学和谐性方面超越现有开源基线,甚至部分指标超越专有系统。PosterOmni论文已获CVPR 2026会议收录。789
04PosterReward构建自动化质量评估
05商业落地与商家赋能
- 技术突破:文字渲染准确率接近行业顶尖水平,中文多行文本处理能力显著提升
- 效率提升:海报制作周期从1-3天压缩至分钟级,支持高频营销场景快速响应
- 质量把控:自动化评估体系覆盖五大维度,实现大规模生产质量稳定可控
- 应用覆盖:已在美团外卖套餐图、品牌IP设计、信息流治理等场景落地验证
当前文章无评论,是时候发表评论了