大数跨境

昇腾AI平台训练推理!中国联通元景文生图大模型开源:真正懂中文

昇腾AI平台训练推理!中国联通元景文生图大模型开源:真正懂中文 圆海
2024-12-27
13
导读:中国联通宣布,联通数据智能公司打造、首个完全在国产昇腾AI软硬件平台上实现训练和推理的中文原生文生图模型联通元景文生图模型”,正式开源。该模型实现了多项自主创新突

中国联通开源首个国产昇腾原生文生图模型

中国联通宣布,由联通数据智能公司打造的“联通元景文生图模型”正式开源。该模型是首个完全基于国产昇腾 AI 软硬件平台实现训练与推理的中文原生文生图模型,标志着我国在文生图领域的国产化进程取得重要突破。

架构创新:突破中文语义理解瓶颈

针对原始 SDXL 架构仅支持英文 CLIP 模型、文本长度限制在 77 个 token 且无法精准理解中文语境的痛点,联通元景模型进行了多项自主创新:

  • 复合语言编码模块:将英文 CLIP 替换为中文 CLIP,并引入基于 Encoder-Decoder 架构的语言模型,有效突破了文本长度限制,实现了对中文长文本及多属性描述的精确语义理解。
  • 原生中文语义适配:摒弃了通过翻译插件调用英文模型的中介方式,避免了中文信息在转换过程中的损失。
  • 专属名词精准识别:通过海量中文图文对预训练,模型能准确区分“鼠标”与“老鼠”、“仙鹤”与“吊车”等在英文中均译为"crane"易混淆的对象,并能理解“中文菜谱”等具有文化特色的专有名词,生成高质量对应图像。

全栈适配:基于昇腾算力的一体化部署

该模型在国产昇腾 AI 基础软硬件平台上实现了从微调训练到推理的全流程适配:

  • 微调训练:支持用户使用自定义数据集,可实现从其他平台至昇腾环境的平滑迁移。
  • 模型推理:接口设计与 Diffusers 对齐,简单易用;支持单卡及多卡部署,其中单卡推理支持 UNet Cache 加速技术,显著提升效率。

应用落地:赋能多行业数字化场景

目前,联通元景文生图模型已在中国联通多个内外部项目中投入使用,广泛服务于文创、服装、工业设计等领域。典型案例包括“中华器灵”文物活化项目以及服装大模型设计等数十个应用场景,有效提升了行业创作效率。

开源地址:多社区同步上线

该模型已在 GitHub、Hugging Face、魔搭(ModelScope)、始智(WiseModel)等主流开发者社区全面开源,全球开发者可免费下载使用:

  • GitHub: https://github.com/UnicomAI/UniT2IXL.git
  • HuggingFace: https://huggingface.co/UnicomAI/UniT2IXL
  • 魔搭:https://www.modelscope.cn/UnicomAI/UniT2IXL.git
  • 始智:https://wisemodel.cn/models/UnicomAI/UniT2IXL

凭借在技术创新与应用落地方面的卓越表现,联通元景文生图模型此前已在全球数字经济大会上荣获大奖。

【声明】内容源于网络
0
0
圆海
圆海跨境知识分享
内容 4092
粉丝 0
圆海 圆海跨境知识分享
总阅读32.8k
粉丝0
内容4.1k