Neta Lumina是由 Neta.art 实验室开发的高质量动漫风格图像生成模型。基于上海人工智能实验室 Alpha-VLLM 团队发布的 开源Lumina-Image-2.0,利用大量高质量动漫图像和多语言标签数据对该模型进行了微调。初步成果是一个引人注目的模型,它拥有强大的理解和解释能力(得益于 Gemma 文本编码器),非常适合插画、海报、故事板、角色设计等应用。
主要特色
-
针对多样化创作场景进行优化,如 Furry、国风、宠物等 -
支持众多角色与风格,包括热门和冷门设定 -
准确理解自然语言,具备优秀的复杂提示词遵循能力 -
原生支持多语言,推荐优先使用中文、英文和日文
模型版本
-
基础模型(Base Model)
-
数据集:约 1300 万张二次元风格图像 -
主要目标:通用知识学习、二次元风格优化
-
美学微调模型(Aesthetic Model)
-
基于基础模型进一步微调 -
数据集:精选数十万张高质量动漫风格图像 -
主要目标:提升美学表现、肢体结构精准度与画面细节
使用指南(How to Use)
该模型采用基于 Diffusion Transformer 的 Lumina2 框架,与 Stable Diffusion 模型不同,请务必按本文档进行配置。
ComfyUI
环境要求(Environment) 目前 Neta Lumina 仅支持在 ComfyUI 平台使用:
-
安装最新版 ComfyUI -
至少 8 GB 显存
模型下载与安装(Downloads)
-
Neta Lumina-Beta
-
下载链接:https://huggingface.co/neta-art/Neta-Lumina/blob/main/Unet/neta-lumina-beta-aes-experimental-0624.safetensors -
文件格式:.safetensor -
存放路径:ComfyUI/models/unet/
-
文本编码器(Gemma-2B)
-
下载链接:https://huggingface.co/neta-art/Neta-Lumina/blob/main/Text%20Encoder/gemma_2_2b_fp16.safetensors -
文件格式:.safetensors(约 5.23 GB) -
存放路径:ComfyUI/models/text_encoders/
-
VAE 模型(16 通道 FLUX VAE)
-
下载链接:https://huggingface.co/neta-art/Neta-Lumina/blob/main/VAE/ae.safetensors -
文件格式:ae.safetensors(约 300 MB) -
存放路径:ComfyUI/models/vae/ -
对应工作流:lumina_workflow.json(在 ComfyUI 中加载该 JSON 文件即可)
ComfyUI工作流
https://huggingface.co/api/resolve-cache/models/neta-art/Neta-Lumina/9a429ed6801321bb29027fc8fd13bd2218e8cdcd/lumina_workflow.json?%2Fneta-art%2FNeta-Lumina%2Fresolve%2Fmain%2Flumina_workflow.json=&etag=%222f85759ad4763f01449315f48c0d1adc2b34d215%22
-
UNETLoader:加载模型文件 -
VAELoader:加载 ae.safetensors -
CLIPLoader:加载 gemma_2_2b_fp16.safetensors -
Text Encoder:输出分别连接采样器的正向/负向条件
推荐参数(Recommended Settings)
-
采样器:res_multistep -调度器:linear_quadratic -
采样步数:30 -
CFG(提示词引导强度):4~5.5 -
EmptySD3LatentImage:推荐分辨率为 1024×1024、768×1532 或 968×1322
书籍推荐
来自机械工业出版社的《AIGC驱动工业智能设备》,该书从基础入手,深入讲解AI技术的基本概念和原理。该书详细介绍AIGC技术在实际应用过程中的各种功能设计和实现方法。内容涵盖算法选择、模型训练、系统集成等各个环节,通过丰富的技术细节和设计策略,帮助读者全面掌握AIGC技术的应用要点。
全书深入剖析具体的案例,展示AIGC技术在不同工业领域中的实际应用。通过分析成功应用案例中的挑战和解决方案,提供实战经验,便于读者在实际工作中更好地应用AIGC技术。
感谢你看到这里,也欢迎点击关注下方公众号并添加公众号小助手加入官方读者交流群,一个有趣有AI的AIGC公众号:关注AI、深度学习、计算机视觉、AIGC、Stable Diffusion、Sora等相关技术,欢迎一起交流学习💗~


