混元-DiT大模型COMFYUI工作流-AiARTiST


本ComfyUI工作流适用于HYDiT1.1/1.2版本 Pytorch Model (模型训练CKPT格式)

工作流请下载到本地配合ComfyUI测试使用HYDiT官方模型请使用哩布在线生图


模型包链接:https://pan.baidu.com/s/1J1y0KDKxyLLk9WHck-jIiw?pwd=AIGC

提取码:AIGC 网盘内包含UNIT-HYDiT-GIRL的 Preview 1.2 模型,尚未完成调试(仅供娱乐)


网盘包含所需ComfyUI组件与第三方模型加载器组件,以及两种模型文件

ksampler格式模型(训练器直出的CKPT格式)请严格按照盘内路径存入ComfyUI下的Models文件夹


相比较Diffusers格式,Kohya的模型训练器现已完成并公开 2024/07/07

支持社区玩家进行Dreambooth微调和LoRA训练,并可保存为CKPT格式模型

目前1.2版本的Pytorch模型与Diffusers模型转换器尚未发布(提供1.1版本),等待后续更新。



混元-DiT,这是一款文本到图像的扩散模型,可以精细地理解英语和中文。为了构建混元-DiT,项目精心设计了transformer结构、文本编码器和位置编码。混元还从头开始构建一个完整的数据管道,以更新和评估数据以进行迭代模型优化。


为了细粒度的语言理解,混元训练了一个多模态大型语言模型来优化图像的标题。最后,混元-DiT可以与用户进行多轮多模态对话,根据上下文生成和提炼图像。通过项目精心设计的整体人类评估协议,拥有50多名专业的人类评估人员,与其他开源模型相比,混元-DiT在中文到图像生成方面树立了新的先进水平。


----------------------------------------------------------------------

Liblib平台现已上线成熟的 混元DiT中文大模型 的在线生图与LoRA加载

可以使用熟悉的SD Webui界面在线加载混元DiT Diffusers格式模型(顶)



混元-DiT,这是一款文本到图像的扩散模型,可以精细地理解英语和中文。为了构建混元-DiT,项目精心设计了transformer结构、文本编码器和位置编码。混元还从头开始构建一个完整的数据管道,以更新和评估数据以进行迭代模型优化。


为了细粒度的语言理解,混元训练了一个多模态大型语言模型来优化图像的标题。最后,混元-DiT可以与用户进行多轮多模态对话,根据上下文生成和提炼图像。通过项目精心设计的整体人类评估协议,拥有50多名专业的人类评估人员,与其他开源模型相比,混元-DiT在中文到图像生成方面树立了新的先进水平。


模型镜像访问

https://hf-mirror.com/Tencent-Hunyuan/HunyuanDiT


中文理解能力预览


长文本生成



多轮对话生成



----------------------------------------------------------------------

混元训练器脚本已更新,AiARTiST 可为您提供模型训练服务。

----------------------------------------------------------------------

Lib会员可享有在线加速生成,方便在线搭配CADS系列LoRA使用。

模型清单: https://www.liblib.art/search?keyword=AiARTiST

免费模型占比 55% ,开源模型占比 95%

会员模型占比 40% ,闭源模型占比 5%


商用模型:

AiARTiST-CADS2.0 XL 商业广告辅助系统(企业定制)

https://www.liblib.art/modelinfo/a56ebacdba7d4e30b97bb124bc3fc28f <<点击直达

----------------------------------------------------------------------

其他模型推广:


开源模型 UNIT-lib XL(已包含1GIRL权重,叠加使用可加强人像):

AiARTiST XL 基础单元 CADS2 LoRA 兼容版 站内链接

https://www.liblib.art/modelinfo/b10dfccc06f34dfa9031f1d070d846ee


UNIT2XL基础单元2-图形设计与IP形象AiARTiST 站内链接

https://www.liblib.art/modelinfo/a202d2e89e2946539a52a5a4e937262d

UNIT-lib XL 开放会员下载,支持融合,会员同时享有在线加速生成


更明亮的3D效果,请搭配 ACG Playground V6 开源版

https://www.liblib.art/modelinfo/4bb107737a1349f7a053bbf618e46977 <<免费下载


ControlNET 配置优化方案及本地配置方案,请加群:

联系方式见 https://afdian.net/a/AiARTiST-lib 发电用户专享


----------------------------------------------------------------------

模型用途声明:


1. 您不得将此模型及其衍生版本(如融合模型版本)托管于计划赚取收入或捐赠的网站/应用程序。

2. 您不得直接售卖此模型及其衍生版本(如融合模型版本),除非您对此模型进行了足够程度的人工修改,使其在法律意义上可以被完全判定为您的个人作品。如果您违反本条,所造成的一切法律后果由您个人承担,请恕本人概不负责。

3. 您不能使用该模型故意制作或共享非法或有害的内容传播和输出,请您遵守公序良德,将此模型用于积极正面的用途。

----------------------------------------------------------------------

测试问题请留言,业务合作看个人首页 +V Zyuan980

AiARTiST | Metaverse 中国·山东 数字人/AiGC/元宇宙方向

做好工具人 服务艺术家 联系方式:https://afdian.net/a/AiARTiST-lib