mo-di-diffusion on Hugging Face

mo-di-diffusion on Hugging Face

mo-di-diffusion 是一个在 Hugging Face 上微调的 Stable Diffusion 1.5 检查点,能够渲染具有现代动画电影风格的角色和场景。创作者 nitrosocke 使用 DreamBooth 对来自一家知名动画工作室的截图进行了训练,采用了先验保持损失和文本编码器训练,训练步数超过 9,000 步。将提示词中加入 modern disney style 令牌即可触发该美学效果。

通用的 SD 1.5 检查点旨在实现照片级真实感或广泛的插画风格。mo-di-diffusion 则专注于那种光滑的角色动画外观,这也是为什么游戏英雄、动物和风景的示例提示都偏向电影感而非摄影感。权重通过标准的 Diffusers StableDiffusionPipeline 加载,因此您可以在本地、Colab 或 Hugging Face Spaces 中运行,无需专有 API。

艺术家、爱好者和开发者在尝试角色概念时会使用 mo-di-diffusion,当他们希望获得类似迪士尼风格的渲染效果而不想委托定制模型训练时。模型卡附带 Python 示例代码、Gradio 演示链接,并注明了 ONNX、MPS 和 FLAX 导出选项。该模型可免费下载,采用 CreativeML OpenRAIL-M 许可证,允许商业使用,但需遵守许可证中的危害限制。

主要功能:
  1. 经过DreamBooth训练的微调Stable Diffusion 1.5权重,超过9000步

  2. 触发词现代迪士尼风格激活动画工作室美学

  3. 通过Hugging Face Diffusers StableDiffusionPipeline加载,附带示例Python代码

  4. CreativeML OpenRAIL-M许可证允许商业再分发,但有限制

  5. 模型页面有957个社区点赞和每月约1175次下载

  6. 兼容Gradio Spaces、Colab笔记本和ONNX、MPS或FLAX导出

  7. 示例提示文档CFG比例7,Euler a采样器,输出尺寸512px

Pros:
  1. 无需自定义训练即可用单一触发词获得现代动画风格。

  2. 标准Diffusers集成在本地脚本、Colab和Hugging Face Spaces中均可使用。

  3. OpenRAIL-M许可证允许在遵守限制的情况下进行商业项目。

  4. 模型卡片包含测试过的采样器设置和负面提示示例。

Cons:
  1. 需要自己的GPU基础设施;Hugging Face不提供默认推理端点。

  2. 文档中的固定512px样本尺寸可能需要放大用于打印。

  3. 风格狭窄,主要调校为动画美学,在不相关主题上可能效果不佳。

常见问题:

mo-di-diffusion是什么?

mo-di-diffusion是由nitrosocke基于Stable Diffusion 1.5微调的Hugging Face文本到图像模型。当你在提示词中包含modern disney style标记时,它会生成现代动画电影风格的图像。

mo-di-diffusion适合用什么采样器设置?

mo-di-diffusion模型卡上的示例提示使用50步、Euler a采样器、CFG比例7和512像素输出尺寸。模型卡中还记录了用于角色和动物渲染的示例种子和负面提示。

mo-di-diffusion需要什么提示词标记?

mo-di-diffusion期望在你的提示词中包含短语modern disney style以激活训练的美学。模型卡展示了使用该标记的角色、动物和风景的示例提示。

mo-di-diffusion是免费的吗?

是的。mo-di-diffusion是一个开放访问的Hugging Face模型,你可以下载并在本地运行。模型页面本身没有订阅费或每张图像费用。

mo-di-diffusion可以商用吗?

mo-di-diffusion在CreativeML OpenRAIL-M许可证下发布,允许商业使用和权重的再分发,但需将相同的使用限制传递给下游用户。

mo-di-diffusion需要什么硬件?

mo-di-diffusion示例代码针对通过torch.float16推理的CUDA GPU。模型卡还提到ONNX、MPS和FLAX导出路径以支持其他运行时。

定价:

免费

标签:

DreamBooth Fine-Tune
Text to Image
Animation Style
Open Weights
Disney Style Token
SD 1.5 Checkpoint
Hugging Face Model
Creative AI

使用的技术:

PyTorch
Diffusers
Stable Diffusion

评论:

Give your opinion on mo-di-diffusion on Hugging Face :-

Overall rating

Join thousands of AI enthusiasts in the World of AI!

最佳免费 mo-di-diffusion on Hugging Face 替代方案(和付费)

By Rishit