🎨 在这个数字化时代,DiffSynth-Studio 是一个推动艺术和创意边界的开源项目。它是一个扩散引擎,重新构建了包括文本编码器、UNet、VAE 等在内的架构,既保持了与开源社区模型的兼容性,又提高了计算性能。这个项目在 GitHub 上赢得了3k 颗星星的认可。
1. 扩散引擎🌐:提供与开源社区模型的兼容性和提高计算性能。
2. 丰富的特性✨:享受扩散模型的魔力,使用 Hunyuan-DiT 生成中文提示的图像。
3. LoRA
微调🔧:支持此模型的 LoRA 微调。
DiffSynth-Studio 提供了丰富的 Python 示例,包括: -
长视频合成🎞️:包含视频拓展模型,生成 128 帧视频。 -
图像合成🖼️:突破扩散模型限制,生成高分辨率图像。 -
卡通渲染🎨:以卡通风格渲染现实视频,并提供视频编辑功能。 -
视频风格化🖌️:简单操作即可进行视频风格化。
安装 DiffSynth-Studio 非常简单,步骤如下: ``` git clone
https://github.com/modelscope/DiffSynth-Studio.git cd DiffSynth-Studio pip install -e . ``` 使用
WebUI:``` python -m streamlit run DiffSynth_Studio.py ``` 通过 WebUI,可以更方便地使用 DiffSynth-Studio。