> **OminiControl：扩散变压器的最小通用控制**
>> 谭振雄, > [刘松花](http://121.37.94.87/), > [杨星怡](https://adamdad.github.io/), > 薛巧初, > 和 > [王新超](https://sites.google.com/site/sitexinchawang/) >
> [xML 实验室](https://sites.google.com/view/xml-nus)，新加坡国立大学 >
> **OminiControl2：扩散变压器的高效调节** >
> 谭振雄, > 薛巧初, > [杨星怡](https://adamdad.github.io/), > [刘松花](http://121.37.94.87/), > 和 > [王新超](https://sites.google.com/site/sitexinchawang/) >
> [xML 实验室](https://sites.google.com/view/xml-nus)，新加坡国立大学 >
## 特点 OminiControl 是一个最小但功能强大的通用控制框架，适用于 [FLUX](https://github.com/black-forest-labs/flux) 等扩散变压器模型。 * **通用控制?**：统一的控制框架，同时支持主题驱动控制和空间控制（例如边缘引导和修复生成）。 * **最小设计?**：注入控制信号，同时保留原始模型结构。仅在基础模型中引入了 0.1% 的附加参数。 ## 新闻 - **2025-05-12**: ⭐️ [OminiControl2](https://arxiv.org/abs/2503.08280) 代码发布。它引入了一种新的扩散变压器高效调节方法。 （查看训练代码[此处](./train)）。 - **2025-05-12**：支持自定义样式LoRA。 （查看[示例](./examples/combine_with_style_lora.ipynb)）。 - **2025-04-09**：⭐️ [OminiControl Art](https://huggingface.co/spaces/Yuanshi/OminiControl_Art) 发布。它可以用艺术风格对任何图像进行风格化。 （查看[演示](https://huggingface.co/spaces/Yuanshi/OminiControl_Art)和[推理示例](./examples/ominicontrol_ar