当前位置:AIGC资讯 > AIGC > 正文

[Stable Diffusion]ip-adapter:SD也可以垫图了,一张图复刻lora效果

Controlnet更新的v1.1.4版本新预处理ip-adapter,这项新能力简直让stablediffusion的实用性再上一个台阶。这些更新将改变sd的使用流程。

 1.ip-adapter是什么? 

  ip-adapter是腾讯Ai工作室发布的一个controlnet模型,可以通过stable diffusion的webui使用,这个新的功能简单来说,他可以识别参考图的艺术风格和内容,然后生成相似的作品,并且还可以搭配其他控制器使用。可以说SD已经学会临摹大师的绘画并且运用到自己的作品上了。

腾讯ai实验室 论文资料:https://ip-adapter.github.io/

IP-adapter的github地址:https://github.com/tencent-ailab/IP-Adapter

2.ip-adapter生成效果

  官方对ip-adapter进行了测试,如下图,第一列是输入的图片参考,第二列是输入的其他控制参数。最后一列是使用ip-adapter生成的效果,看测试效果能明显看出,ip-adapter的方法不仅在图像质量方面优于其他方法,而且生成的图像与参考图像更好地对齐。

  ip-adapter使用S

更新时间 2023-12-20