要使用Stable Diffusion插件ControlNet的IP-Adapter进行图片风格迁移复刻,可以按照以下步骤操作:
模型下载:
首先,确保你的ControlNet更新到最新版本,并下载IP-Adapter相关模型。模型可以从以下链接下载:WebUI模型下载链接:https://huggingface.co/lllyasviel/sd_control_collection/tree/mainComfyUI模型下载链接:https://huggingface.co/h94/IP-Adapter/tree/main对于SD1.5模型,建议下载“ip_adapter_sd15_plus.pth”。风格迁移:
打开Stable Diffusion,上传一张参考图。启用ControlNet并勾选“完美像素模式”。控制类型选择“IP-Adapter”,模型选择“ip_adapter_sd15_plus.pth”或“ip_adapter_sd15.pth”。设置完ControlNet之后,选择一个模型,提示词可以简单写一些,也可以不写。根据需求设置生成参数,尺寸建议与参考图保持一致。点击“生成”即可。这样,原图的风格、色调、服装等会迁移到新图上。双ControlNet风格迁移:
在“ControlNet Unit 1”上传另一张图片,启用并勾选“完美像素模式”。控制类型选择“Canny”,预处理器和模型会默认选上,其他参数保持默认。生成后,可以看到“ControlNet Unit 0”的图片风格迁移到了“ControlNet Unit 1”上。姿势控制与风格迁移结合:
在“ControlNet Unit 0”上传一张参考图,启用ControlNet并勾选“完美像素模式”。控制类型选择“IP-Adapter”,模型选择“ip_adapter_sd15_plus.pth”或“ip_adapter_sd15.pth”。在“ControlNet Unit 1”上传一张姿势参考图,启用ControlNet并勾选“完美像素模式”。控制类型选择“OpenPose”,预处理器选择“OpenPose_full”。设置完ControlNet之后,选择一个模型,提示词可以简单写一些,也可以不写。根据需求设置生成参数,尺寸建议与参考图保持一致。点击“生成”即可。通过上述步骤,你可以使用ControlNet的IP-Adapter功能来实现图片的风格迁移复刻。
网友回复
有没有不依赖embedding向量的RAG技术?
有没有支持实时打断语音通话并后台帮你执行任何的ai模型?
开源ai大模型文件格式GGUF、MLX、Safetensors、 ONNX 有什么区别?
出海挣钱支付收款PayPal、Wise 、PingPong、Stripe如何选择?
如何实现类似google的图片隐形水印添加和识别技术?
linux上如何运行任意windows程序?
ai能写出比黑客还厉害的零日漏洞等攻击工具攻击任意软件系统工程?
js如何获取浏览器的音频上下文指纹、Canvas指纹、WebGL渲染特征?
为啥ai开始抛弃markdown文本,重新偏好html文本了?
网站有没有办法鉴别访问请求是由ai操控chrome-devtools-mcp发出的?


