要使用Stable Diffusion插件ControlNet的IP-Adapter进行图片风格迁移复刻,可以按照以下步骤操作:
模型下载:
首先,确保你的ControlNet更新到最新版本,并下载IP-Adapter相关模型。模型可以从以下链接下载:WebUI模型下载链接:https://huggingface.co/lllyasviel/sd_control_collection/tree/mainComfyUI模型下载链接:https://huggingface.co/h94/IP-Adapter/tree/main对于SD1.5模型,建议下载“ip_adapter_sd15_plus.pth”。风格迁移:
打开Stable Diffusion,上传一张参考图。启用ControlNet并勾选“完美像素模式”。控制类型选择“IP-Adapter”,模型选择“ip_adapter_sd15_plus.pth”或“ip_adapter_sd15.pth”。设置完ControlNet之后,选择一个模型,提示词可以简单写一些,也可以不写。根据需求设置生成参数,尺寸建议与参考图保持一致。点击“生成”即可。这样,原图的风格、色调、服装等会迁移到新图上。双ControlNet风格迁移:
在“ControlNet Unit 1”上传另一张图片,启用并勾选“完美像素模式”。控制类型选择“Canny”,预处理器和模型会默认选上,其他参数保持默认。生成后,可以看到“ControlNet Unit 0”的图片风格迁移到了“ControlNet Unit 1”上。姿势控制与风格迁移结合:
在“ControlNet Unit 0”上传一张参考图,启用ControlNet并勾选“完美像素模式”。控制类型选择“IP-Adapter”,模型选择“ip_adapter_sd15_plus.pth”或“ip_adapter_sd15.pth”。在“ControlNet Unit 1”上传一张姿势参考图,启用ControlNet并勾选“完美像素模式”。控制类型选择“OpenPose”,预处理器选择“OpenPose_full”。设置完ControlNet之后,选择一个模型,提示词可以简单写一些,也可以不写。根据需求设置生成参数,尺寸建议与参考图保持一致。点击“生成”即可。通过上述步骤,你可以使用ControlNet的IP-Adapter功能来实现图片的风格迁移复刻。
网友回复
有没有免费让ai自动帮你接管操作电脑的mcp服务?
mcp为啥用Streamable HTTP 替代 HTTP + SSE?
scratchjr有没有开源的前端html网页版本源代码?
多模态大模型能否根据ui交互视频来来模仿写出前端交互动画效果ui代码?
如何用阿里云oss+函数计算fc+事件总线EventBridge+消息队列+数据库+redis缓存打造一个高并发弹性系统?
阿里云函数计算 FC如何在海外节点搭建一个代理网络?
ai studio中gemini build的代码如何发布到github pages等免费网页托管上 ?
如何在cursor、qoder、trae中使用Claude Skills功能?
有没有不用u盘就能重装系统的开源工具?
python如何固定摄像头实时计算停车场停车位剩余数量?


