要使用Stable Diffusion插件ControlNet的IP-Adapter进行图片风格迁移复刻,可以按照以下步骤操作:
模型下载:
首先,确保你的ControlNet更新到最新版本,并下载IP-Adapter相关模型。模型可以从以下链接下载:WebUI模型下载链接:https://huggingface.co/lllyasviel/sd_control_collection/tree/mainComfyUI模型下载链接:https://huggingface.co/h94/IP-Adapter/tree/main对于SD1.5模型,建议下载“ip_adapter_sd15_plus.pth”。风格迁移:
打开Stable Diffusion,上传一张参考图。启用ControlNet并勾选“完美像素模式”。控制类型选择“IP-Adapter”,模型选择“ip_adapter_sd15_plus.pth”或“ip_adapter_sd15.pth”。设置完ControlNet之后,选择一个模型,提示词可以简单写一些,也可以不写。根据需求设置生成参数,尺寸建议与参考图保持一致。点击“生成”即可。这样,原图的风格、色调、服装等会迁移到新图上。双ControlNet风格迁移:
在“ControlNet Unit 1”上传另一张图片,启用并勾选“完美像素模式”。控制类型选择“Canny”,预处理器和模型会默认选上,其他参数保持默认。生成后,可以看到“ControlNet Unit 0”的图片风格迁移到了“ControlNet Unit 1”上。姿势控制与风格迁移结合:
在“ControlNet Unit 0”上传一张参考图,启用ControlNet并勾选“完美像素模式”。控制类型选择“IP-Adapter”,模型选择“ip_adapter_sd15_plus.pth”或“ip_adapter_sd15.pth”。在“ControlNet Unit 1”上传一张姿势参考图,启用ControlNet并勾选“完美像素模式”。控制类型选择“OpenPose”,预处理器选择“OpenPose_full”。设置完ControlNet之后,选择一个模型,提示词可以简单写一些,也可以不写。根据需求设置生成参数,尺寸建议与参考图保持一致。点击“生成”即可。通过上述步骤,你可以使用ControlNet的IP-Adapter功能来实现图片的风格迁移复刻。
网友回复
python如何调用openai的api实现知识讲解类动画讲解视频的合成?
html如何直接调用openai的api实现海报可视化设计及文本描述生成可编辑海报?
f12前端调试如何找出按钮点击事件触发的那段代码进行调试?
abcjs如何将曲谱播放后导出mid和wav格式音频下载?
python如何将曲子文本生成音乐mp3或wav、mid文件
python中mp3、wav音乐如何转成mid格式?
js在HTML中如何将曲谱生成音乐在线播放并下载本地?
python如何实现在windows上通过键盘来模拟鼠标操作?
python如何给win10电脑增加文件或文件夹右键自定义菜单?
python如何将音乐mp3文件解析获取曲调数据?