ControlNet的"reference only"功能是一种预处理器,它允许用户直接使用一张图片作为参考来引导扩散,生成与参考图风格和内容相似的图像。以下是使用"reference only"功能的步骤:
更新ControlNet插件:确保你的ControlNet插件是最新版本,因为"reference only"功能需要ControlNet版本在1.1.153以上。
上传参考图片:在ControlNet的界面中,上传你想要作为参考的图片,并勾选启用(Enable)选项。
选择预处理器:在预处理器(preprocessor)选项中选择"reference_only"。选择"reference_only"后,旁边的预处理模型选择框会消失,因为"reference only"不需要任何控制模型。
设置控制模式和风格保真度:控制模式(control mode)选择平衡(balanced),如果你是1.1.17版本以上的ControlNet,需要将风格保真度(Style Fidelity)调整为1,这个参数决定了参考图片的权重,最小0最大1,可以根据需要调整数值。
配置其他参数:设置迭代步数(Steps)、采样方法(Sampler)、重绘幅度(例如0.6)等其他参数。
输入提示词:在文生图现象卡下,输入正向提示词(P prompt),例如"a dog running on grassland, best quality",反词(N prompt)可以暂不填写。
生成图片:点击生成按钮,ControlNet会根据你提供的参考图片和提示词生成新的图片。
评估结果:生成的图片会与参考图片在风格和内容上保持一定的相似度,但也会有一定的随机性。可以通过多次生成筛选,或者多次迭代prompt,优化生成结果。
通过以上步骤,你可以使用ControlNet的"reference only"功能来生成与参考图相似的图片,无需Lora炼丹或复杂的数值调整,即可实现精准的风格和内容参考。
网友回复
视频大模型和最强文本大模型通过代码生成视频哪个性价比更高?
seedream5.5为啥无法将图白色背景修改成透明?
seedance2如何通过2张不同角度平视图来识别场景进行人物定位?
有没有免费的浏览器中离线运行的语音识别ai模型?
微信小程序个人版不交钱认证就不让你用二维码,报错"errcode":85411?
美丽国为啥要限制ai发展?
seedance2如何参考白模视频使用真实场景和人物生成新视频?
如何设定小孩看电视的时候每隔10分钟弹出一个题目,答对才能继续,答错继续下一题?
直播数字人根据公屏互动评论实时做出不用动作技术是什么?
未来ai文本大模型根据剧本直接生成像素风或三维白模或灰模粗糙场景动画html给视频大模型参考站位与运镜?


