通过AI绘图自动生成金庸小说场景
现在AI人工智能越来越强大了。就是不会画画没有美术功底的人都能通过AI绘制出商用大片,今天就看到有网友通过用Stable Difussion还原金庸小说场景,通过作者发的作图的过程稿整理了作者的制作思路,汇总如下供大家借鉴。
总的来说,创作画面的过程首先需要通过各种方式获取草稿,接着利用ControlNet的功能呈现整个画面的内容。在这个过程中,对于不太满意的部分,我们可以通过Photoshop进行处理,并使用局部重绘技术进行优化。具体而言,这个过程可能包括反复的Photoshop调整和局部重绘。获取草稿的方法有很多种,下面我将逐一为您介绍。
1) Blender+OpenPose+PS
首先,让我们看看这张图片。作者使用Blender创建了整个场景的白模,并利用ControlNet的线稿模式绘制出各个元素。接下来,他使用OpenPose来绘制人物的动作。完成这些步骤后,不断地进行局部重绘以改进画面效果。图中的文字是通过Photoshop在后期制作中加入的。
2) Image2Image+PS
在创作这张图片过程中,作者并没有使用ControlNet。相反,他直接从互联网上找到相关素材,并使用Photoshop将它们拼合成一个场景。接着通过Img2Img技术将场景呈现出来。在场景合适后,作者在桥上添加了两个剪影,并利用Photoshop进行了多次局部重绘,直至达到令人满意的效果。
3) 多重ControlNet
在这幅作品中,为了精确掌控人物的动作、姿势和位置,作者运用了ControlNet的三项功能:线稿模式 canary、姿势控制 openpose 和深度图depth。这些功能都有助于确保人物与整体场景的和谐相融,提高了作品的表现力。
如果不知道如何启用多重ControlNet图层,请后台留言反馈,视情况后续给大家详细分享。
最后,作者为确保人物脸型与画面风格的一致性。为了达到这一目的,作者训练了两个Lora模型:一个用于控制男性人物的脸型,另一个则用于控制整体场景的画面风格。通过这种方式,整套图像的风格及关键人物的脸型得以保持统一。