以下是关于图片变视频的相关内容:
使用 Camera Motion 进行图片变视频的步骤:
Joey 在图片转视频方面的经验分享: 主要用到了 runway 的笔刷,即梦的前后帧,Pixverse、pika 等。主要说三个本次用到的转场画面:
WTF 的图片转视频方法: 图片搞定之后,可以拖到 runway 里面去图生 4s 视频。进入 runway 官网首页,点击 start with image,然后直接将图片拖进来。动画幅度尽量用 3,5 有时候会乱跑。啥都不用改,直接点击生成即可。注意:不需要等进度条转完,可以直接继续往里放图片,可以同步执行。直接点删除,然后重新上传下面的图即可(最多可以放几个没数,大家可以自行测试)。重复步骤即可生成所有视频。(runway 是收费的,大家也可以找一下有没有免费的,可以去闲鱼或者淘宝买号)
点击"AddImage"上传图片。[heading2]2.输入提示词[content]在“Prompt”中输入提示词。[heading2]3.设置运镜方向[content]选择您想要的运镜方向,输入[运镜值](https://waytoagi.feishu.cn/docx/Ci9yd5xu2o46rXxNofdcnqH9nXb#doxcniTMBNtWHj6MSpXvB2DTyUh)。(下图中所示为向右运镜)[heading2]4.设置运动幅度[content]运动幅度和画面主体运动幅度有关,与运镜大小无关,可以设置成您想要的任意值。[heading2]5.其它[content]选择好种子(seed),是否高清(HD Quality),是否去除水印(Remove Watermark)。[heading2]6.生成视频[content]点击“create”,生成视频。
图片转视频主要用到了其实整个视频还是比较顺利的。主要用到runway的笔刷,即梦的前后帧,Pixverse、pika等,画面都不难出,难出的就再抽他个一百次就行。主要说三个本次用到的转场画面。[heading2]1.360人物环绕[content]在主角的梦境破碎,从年轻变老的这一段,我尝试了很多方式去表达,最后决定人物环绕拍摄的方式去做。而技术的思路是先用MJ做一组不同角度的人物站立图,然后通过comfyui的首尾帧进行视频制作。(感谢竹知大佬整理的工作流)[heading2]2.母亲的影子[content]我当时的想法是这组图既能在播放时看到母亲的轮廓,又能在暂停时自己成为一张完整的图片。我参考节气图的思路,在SDXL工作流中加入了两个controlnet,先在base里控制构图,再在refiner里再控制母亲在画面中的强度。[heading2]3.上帝之手[content]这个其实最简单,我们先出了一张伸手的图,然后用runway跑相互接近,然后转视频序列帧后在comfyui里用controlnet控制构图,按顺序自动出图跑一晚上,最后再剪辑序列帧就好了。
图片搞定之后,我们就可以拖到runway里面去图生4s视频了。(runway是收费的,大家也可以找一下有没有免费的,可以去闲鱼或者淘宝买号)进入runway官网首页,点击start with image然后直接将图片拖进来动画幅度尽量用3,5有时候会乱跑啥都不用改,直接点击生成即可注意:不需要等进度条转完,可以直接继续往里放图片,可以同步执行直接点删除,然后重新上传下面的图即可(最多可以放几个我没数,大家可以自行测试)重复步骤即可生成所有视频