以下是关于手绘草图生成图片的相关信息:
这个是外国大佬@Ror_Fly的创意思路,很好的利用了runway的尾帧来制作动画,我也进行了实测,记录下来,关键的点,大家也可以发掘更多的玩法。[heading3]生成图片[content]提示词告诉flux,去生成一张技术草图,CAD提示词:eg:Flux短提示词,可以在上面提示词的里面提取[heading3]绘制的视频[content]在runway里面,使用提示词,告诉是从空白页面开始,逐行创建在runway里面,把生成的图片作为尾帧。[Gen-3 Alpha 1963070634,sketch drawing of a,ComfyUI_temp_lnmie_0,M 5.mp4](https://bytedance.feishu.cn/space/api/box/stream/download/all/IsBRbeFi3oPoUGxYao9cwBcQn2d?allow_redirect=1)[heading3]草图上色[content]使用flux的controlNet,depth固定controlNet使用的是Union的版本,目前这个版本,不建议权重调的太高,结束时间也是。[heading3]生成上色后的视频[content][Gen-3 Alpha Turbo 766422618,A robot cat running,ComfyUI_temp_lnmie_0,M 5.mp4](https://bytedance.feishu.cn/space/api/box/stream/download/all/RQBfbBGipoz4yNxpuZOcjc0Kn6c?allow_redirect=1)[heading3]how2draw Flux lora[content]再分享一个好玩的flux lora,用来展示绘画的过程。触发词:how2draw
图片生成3D建模工具是指利用人工智能技术,通过分析图片内容并将其转换成3D模型的软件或服务。以下是一些可用的工具:1.Tripo AI:Tripo AI是VAST发布的在线3D建模平台,它能够利用文本或图像在几秒钟内生成高质量且可立即使用的3D模型。该平台基于一个数十亿参数级别的3D大模型,能够实现快速的2D到3D转换,并提供AI驱动的精准度和细节。2.Meshy:Meshy是一个功能全面的工具,它不仅支持文本生成3D,还支持图片生成3D以及AI材质生成。用户可以通过上传图片并描述需要的材质和风格,来生成高质量的3D模型。3.CSM AI:CSM(Common Sense Machines)支持从视频和图像创建3D模型。它的Real-time Sketch to 3D功能支持通过手绘草图实时设计3D形象,再转换为3D模型。4.Sudo AI:Sudo AI支持通过文本和图像生成3D模型,特别适用于游戏领域的模型生成。用户可以上传图片或输入文本提示词来生成3D模型。5.VoxCraft:由生数科技推出的免费3D模型生成工具,能够将图像或文本快速转换成3D模型,并提供了图像到3D、文本到3D和文本到纹理等多种功能。这些工具通常具有用户友好的界面,允许用户通过简单的操作来生成3D模型,无需专业的3D建模技能。它们可以广泛应用于游戏开发、动画制作、3D打印、视觉艺术等领域。内容由AI大模型生成,请仔细甄别
我们使用Stable Diffusion中的【X/Y/Z plot】脚本来做一个参数对比,将X轴设置为提示词相关性,取值范围是1-30(+5),代表着从1到30,每次增加5;将Y轴设置为重绘幅度,取值范围是0-1(+0.2),代表着从0到1,每次增加0.2。这个对比结果,电脑一共需要生成42张图片,结果如下:可以看到,提示词相关性在6—11中间为最佳,大于11之后,画面的色彩和脸型就开始崩坏了,尤其是当重绘幅度变大之后,较高的提示词相关性会让AI走向完全不同的画风。而重绘幅度的大小可以控制生成图与原图的相似度,在对比图中可以看到,0.4时和原图比较接近,0.6时画面就变成了一个小女孩,当然这个数值也会因每幅图的不同而有所差异。通过对比,我们使用提示词相关性7和重回幅度0.5,绘制如下:接下来是绘图功能,比如我们现在想给这个人物增加一个红色的眼镜,可以使用红色的画笔工具做一个简单的描绘,然后在提示词中增加Red glasses,再点击生成。如果我们想去掉衣服上的图案,可以先用吸管吸取黄色部分,然后用画笔涂上。再生成时就没有图案了。绘图功能的话,每次生成都会重新调整整个画面,但是局部重绘的话可以只改变我们涂抹的部分,现在我们将人物的头部涂抹掉,文字提示改为“一个粉色头发的女孩的脸”,点击生成,就可以将头部换掉了。我们再使用局部重绘(手涂蒙版),修改一下帽子的部分,增加提示词“猫耳”,点击生成。