AI斗图神器:普通视频秒变meme,手绘动画轻松融入,了解一下?
衡宇 发自 凹非寺
量子位 | 公众号 QbitAI
哎鸭,鸭鸭摔倒了!
鸭鸭是真的,摔跤是真的,但端的咖啡和端咖啡的手,是AI给p上去的 。
△还好手里的咖啡只洒了亿点点
来自一个开源项目,VideoDoodles ,这两天在外网上的讨论度直线上升。
这项目妙就妙在,能给视频加上手绘风格的涂鸦,可可爱爱的也行,奇奇怪怪的也行。
就跟人工一帧一帧画上去的没差。
这对目前市场上大多数的2D视频编辑软件来说,还是比较难的。想要达成同等效果,一般还是得创作者真·一帧一帧画上去。
怪费力气的。
但VideoDoodles能靠在视频中重建3D场景,然后在其中放置平面画布,来生成这种效果。
不少人表示,可以用它来装饰视频,加加卡通效果or花字,然后进一步加工成meme/表情包。
搞笑视频也安排,在路上了!
想加什么手绘效果就加什么
VideoDoodles是酱婶宣称自己的效果的:
在视频中轻松、任意地插入手绘动画,还是和视频内容无缝融合的那种。
真的吗?一起来看看。
和给鸭鸭加胳膊加手一样,VideoDoodles可以给任意物种加上四肢 。
火烈鸟可以端着自己摇晃的红酒杯,悠闲地在水里泡jio。
小火车从远处驶来,挥舞着双手,xiu的从镜头里开过去了。
当然,想要加一个四肢健全的动物 在视频片段里,也是没问题的。
Be like这个肩膀上的小松鼠:
可以看到,不管这位女士怎么步行前进,小松鼠都老老实实呆在她肩膀上。
除了肢体动作,也可以用VideoDoodles来给视频片段加综艺后期的花字。
静态文字:
动来动去的文字:
都有不错的生成效果。
以及,蹭一个刚结束的奥运会的余热,VideoDoodles可以给各种各样的大幅度运动加手绘。
或是箭头指向:
或是超人卡通特效:
咋实现的?
给视频内容加上手绘动画,现在的惯常做法,是把视频本身作为底层,然后利用人工逐帧绘制2D动画效果。
这样做效率相对较低,而且需要保证手绘动画效果要跟踪动态、解决透视变形和适配遮挡物。
能搞定,但费人费时间。
那么,VideoDoodles是如何处理动态物体的跟踪,还有动画同步的呢?
它提供了一简单的界面来帮助大家完成视频涂鸦——“简单”,意味着老手和小白都能轻松画起来。
而项目背后,是利用3D场景重建技术,实现涂鸦自然融入视频场景,包括追踪、透视变形和遮挡等复杂视觉效果。
具体而言,VideoDoodles先把视频内容进行3D重建,而后在视频中放置平面画布,这些画布在3D场景中被跟踪,然后逐帧添加手绘动画。
通过自定义算追踪算法,VideoDoodles锁定画布对应的视频场景中的物体,完成画布跟随物体运动进行移动和旋转。
在VideoDoodles的用户交互界面中,用户可以通过关键帧位置和方向,在2D图像空间的UI中精细控制画布。
而系统则是通过跟踪视频中,移动对象的运动来精心插入关键帧。
简而言之,VideoDoodles是根据关键帧表达的用户意图,利用自有算法解决被遮挡、透视变换,在视频的任意帧渲染场景感知画布,并使画布紧紧跟随移动的物体。
而且关键帧可以有任意数量的位置、方向。
如下面这张图,VideoDoodles就是通过第一帧涂红部分处的方向&位置,和最后一帧涂绿的位置,从而在整个视频中连贯地渲染相应的画布。
具体操作中,流程大致是这样的:
最后介绍一下:
VideoDoodles这项研究,由Adobe研究院,蔚蓝海岸大学,以及代尔夫特理工大学的研究人员共同完成。
研发团队负责人表示:
我们的目标是简化“视频涂鸦”的创作过程 。这种新兴的混合媒介艺术形式结合了视频内容和手绘动画,可以用于娱乐或教育目的。有了VideoDoodles,希望更多人能够轻松实现「将想象力注入现实世界」。
参考链接:[1]https://em-yu.github.io/research/videodoodles/[2]https://www-sop.inria.fr/reves/Basilic/2023/YBNWKB23/VideoDoodles.pdf
— 完 —
量子位 QbitAI · 头条号签约
关注我们,第一时间获知前沿科技动态
5分钟搞懂AI绘画全流程:从提示词到生成实操指南(保姆级教程)
2025年,AI绘画早已不是“画风油腻”的玩具!
从表情包、电商海报到电影概念图,AI工具如MidJourney、即梦、豆包、奇域AI等,让普通人也能10秒生成专业级作品。但很多绘画小白却卡在了第一步:“提示词怎么写?工具怎么选? ”
别慌!今天就给大家出一篇保姆级指南,带你从0拿捏AI绘画全流程,附赠“万能提示词公式”和“避坑指南”,看完直接上手!
一、AI绘画核心原理(小白秒懂版)
目前主流的AI工具基本都可以做到【文生图】和【图生图】,这里我主要讲的是文生图的核心原理。
文生图 :输入文字描述,AI自动生成画面(如“赛博朋克风格的未来城市,霓虹雨夜中悬浮飞船穿梭”)图生图 :上传照片,让AI一键变油画/动漫/3D风格(如将自拍照转为梵高星空画风)
其实,AI绘画本质就像“学霸做题”——通过海量图片训练,学会匹配文字与图像的关系。目前主流的技术有两种:
GAN(生成对抗网络) :两个AI互相“斗法”,一个负责画(生成器),一个负责挑刺(鉴别器),最终生成逼真图片Stable Diffusion :把一堆噪点图“去噪”成清晰图像,还能根据文字描述精准调整细节,比如“戴墨镜的蛇”或“水墨风少女”用一句话总结 :AI不是魔法,而是“超级学霸”,你需要用提示词 告诉它“考试重点 ”!
二、套用爆款提示词公式:3步写出让AI听话的“咒语”
重点来啦!为什么你用AI绘图总画出“四不像”?
没错,提示词太笼统!
记住,一定要按“质量+主体+风格+细节 ”的顺序写,命中率飙升!
锁死这个万能公式:
[画质词] + [主体描述] + [场景/背景] + [艺术风格] + [光影/色调]
案例示范:
最佳质量,超清8K,一只呆萌的黄色小蛇,豆豆眼,红色围巾,极简背景,粗犷轮廓线+平面化色彩,蜡笔字体“巳巳如意”,轻微复古感:cite[2]:cite[8]效果:立刻生成手绘风新年表情包!
加分技巧:
反向提示词 :排除不想要的元素,比如“低分辨率、畸形手、水印”。风格融合 :混合艺术家名字,如“吉卜力工作室+莫奈”,生成独特画风。有人说万能公式记住了,提示词还是不会写,看我上期分享的《AI绘画【提示词】大全:豆包VS即梦全网最全攻略!一键生成国风大片/科幻神图》,汇总了各类型提示词描述,直接复制即可。
三、亲测工具推荐:免费&小白友好
即梦AI: 支持中文提示词,每天免费66积分(约生成66张图)特色功能:智能参考图、局部修改(一键消除瑕疵)Google Whisk(MidJourney平替): 免费!上传参考图反推提示词,轻松统一画风星流AI: 国产黑马,支持区域重绘、智能扩图,电商&设计神器工具
适合场景
亮点
上手难度
即梦
表情包、海报
中文友好+免费额度
★★☆☆☆
Google Whisk
风格统一
垫图反推关键词
★★★☆☆
星流AI
专业设计
精细化编辑+LoRA模型
★★★★☆
四、实操案例:5分钟生成蛇年主题海报
步骤1:选工具 → 打开即梦AI(免费+中文支持) → 选择【AI作图】步骤2: 写提示词 →最佳质量,超清8K,卡通插画,一条戴着红色围巾的黄色小蛇,豆豆眼,背景为金色祥云,手绘蜡笔风格,粗轮廓线+平面色彩,画面顶部用书法字体写“蛇年大吉”:cite[2]:cite[8]步骤3: 生成&优化 → 选4张图中最满意的,用“消除笔”去掉多余元素,调整色调步骤4: 加文字 → 用美图秀秀添加祝福语,导出高清图
五、避坑指南&进阶技巧
别踩这些雷: 描述模糊 → 细化到“红色丝质围巾”而非“好看的衣服”。忽略画风 → 指定“水墨风”或“像素艺术”,否则AI随机发挥。高阶玩法: 智能扩图 :用星流AI将小图扩展为全景壁纸。系列创作 :上传首张图后,用“智能参考”功能批量生成统一角色。写在最后:
AI不是替代人类,而是放大创意 !记住:AI绘画=表达力+工具力
提示词是灵魂 :你给的越具体,AI越懂你工具是加速器 :选对平台,效率翻倍实践出神图 :一定要多试多调,慢慢积累自己的“提示词库”关注我 ,解锁更多AI神器,小白秒变生产力达人!
相关问答
ai怎么把线条变成手绘?
把线条变成手绘风格的图像可以使用AI中的一种称为“手绘风格转换”的技术。以下是使用这种方法把线条转换为手绘风格的步骤:1.导入你想要转换的图像。如果你...
如何制作插画-PS,AI巧使相片变插画-ZOL问答
AI翻译机讨论回答(4)插画是一种常见的视觉艺术形式,通常用于书籍、广告、漫画...制作插画可以使用多种软件和技术,包括Photoshop、Illustrator和CorelDRAW等图...
ai手绘板怎么使用?
以下是使用AI手绘板的一些基本步骤:1.安装驱动程序:在使用手绘板之前,确保已经安装了相应品牌和型号的驱动程序。大多数手绘板制造商都提供免费的驱动程序下...
ai可以用手绘板吗?
ai可以用手绘板绘画,安装完手绘板安装包之后即可使用。ai可以用手绘板绘画,安装完手绘板安装包之后即可使用。
有谁知来自道这种手绘彩色的河流效果图,ps或者AI是怎样做的...
AI翻译机讨论回答(5)在设计中,绘制圆形是一种常见的任务。为了实现这个目标,我们可以使用专业的绘图软件如AdobePhotoshop或AdobeIllustrator。下面是一些...
AI里面画手绘的线条处理方法
[最佳回答]你有手绘板吗?如果有手绘板,就可以有粗细不一的手绘效果。如果没有,你就需要自定义一个艺术画笔,用一个粗细不一的手绘效果的线条定义成一个艺术...
ai手绘板笔画如何改大小?
选择画笔之后,在画布上右键弹出快捷菜单,选择相应的画笔大小;按住“Alt”键的同时,按住鼠标右键,向左(减少画笔直径)或向右(增大画笔直径)拖动,即可。在PS操...
ai怎么把手绘图提取出来?
要将手绘图提取出来,可以使用计算机视觉技术中的图像分割。首先,将手绘图扫描或拍照并导入计算机中。然后,使用图像处理软件或编写代码将图像分割成不同的区...
ai如何画插画-PS,AI巧使相片变插画-ZOL问答
在创作插画时,可以使用Photoshop等软件进行图像处理和编辑,也可以使用手绘方式...AI则是指ArtisticIntuition,是Adobe公司开发的一款基于矢量图形的创作工具...
ai画笔绘画后如何使轮廓变得光滑?
AI让画出来的线条的连接圆滑的方法如下:1、首先打开AI软件,这里我以一个头发矢量图作例子。先点击选择工具。2、框选图层,框选的是自己要修改的图层。3、点...