最近刷短视频,你大概率刷到过这样的画面:有人对着镜头双手比出一个"取景框",框里的世界突然变成动漫风、AI风,框外还是真人,手往哪移,那扇"窗口"就跟到哪。这就是8月最火的手指框特效。小红书上单条"别抠关键帧了"的教程帖拿了4.1万赞、3.4万收藏,剪映官方账号亲自下场发教程,GitHub上的开源项目也被扒了出来,连知乎都开始有人正经提问:“这个效果怎么做?不会AE能做吗?”
这个问题问得很到位。因为按老经验,这种"移动窗口里藏另一个世界"的镜头,标准答案就是AE蒙版加逐帧跟踪,是典型的科班活。但这波热点有意思的地方在于:它被四条完全不同的路线同时解出来了,其中三条真不需要你会AE。我把各平台的教程、开源项目和翻车案例都翻了一遍,今天把每条路线的成本、门槛和坑一次讲清楚。
先一句话看懂原理,后面所有路线都是它的变形
不管用哪条路线,这个效果的本质就三件事:对齐、跟踪、合成。
真人原视频和AI重绘过的视频要严丝合缝叠在一起,这叫对齐;要圈出一个跟着双手移动的窗口,这叫跟踪;最后只让窗口内部显示AI版本,这叫合成。知乎四条路线的区别,只是这三步分别交给谁干——交给AI生成、交给网页工具、交给你的双手,还是交给你在AE里自己搭。理解了这一点,以后这类"AI+跟踪"特效出再多新工具,你都能三分钟判断它靠不靠谱。

路线一:AI视频生成一步到位,最快但最贵也最飘
直接把比好手势的视频丢给AI视频模型,让AI把框内区域重绘成另一个世界。小红书上850赞、1272收藏的那条"双手一框,AI世界从指间涌出",用的就是Google Gemini。小红书即梦的Seedance 2.5也能做,剪映官方教程挂的正是这个标签。知乎
优点是不用学任何剪辑逻辑,上传、写指令、出片。缺点也很实在:一是花钱,有作者实测,即梦不开会员生成一条10秒视频要扣二十多块的积分,多试几次就是一笔小钱。知乎二是漂移,AI重绘经常不守原构图,有作者因为指令里少写了一句"位置一致",生成的角色直接跑到画面正中,白跑了五分钟。记住指令三要素:保持动作一致、比例一致、画面位置一致,少一个都可能翻车。
路线二:开源网页工具,免费试错的第一站
8月中旬冒出来的开源项目Finger Frame AI,把整套流程做成了网页版:MediaPipe自动追踪双手,算出一个动态四边形窗口,再把AI版本"透"进窗口里。GitHub知乎和小红书上都有完整教程,不用装代码,浏览器直接跑。
这条路线最值钱的经验是它的防翻车设计:先用Placeholder(占位模式)跑一遍跟踪,确认双手能被稳定追踪,再填Gemini的API Key去做真正的AI重绘。GitHub顺序反了的话,跟踪本来就是废的,你却先烧了一笔生成费用。第一次拍素材记住三个词:固定镜头、双手全程入画、动作放慢,3到5秒就够,别上来就拍长镜头炫技。
路线三:手搓关键帧,一分钱不花但费手
完全不碰AI生成也能做:给上层素材加一个高反差效果(比如负片),用蒙版把手指区域圈出来,然后一帧一帧把蒙版关键帧跟着手走。小红书2773赞的AM矢量绘制教程、剪映的手动跟踪教程,还有知乎上那位用Final Cut Pro做的作者,走的都是这条路。小红书

成本全在时间上。一位作者的原话是:30秒的视频、一秒30帧就是900帧,别一帧一帧点,隔两三帧甚至五到十帧调一次蒙版,快的地方多补帧、慢的地方少补帧。知乎免费是真免费,费手也是真费手。另外提醒一句:有作者反馈剪映电脑版的钢笔蒙版功能突然找不到了,疑似内测权限收回,动手前先确认你手里的版本还有没有这个工具。
路线四:AE登场——科班路线,现在进场还是内容洼地
最后说回AE。前面三条路线把"够用"的问题都解决了,但AE的价值在另一个维度:可控上限。
手搓路线的蒙版关键帧逻辑,在AE里完全成立,而且AE自带的Mocha平面跟踪,对大幅度移动的手部镜头比纯手动K帧稳得多;框内框外的调色匹配、边缘羽化、光效叠加这些合成细节,也是AE的看家本领。想接商单、想批量复刻、想在效果里再叠粒子光效的人,迟早要回到AE这条路上。

还有个值得注意的信号:我把B站搜了一圈,目前还没有一条系统的"AE做手指框特效"教程,搜出来的都是擦边的旧内容。也就是说,这条科班路线的教程位还空着——对会AE的人来说,这波热点不只是跟风玩梗,把前面三条路线的思路翻译成AE工程做一期内容,本身就是个机会。
顺带说句公道话:就算你最后没在AE里做这个效果,它也帮你验证了一件事——跟踪、蒙版、合成这三件套,是所有特效的通用底座。把这三样在AE里练熟,下一个热点来了,你不用等别人出教程。

四条路线怎么选,一张表说清
路线 | 上手时间 | 花费 | 效果上限 | 适合谁 |
|---|---|---|---|---|
AI生成一步到位 | 最快,半小时内 | 按条计费,多试多花 | 看模型发挥,易漂移 | 只想发一条玩玩、不在乎细节 |
开源网页工具 | 半天 | 低(API按量) | 中等,跟踪自动 | 想白嫖试错、能接受网页流程 |
手搓关键帧 | 一到两天 | 免费 | 高,全靠自己 | 有时间、想完全掌控细节 |
AE合成 | 一到两天起 | 免费(软件除外) | 最高,可叠加任意效果 | 商用、量产、想练真本事 |
坑位汇总,动手前看一遍能省不少钱
先测跟踪,再花钱生成。跟踪不稳就重拍素材,别折腾参数,更别先充钱。
AI重绘指令写全三要素:动作一致、比例一致、位置一致,缺一不可。
素材拍摄三原则:固定镜头、双手完整入画、动作放慢。手甩出画面或者被遮挡,跟踪直接报废。
导出拿到WebM别慌,这不是失败,用FFmpeg转成MP4就行。GitHub
工具权限会变:剪映钢笔蒙版这种内测功能可能说收就收,重要项目别把宝押在单一工具上。知乎
最后给个判断
如果你只是想追个热点发一条,选路线一或二,今天就能出片;如果你想借这个热点把技能真正长在身上,选路线三或四,手搓一遍蒙版关键帧,你对"跟踪"和"合成"的理解会比看十条教程都深。
接下来值得持续观察三个信号:剪映会不会直接出一键模板把这个效果平民化(官方已经下场发教程,大概率在路上)、B站什么时候出现第一条系统的AE版教程、以及开源项目会不会支持本地模型把API费用打下来。这三个变量任何一个落地,上面的路线排序都会重排。
特效热点年年有,但把热点拆开看成本、看门槛、看坑的机会不多。收藏这篇,下次再刷到"全网都在做的特效",你至少知道先问一句:对齐、跟踪、合成,分别是谁在干。