博客

舞替做的事,为什么不叫「AI 编舞」。

2026-11-20 · 舞替

「导入一首歌,出来一支舞」——听起来很像这些年大家熟悉的生成式工具,所以常有人问:这是不是 AI 编舞?

不是。舞替的整条链路里没有神经网络,没有生成模型,也没有任何一步在「猜」画面。它做的是三件更朴素的事:把歌拆成节拍、从一堆真实动作里搜出一条能踩上拍的序列、在本机把它渲染出来。下面把这三步摊开讲。

第一步:歌进来,先变成一张节拍表

导入 mp3 / m4a / wav 之后,第一件事不是「想象一支舞」,而是做频谱分析,算出每一帧的能量变化,得到一条起始点包络(onset envelope)——简单说,就是「音乐在哪些瞬间「动」了一下」。

然后在这条包络上找周期:从 40 BPM 到 180 BPM 逐档试,每一档再横向挪动相位(一拍从哪里开始),看哪一种「拍点对齐方式」能把包络上的峰吃得最干净。得分最高的那一档就是这首曲子的速度,同时给出一个置信度——遇到节拍含糊的歌,这个数字会老实地偏低。

再往上,是重拍与段落:哪几拍是每小节的第一拍,哪一段像主歌、哪一段像副歌。到这一步,一首歌已经变成一张表:一小节一行,写着它的起止时间、能量强弱、属于哪一种段落。

第二步:动作从哪来

舞替的动作库一共 36 个片段,分三种舞风(律动 / 机械舞 / 嘻哈),每种 12 个。

其中 18 个是实拍动作捕捉:真人舞者跳舞时的关节数据,从 CMU(卡内基梅隆大学)图形实验室的公开动捕数据库里挑出可用的舞步,重定向到 App 自己的骨架上,每个动作压成 25 个关键帧。CMU 明确允许这套数据用于研究与商业项目,所以这些舞步背后是真的有人在跳。

另外 18 个是程序化生成的——摆胯、踏步、绕臂、旋身这类基础单元,用参数化的方式做出来,用来补足动捕里没有的节奏型。它们和实拍片段在库里是同一种东西:一个有名字、有能量值、有可用段落、有左右主导手的动作。

第三步:编舞是一次搜索,不是一次生成

拿到了节拍表,也拿到了动作库,剩下的问题是:第 1 小节跳什么,第 2 小节跳什么,一直到歌结束。

舞替把它当成一个搜索问题。每一小节是一个「槽位」,每个槽位可以从当前这套舞风的 12 个动作里挑一个(还要挑左还是右),于是整首歌就是一条很长的选择序列。要在这条序列上找一条「总代价最低」的路,用的是束搜索:每一步同时保留 16 条最有希望的半成品路线,边扩展边淘汰,走完整首歌。

「代价」由几项加起来,每一项都有明确的含义,也都能单独调:

这些项加起来,束搜索就自动避开了「副歌跳得很拘谨」「同一个动作循环四遍」「落地姿势接不上下一个起手」这些一眼能看出来的毛病。整个过程是纯计算,不联网,同一首歌配同一个随机种子,永远得到同一支舞——想重来一次也好,想换个种子看看另一种编排也好,结果都是可复现的。

第四步:在本机把它跳给你看

编舞定下来之后,舞者的骨骼数据被送进 3D 舞台:霓虹灯管、地面反射、镜头跟着节奏推拉。预览用的是和导出同一套渲染路径,所以预览里看到什么,导出的文件里就是什么。

导出是 MP4,竖屏 / 方形 / 宽屏三种画幅,720P 或 1080P,直接能发。整首歌的节拍分析、编舞搜索与渲染全部在这台 iPhone 上完成,歌曲不会上传到任何服务器。

所以,为什么不叫「AI 编舞」

「AI」这两个字现在被用得很宽,宽到几乎等于「机器算出来的东西」。如果按这个口径,搜索也确实是一种算法。但在大多数人的理解里,AI 编舞、AI 生成指的是:给模型一句话或一首歌,它「长」出一段从没存在过的动作。

舞替不是这样。它的每一个动作都来自一段真实数据——要么是真人跳的,要么是人写好的参数化单元;它做的事情,是在这些已有动作里,按一套可以逐项解释的规则,挑出一串最合适的。没有哪一帧是凭空生成的,也没有哪一帧是模型「编」出来的。

这点较真,不只是措辞问题。在中国大陆,生成式 AI 相关的服务要按《生成式人工智能服务管理暂行办法》走一套备案流程,而舞替的链路里根本没有生成式模型,所以它不该、也不需要被当作 AIGC 产品来申报。写清楚「搜索 + 渲染」,是目前最准确、也最省事的说法。

顺便说,这样做也有好处:搜索出的编舞可以解释、可以复现、可以调参。你嫌副歌太单调,就把重复惩罚调大一点;嫌太激烈,就压低能量匹配的门槛。这比对着一个黑盒反复重抽,要踏实得多。

看看舞替

App Store:id6835664114(中国大陆区正在等待 ICP 备案审批,暂未上架)· iPhone,iOS 18 或更高 · 免费下载,Pro 一次买断

继续读

产品族: 海狮 海猫 海葵 海蛛 海鹞 海星 海狗 囧 WBXL Xultray webapp
iDocSet iDocSetHelper 雨燕 templateJS skiafy tranid 姨妈记 稳压记 舞替 轻跑 mkok 网址导航 原创歌曲
(C) 2026 抓糖网 版权所有
本站用 Google Analytics 和一份自有访问日志统计访问量(记录 IP、访问的页面与来源页,不设 cookie),只用来改进页面;App 本身不含任何统计 SDK。
媒体素材 / Press Kit · 博客

update: 2026-11-20