John Heibel 已公开了项目文件,这些文件用于制作他的音乐视频《I’m Upping My P(doom)》。Heibel 称,Claude Opus 5.5 编写了分镜和 JavaScript 动画。文件显示,浏览器负责绘制各帧,ffmpeg 再将画面与现成歌曲合成为视频。成片可在 YouTube 上观看。

这部影片是创作者在Opus 5.5 于 9 月 22 日发布后分享的案例之一。说“Claude 制作了视频”,可能是指它编写场景和渲染代码,而非像视频生成模型那样直接生成动态影像。评估片段中有多少来自模型、多少依赖音乐、工具和人工指导时,这一区别很重要。

主要变化

  • 发生了什么变化:创作者正在使用 AI 编程智能体,将动画制作成软件项目,再渲染为视频。Heibel 公开了一套此类工作流的代码和可复用入门工具包。
  • 为何重要:分镜、场景文件和渲染器展示了短片背后的制作过程,以及从其他来源提供的输入。仅凭成片无法看出这些工作是如何分配的。
  • 尚有哪些未知数:这些公开案例无法说明通常需要多少制作时间和成本、成功率如何,或其他创作者能否轻易获得相同质量。BIG CHANGE 没有复现其中任何一个项目。

P(doom) 项目实际包含什么

Heibel 称,这部影片在 Claude Code 中经过两轮生成。第一轮使用 Opus 5.5 和 medium 努力程度;之后他指导第二轮改用 p5 笔触、让场景更有趣,并将每个场景衔接起来。根据代码仓库中的说明,他没有指定每个场景的创意构想,但确定了 Clawd 角色,并要求为每句歌词设计不同的视觉表现。

最终项目包括逐镜头分镜、用于向子智能体说明任务的动画指南、九个章节文件、共享的角色和时间轴代码,以及一个用 p5.js 和 p5.brush 绘制的studio.html页面。渲染脚本会在无头 Chrome 中捕捉画面,并使用 ffmpeg 编码为 MP4。仓库将歌曲作为音频素材,其中注明这是一段早前录制的作品;仓库并未称该歌曲由 Opus 5.5 创作。Heibel 还将灵感来源归于一篇更早的 X 帖文。

之后,Heibel 发布了Claude Animation Base,这是一套包含角色素材、指南、浏览器工作室和渲染脚本的入门工具包。README 建议用户首先请求制作一段 15 秒的 Clawd 卡通短片。README 称,智能体会先做分镜、制作镜头并检查联络表,再输出 MP4;运行需要 Node.js、Chrome 和 ffmpeg。Heibel 报告称,没有专用 GPU 时,水彩填充每帧可能需要数秒。

另一支音乐视频更清楚地展现了人工指导

Joshua Ledbetter 的《Functional Emotions》项目提供了一个有参考价值的对比案例。创作者称,歌词由较早版本的 Claude 编写,歌曲由 Suno 制作。之后,Opus 5.5 在 Claude Code 中编写了视频项目。Ledbetter 否决了初版歌词视频方案,要求加强场景表现和节奏,并引导智能体参考 Heibel 的 P(doom) 视频来把握节奏。代码仓库保留了被否决的版本、修订后的分镜、章节代码和离线渲染器。仓库介绍称,七个子智能体绘制了后续章节,模型还审阅了联络表。

Ledbetter 的项目使用自定义 WebGL2 笔触渲染器,并通过节拍网格和逐词时间戳,让镜头与现成歌曲对齐。其创作者发布的影片可与源文件一起观看。公开的修改记录展示了从最初请求到发布成片之间的创作指导过程。代码仓库记录了代码,但无法独立核实关于作者身份或制作时间的每一项说法。

这种形式也不止用于音乐视频。一位以 criticasterdotcom 发布内容的创作者分享了一个Headroom 产品讲解短片,以及一个包含两个已渲染版本的代码仓库。文件介绍了 Canvas 动画,以及从浏览器导出到 ffmpeg 的流程。创作者称,短片配音由本地 Kokoro 模型生成,音频部分还使用了采样乐器和音效。帖子报告称,Opus 5.5 用时 55 分钟完成该环节,且无需额外素材费用;这些时间和成本数字是创作者自行报告的,并非独立测量结果。

观看案例,再查看源文件

这些项目让创作者可以通过可编辑的软件流程指导视频制作。在两支有文档记录的音乐视频中,Opus 5.5 编写了大量动画代码;现成歌曲、提示词、参考资料和人工审阅也共同塑造了最终作品。

来源与延伸阅读