852話 Hakoniwa 如何用 Comfy Agent 创作动画短片《YUI》
Creating the story of YUI with 852話 Hakoniwa and Comfy Agent
知名 AI 动画艺术家 852話 Hakoniwa 用 Comfy Agent 完成了首部动画短片《YUI》,主角名字取自 ComfyUI 最后三个字母。全片成本约 20 万日元(不含人力),一人专注工作 3 天,其中约 2/3 时间用于生成、1/3 用于剪辑,成片时长 4:20。
一个女孩、一个计时器,还有一堵墙。
YUI 是首部由知名 AI 动画艺术家 852話 Hakoniwa 使用 Comfy Agent 创作的动画短片。这个故事在 Hakoniwa 心中酝酿已久,从她开始接触人工智能时便已存在。今天,我们想与 ComfyUI 团队分享她是如何创作出这部作品的。
我们与 Hakoniwa 的故事
我们于 2023 年初在社区中结识了 Hakoniwa,并于 2024 年在东京与她见面。她一直是日本扩散模型社区中一位充满热情的艺术家,也始终是最早尝试开源模型和工作流的人之一。由于她独特的个人风格,她的技术展现出与众不同的光彩。
在 AI 出现之前很久,Hakoniwa 就以 meola 为名从事自由插画师工作。在初音未来和 Vocaloid 场景的早期,她接受 Vocaloid 制作人的插画委托,同时也从事视频制作。她自己也作为 Vocaloid 制作人作曲,并参与作词。之后,她一直独自制作小型独立游戏。
2022 年 7 月,她接触到了 Midjourney,并为之震撼。她看到了将 AI 引入自己游戏开发的机会。与此同时,她感到自己一直在业余从事的概念艺术和背景工作可能会随着 AI 的到来而消失。她决定坚定地转向与 AI 合作,此后她一直是最早尝试新模型的人之一。
Hakoniwa 对动画有着强烈的热情,通常是日式风格。而她 70-80% 的 AI 视频作品都是在 ComfyUI 中生成的。目前,她还共同经营着 AndIdea,这是一家位于东京的 AI 公司,业务涵盖从动画制作到生成式 AI 应用支持、咨询和开发的一切。以下是两年前我们共同完成的一个项目:在东京原宿的活动标牌上展示的艺术作品,用真实相机拍摄。
挑战:一个关于女孩与墙的故事
当我们最初准备发布 Comfy Agent 时,Hakoniwa 是我们第一个交谈的艺术家。在我们提到帮助创作过程中“手艺”的愿景后,Hakoniwa 带来的不只是一个产品演示。她说“有一个故事我已经想创作很久了”,那是关于她对叙事的理解。
我们立刻就想一起做这件事,既是一次挑战,也是对她和 ComfyUI 的庆祝。于是,这就是 YUI 的幕后故事。
角色 YUI 的形象是如何诞生的
主角的名字叫 YUI。它来自 ComfyUI 的最后三个字母。Hakoniwa 告诉我们其中还有更多含义:結意味着联结、连接,也意味着努力结出果实。“我在 ComfyUI 中找到了 YUI,”她写道,“通过她,我发现了新的可能性。”
她并不一直是 YUI。我们做了 2 个版本的角色,以及 5 种服装变体,从选项 A 到选项 E。
最初的主角是 HIBANA,一个 Hakoniwa 两年前仅用几个小时创作的红发女孩。HIBANA 是演示的基础,从那里开始了用 Comfy 进行角色创作。我们围绕 Comfy 重新设计了她:黄紫色调,以及拉链上一个 C 形标志挂饰。
她主要通过 Agent 使用 GPT Image 2.5 进行角色设计和静帧创作
视频制作
YUI 意识到自己是一个故事的主角。随着一个红色计时器出现在她的世界中,这个世界将在三分钟后终结。她跑到世界的边缘,发现了第四面墙。
这样一个女孩逃离并抗争世界的故事,涉及大量高度动态且复杂的场景。艺术家需要在构图、环境、角色姿态、动作、表情以及整体节奏上投入大量想法和心思。“这正是创作者个人品味真正闪耀的地方,”她说。
分镜脚本和角色设定表也是准备工作的重要部分。
而世界并没有终结。在影片中,计时器在0:01处冻结了大约十五秒,从未到达零。故事也没有就此停止:它延续到了幕后制作视频中,展示了YUI是如何被制作出来的。
幕后
我们喜欢的一点是,这位艺术家并不隐藏工作过程。以下是视频中由Hakoniwa给出的几个数字:
约20万日元总成本,不含人工。
三天由一人专注工作。
这三天中约三分之二用于生成(在Comfy Agent的帮助下),三分之一用于剪辑。
从开始到结束,整个项目耗时7到10天,包括与Comfy的来回沟通、角色制作以及等待时间。
HIBANA,她两年前设计的角色,只花了几小时,不计入这些数字。
而Comfy Agent在以下方面提供了帮助:
重新生成镜头。在粗剪中,她想要平滑转场并修复视觉叙事不清晰的时刻。最终影片时长4:20。重新生成单个镜头是这类影片的日常琐事。Agent构建工作流并运行它,她则继续处理下一个镜头。
比较模型。她在同一镜头上比较了Wan、MiniMax H3和Seedance等视频模型,并为每个镜头挑选胜出者。主片主要使用Seedance 2.5制作,幕后视频则使用MiniMax H3。手动进行这种比较非常耗时。有了Comfy Agent,它变成了循环中的一步。她对放大器也做了同样的处理,在频道中并排展示。
质量检查。她使用Agent检查输出,并让YUI更贴近她的官方角色设定表。一致性正是AI动画的软肋。她告诉我们,她所知道的最难挑战是一个连贯的多角色序列,其中没有任何东西崩坏。
草图引导构图。她经常使用手绘布局来引导取景,然后反复试验,直到用Hakoniwa的话说,“每个镜头都符合预期的方向。”
模式很简单。Agent承担了重复性劳动,因此艺术家可以将时间花在真正的审阅、创意选择和讨论上:哪一条有正确的能量,哪张脸读起来像恐慌,何时停止。
最后,这里有一个Hakoniwa创作的emoji包,作为送给观众和社区的礼物。
YUI是第一部使用Comfy Agent制作的动画短片,未来还会有更多。
“故事还在继续,”正如YUI在影片中所说。
下一部可能由你来制作。
一如既往,享受创作!
来源:Comfy Blog · blog.comfy.org