跳到正文
Comfy Blog· Jo Zhang·· 16 天前AI 评分28

852話 Hakoniwa 如何用 Comfy Agent 创作动画短片《YUI》

Creating the story of YUI with 852話 Hakoniwa and Comfy Agent

AI 导读

知名 AI 动画艺术家 852話 Hakoniwa 用 Comfy Agent 完成了首部动画短片《YUI》,主角名字取自 ComfyUI 最后三个字母。全片成本约 20 万日元(不含人力),一人专注工作 3 天,其中约 2/3 时间用于生成、1/3 用于剪辑,成片时长 4:20。

正文 · AI 翻译

一个女孩、一个计时器,还有一堵墙。

YUI 是首部由知名 AI 动画艺术家 852話 Hakoniwa 使用 Comfy Agent 创作的动画短片。这个故事在 Hakoniwa 心中酝酿已久,从她开始接触人工智能时便已存在。今天,我们想与 ComfyUI 团队分享她是如何创作出这部作品的。

我们与 Hakoniwa 的故事

我们于 2023 年初在社区中结识了 Hakoniwa,并于 2024 年在东京与她见面。她一直是日本扩散模型社区中一位充满热情的艺术家,也始终是最早尝试开源模型和工作流的人之一。由于她独特的个人风格,她的技术展现出与众不同的光彩。

在 AI 出现之前很久,Hakoniwa 就以 meola 为名从事自由插画师工作。在初音未来和 Vocaloid 场景的早期,她接受 Vocaloid 制作人的插画委托,同时也从事视频制作。她自己也作为 Vocaloid 制作人作曲,并参与作词。之后,她一直独自制作小型独立游戏。

2022 年 7 月,她接触到了 Midjourney,并为之震撼。她看到了将 AI 引入自己游戏开发的机会。与此同时,她感到自己一直在业余从事的概念艺术和背景工作可能会随着 AI 的到来而消失。她决定坚定地转向与 AI 合作,此后她一直是最早尝试新模型的人之一。

Hakoniwa 对动画有着强烈的热情,通常是日式风格。而她 70-80% 的 AI 视频作品都是在 ComfyUI 中生成的。目前,她还共同经营着 AndIdea,这是一家位于东京的 AI 公司,业务涵盖从动画制作到生成式 AI 应用支持、咨询和开发的一切。以下是两年前我们共同完成的一个项目:在东京原宿的活动标牌上展示的艺术作品,用真实相机拍摄。

挑战:一个关于女孩与墙的故事

当我们最初准备发布 Comfy Agent 时,Hakoniwa 是我们第一个交谈的艺术家。在我们提到帮助创作过程中“手艺”的愿景后,Hakoniwa 带来的不只是一个产品演示。她说“有一个故事我已经想创作很久了”,那是关于她对叙事的理解。

我们立刻就想一起做这件事,既是一次挑战,也是对她和 ComfyUI 的庆祝。于是,这就是 YUI 的幕后故事。

角色 YUI 的形象是如何诞生的

主角的名字叫 YUI。它来自 ComfyUI 的最后三个字母。Hakoniwa 告诉我们其中还有更多含义:結意味着联结、连接,也意味着努力结出果实。“我在 ComfyUI 中找到了 YUI,”她写道,“通过她,我发现了新的可能性。”

她并不一直是 YUI。我们做了 2 个版本的角色,以及 5 种服装变体,从选项 A 到选项 E。

最初的主角是 HIBANA,一个 Hakoniwa 两年前仅用几个小时创作的红发女孩。HIBANA 是演示的基础,从那里开始了用 Comfy 进行角色创作。我们围绕 Comfy 重新设计了她:黄紫色调,以及拉链上一个 C 形标志挂饰。

她主要通过 Agent 使用 GPT Image 2.5 进行角色设计和静帧创作

视频制作

YUI 意识到自己是一个故事的主角。随着一个红色计时器出现在她的世界中,这个世界将在三分钟后终结。她跑到世界的边缘,发现了第四面墙。

这样一个女孩逃离并抗争世界的故事,涉及大量高度动态且复杂的场景。艺术家需要在构图、环境、角色姿态、动作、表情以及整体节奏上投入大量想法和心思。“这正是创作者个人品味真正闪耀的地方,”她说。

分镜脚本和角色设定表也是准备工作的重要部分。

而世界并没有终结。在影片中,计时器在0:01处冻结了大约十五秒,从未到达零。故事也没有就此停止:它延续到了幕后制作视频中,展示了YUI是如何被制作出来的。

幕后

我们喜欢的一点是,这位艺术家并不隐藏工作过程。以下是视频中由Hakoniwa给出的几个数字:

  • 约20万日元总成本,不含人工。

  • 三天由一人专注工作。

  • 这三天中约三分之二用于生成(在Comfy Agent的帮助下),三分之一用于剪辑。

  • 从开始到结束,整个项目耗时7到10天,包括与Comfy的来回沟通、角色制作以及等待时间。

HIBANA,她两年前设计的角色,只花了几小时,不计入这些数字。

而Comfy Agent在以下方面提供了帮助:

  • 重新生成镜头。在粗剪中,她想要平滑转场并修复视觉叙事不清晰的时刻。最终影片时长4:20。重新生成单个镜头是这类影片的日常琐事。Agent构建工作流并运行它,她则继续处理下一个镜头。

  • 比较模型。她在同一镜头上比较了Wan、MiniMax H3和Seedance等视频模型,并为每个镜头挑选胜出者。主片主要使用Seedance 2.5制作,幕后视频则使用MiniMax H3。手动进行这种比较非常耗时。有了Comfy Agent,它变成了循环中的一步。她对放大器也做了同样的处理,在频道中并排展示。

  • 质量检查。她使用Agent检查输出,并让YUI更贴近她的官方角色设定表。一致性正是AI动画的软肋。她告诉我们,她所知道的最难挑战是一个连贯的多角色序列,其中没有任何东西崩坏。

  • 草图引导构图。她经常使用手绘布局来引导取景,然后反复试验,直到用Hakoniwa的话说,“每个镜头都符合预期的方向。”

模式很简单。Agent承担了重复性劳动,因此艺术家可以将时间花在真正的审阅、创意选择和讨论上:哪一条有正确的能量,哪张脸读起来像恐慌,何时停止。

最后,这里有一个Hakoniwa创作的emoji包,作为送给观众和社区的礼物。

YUI是第一部使用Comfy Agent制作的动画短片,未来还会有更多。

“故事还在继续,”正如YUI在影片中所说。
下一部可能由你来制作。

一如既往,享受创作!

来源:Comfy Blog · blog.comfy.org