
KIOXIA x NVIDIA
“TEZUKA 2020”使用人工智能技术与人类漫画家协作,共同创作了一部具有日本传奇漫画家手冢治虫风格的全新漫画。
它是铠侠“世界新记忆”品牌活动的第一个项目。人工智能将手冢治虫的漫画作为原始数据进行学习,自动生成角色设计和情节,最后由人类漫画家对生成的设计进行微调以完成这部新漫画。
在本文中铠侠的折原良平和NVIDIA的井﨑武士讨论了他们在该项目技术方面所扮演的角色。

“TEZUKA 2020”
人工智能创作的手冢治虫漫画
Q:“TEZUKA 2020”项目折原良平对此的看法是?
手冢治虫是日本代表漫画家之一。如果他今天还活着,会创作出什么样的作品呢?这个天马行空的问题启发了史无前例的“TEZUKA 2020”项目,该项目通过人工智能与人类之间的协作成功地回答了这个问题。铠侠的折原良平是该项目的带头人,他回顾了这一切是如何开始的。
折原:“TEZUKA 2020”最初是为了推广我们在业务中使用的人工智能技术。铠侠企划的 “未来的记忆”于10月启动,当时我们正在考虑半年内能做出什么样的项目,刚好 2月9 日是手冢治虫逝世周年纪念日,也被称为 “漫画日”。我们想如果届时能用漫画发表点什么,一定会比较有影响力,这就是项目的开始。
项目主要成员有东京大学Next Generation Artificial Intelligence Research Center(新世代人工智能研究中心)的松原仁教授、庆应义塾大学理工学部管理工学科的栗原聪教授、未来大学函馆分校的迎山和司教授和手塚治虫的儿子手塚真等多方人士。我是项目负责人,很多铠侠工程师也参与了这个项目。

人类 x AI
创作&训练流程揭秘
Q:这个项目是如何实现人工智能与人类协作的?
折原:讨论过人工智能都能做什么之后,我们意识到单纯依靠它创作出商业品质的漫画还是不可能的。这就是为什么我们决定尝试人类与人工智能协作。
协作的形式多种多样,我们决定采用的是让人工智能提供情节线和基本角色设计,然后由人类漫画家画成漫画。实际过程中剧情创作比较顺利,但在人物设计上遇到了一些困难。
Q:如何训练人工智能重现手冢风格?
折原:首先,我们提取了大量面部图像并将其作为训练数据导入,然后使用生成对抗网络 (GAN) 来创建新的角色设计,结果并不可行。这时铠侠的一位工程师提出了一个想法:与其让人工智能从头开始学习创建角色,不如使用一个已经能够识别和生成面孔的模型,然后让它进行迁移学习,最后通过微调该模型来解决这个问题。有意思的是,这位工程师并不是人工智能方面的专家,但他的方法奏效了。
之后我们就开始使用大量动漫人物的面孔来训练模型,但其中一位漫画家非常敏锐地指出:这样训练出的模型将再现动漫风格,而不是手冢治虫的漫画画风。
最终我们以真实人脸训练的模型作为基础,使用手冢治虫的漫画数据让其进行迁移学习。手冢治虫本人在创作角色时也会从真实的人脸中汲取灵感,因此这个方法在理论上是合理的。我们决定使用经过人脸训练的NVIDIA模型,这就是NVIDIA参与到该项目的原因。
井﨑:是的。最开始是栗原教授联系我说想使用我们的StyleGAN模型。从“铁臂阿童木”到“黑杰克”,我从小就一直在读手冢治虫的漫画,因此能够加入这个项目我很荣幸。NVIDIA的技术可以应用到这个项目中让我很兴奋。
当时,GAN因其处理创造性工作的能力在人工智能领域风靡一时。漫画是日本文化中一个独特部分,将我们的模型用于漫画相关的项目是很难得的机会。所以我联系了NVIDIA总部,询问我们是否可以参与其中。

后篇:
