没有人比她更会整活——CodeMiko
阿图同学20
2022年04月05日 21:37

Hello大家好,我是阿图,今天跟大家聊一聊CodeMiko。

CodeMiko是谁?可能大家都有疑问,这还得从头说起。

话说现在是视频的时代,作为一名创作者,也想搞两个视频玩玩。

拍视频的多了去了,拍剧情的、玩剪辑的、配动画的、讲科普的,什么样的类型适合我这种呢?

最懒的应该就是口播了把。

口播有一个重点就是,真人出镜。

只有真人出镜,观众才感觉你是活的,借助真人,更能传达情绪,调动气氛。

可是我害羞,不想真人出镜啊!

怎么办!

哎,我就打起了虚拟形象的主意。

网上一搜,虚拟形象就是一个纸片人在那放动画。

正好我妹妹还是画画专业在读,她一定很懂!

电话打过去,她说她课上还在学英语和马克思。

课下忙于冒粉红泡泡。

哪有时间折腾动画。

唉,既然指望不上,只能自己再研究下了。

直到我搜到了codemiko:

CodeMiko相比其他主播有什么特点呢?

第一,栩栩如生, 细节满满

你可以看到她完全不像其他虚拟形象一样。

她脸部的表情变化是很丰富的,并且说话与口型是能对上的。

不仅头是可以左右晃动,头发也很自然。

她还有一个完整的身体,能够精细地控制动作。

你甚至能移动摄像机,360度视角全方位观测。

再就是她直播时的光影以及景深效果,让人感觉很真实。

她身上似乎有一股魔力,深深地吸引着人。

第二,会整活

她是一个主播。

充98金币,你能改变她瞳孔的颜色。

充101金币,你能发起投票。

充200金币,你能往她衣服上写字。

充212金币,你能改变她头发的颜色。

充300金币,你能让她放屁。

如果你充得更多,还能让她闭嘴、变成大头、跳舞、爆炸。。。

有次她做了个分身,然后两个Miko在里面掐架。

时不时通过虚拟形象连麦真实主播,让对面一脸懵逼。

有次她在互动时挑逗一个男生,结果被男生老婆发现。

男生老婆以为他在偷偷干坏事,质问他在干什么,他连忙解释说这只是个游戏。

可是你见过能真正跟你对话的游戏人物吗?

这个男生随后被老婆暴打。

没有人比她更懂整活。

第三,Miko所在的是一个自由世界

Miko所在得主场景是她得工作室,她在这个工作室场景里可以自由活动。

粉丝充了钱,可以进到她的场景中,然后变成一只青蛙。

她也曾举办类似最强大脑的答题活动,每个参赛队员现场答题比分。

他还设计了一个卖塔克的快餐车,粉丝们充金币提供对应的原料,然后她通过这些原料做成Taco,然后自己吃。

甚至最近,她开始讲课了,讲课形式也是有点暴力,站在讲台上,一旦发飙就会掏出粉红的加特林,然后全屏扫射。

Miko还可以化身为FPS游戏主角,进行竞技。

CodeMiko是数字人吗?

CodeMiko背后其实是一个真实的人,她通过动作捕捉技术,实现与虚拟人的语言和动作同步。

CodeMiko把她的幕后真人叫Tech,她负责整个人物形象的制作以及场景的设计,以及和粉丝的互动。

有时她在直播中以真人出现,和粉丝们交流她的制作历程,有时还会邀请一些网红来家里坐客体验她的设备。

这个人看着很年轻,实际上她已经31岁了,在3D建模领域已经多年的开发经验,这也是为什么她能制作出画面如此精良的虚拟人的原因。

除了开发经验,她还擅长于人聊天互动,许多连麦都是靠她来主导话题与维持气氛。看她直播,就好像看到了另一个周淑怡。

会做饭,有次专门教粉丝们如何做饺子。

会跳钢管舞,不时邀请网红来她家,教她们跳。

简直是个宝藏啊!

CodeMiko的技术具体是如何实现的?

技术实现咱们分成硬件和软件两块来讲。

首先是硬件,CodeMiko的整套硬件设备主要包括

  • 一部带刘海屏的iPhone

  • Xsens运动捕捉紧身衣

  • 动作捕捉手套

  • 配备两块RTX 3090显卡的主机

为什么一定要带刘海屏的iPhone呢?因为它有TrueDepth camera,也就是原深感摄像头,来捕捉面部3D轮廓信息。 在iPhone上下载一个Live Link Face,就可以实时采集面部信息了。

直播时,这些面部三维空间信息会发送到软件,来实现真人表情与虚拟人物的同步。

Xsens是专业的动作捕捉设备制造商,为诸多电影提供了动作捕捉技术,比如《泰迪熊》。 目前主流的动作捕捉技术主要分为两种,一种是利用光成像,也就是利用摄像头来捕捉动作信息。还有一种是不依靠摄像头,而是在人身上绑上传感器,比如陀螺仪,来侦测空间变化信息。第二种的精度和效果会更好一些,这也正是Xsens采用现场方法。

而显卡呢主要用来画面渲染和实时直播,因此需要足够性能,Miko也是直接简单粗暴地整了两块3090,当然说不准是英伟达送的。

这些硬件设备要多少钱呢?

iphone3千,手套3万,两块显卡一共3万,最贵的是紧身衣,要12万。

合计下来就要超20万了。

软件主要包括:

  • 预先在Maya设计好的人物模型

  • Unreal虚幻引擎开发工具

据Miko称,光软件的一年要花的钱就要6万。

硬件软件合起来,得有30万了。

光成本这一步,应该就已经劝退诸多主播了。

况且她还会开发代码、会整活、会互动,这个壁垒可不是一般人能越过的。

我想,这也是为什么你没有看到第二个CodeMiko的原因。

没有竞品,所向披靡。

CodeMiko通过她的一系列整活使粉丝自愿充钱,收获颇丰。

包括像英伟达、微星这样的各大厂商也是找上门,送产品、送资金,为这个虚拟形象的发展开路。

但她眼光并没有局限在这儿,而且在考虑更远的问题,比如商业模式的可持续性。

在火了后,

她开了自己的公司,并拉了一名开发者合伙。

最近她的合伙人也在招募技术员,钱多福利多,不分国界,完全远程工作。

没有太多要求,只需你懂一点虚拟引擎开发就好。

CodeMiko跟元宇宙有什么关系

在元宇宙如火如荼的今天,遍地都是各种概念的出现,各种投资热引发了人们的各种骚动。

而真正的实践呢,真的是少之又少。

我感觉,CodeMiko通过虚拟主播的这种方式,真正向我们展示了元宇宙的一种可行的实践和表现形式。

人可以通过特定的设备,进入到虚拟世界中,与虚拟世界中的元素进行交互,甚至还能与现实世界中的人打交道。

现在来看,这些设备还很笨重。

Miko说她每次直播都要穿上紧身衣,那个紧身衣绷得很难受,让人有点喘不上气。

而且那个固定iPhone的头盔,也是相当破坏画风。

但我看来,随着技术发展,这些设备会慢慢地向更微型化、更无感化、更智能化的方向发展。

就像扬声器,几十年前体型巨大,如今的形态已经演化为无线耳机,近乎无感地佩戴在耳中。

动作捕捉设备也是一样,将来可能无需校准、穿戴,就能捕捉到我们的一颦一笑。

虽然现在很多人对元宇宙不看好,但阿图认为,元宇宙是人类想象力的表现方式,代表了我们对星辰大海的无限向往。

即使在可预见的未来,我们这代人都可能走不出太阳系,无法去探索更神秘更深邃的宇宙。

既然肉身出不去,那我们就造一个把。

完。

-----------------------

关注阿图同学,一起体验新奇世界~