
Hello大家好,我是阿图,今天跟大家聊一聊CodeMiko。
CodeMiko是谁?可能大家都有疑问,这还得从头说起。
话说现在是视频的时代,作为一名创作者,也想搞两个视频玩玩。
拍视频的多了去了,拍剧情的、玩剪辑的、配动画的、讲科普的,什么样的类型适合我这种呢?
最懒的应该就是口播了把。
口播有一个重点就是,真人出镜。
只有真人出镜,观众才感觉你是活的,借助真人,更能传达情绪,调动气氛。
可是我害羞,不想真人出镜啊!
怎么办!
哎,我就打起了虚拟形象的主意。
网上一搜,虚拟形象就是一个纸片人在那放动画。

正好我妹妹还是画画专业在读,她一定很懂!
电话打过去,她说她课上还在学英语和马克思。
课下忙于冒粉红泡泡。
哪有时间折腾动画。
唉,既然指望不上,只能自己再研究下了。
直到我搜到了codemiko:

CodeMiko相比其他主播有什么特点呢?
第一,栩栩如生, 细节满满
你可以看到她完全不像其他虚拟形象一样。
她脸部的表情变化是很丰富的,并且说话与口型是能对上的。
不仅头是可以左右晃动,头发也很自然。

她还有一个完整的身体,能够精细地控制动作。
你甚至能移动摄像机,360度视角全方位观测。
再就是她直播时的光影以及景深效果,让人感觉很真实。
她身上似乎有一股魔力,深深地吸引着人。
第二,会整活
她是一个主播。
充98金币,你能改变她瞳孔的颜色。
充101金币,你能发起投票。
充200金币,你能往她衣服上写字。
充212金币,你能改变她头发的颜色。
充300金币,你能让她放屁。

如果你充得更多,还能让她闭嘴、变成大头、跳舞、爆炸。。。
有次她做了个分身,然后两个Miko在里面掐架。

时不时通过虚拟形象连麦真实主播,让对面一脸懵逼。

有次她在互动时挑逗一个男生,结果被男生老婆发现。
男生老婆以为他在偷偷干坏事,质问他在干什么,他连忙解释说这只是个游戏。
可是你见过能真正跟你对话的游戏人物吗?
这个男生随后被老婆暴打。
没有人比她更懂整活。
第三,Miko所在的是一个自由世界
Miko所在得主场景是她得工作室,她在这个工作室场景里可以自由活动。
粉丝充了钱,可以进到她的场景中,然后变成一只青蛙。
她也曾举办类似最强大脑的答题活动,每个参赛队员现场答题比分。
他还设计了一个卖塔克的快餐车,粉丝们充金币提供对应的原料,然后她通过这些原料做成Taco,然后自己吃。
甚至最近,她开始讲课了,讲课形式也是有点暴力,站在讲台上,一旦发飙就会掏出粉红的加特林,然后全屏扫射。

Miko还可以化身为FPS游戏主角,进行竞技。

CodeMiko背后其实是一个真实的人,她通过动作捕捉技术,实现与虚拟人的语言和动作同步。

CodeMiko把她的幕后真人叫Tech,她负责整个人物形象的制作以及场景的设计,以及和粉丝的互动。
有时她在直播中以真人出现,和粉丝们交流她的制作历程,有时还会邀请一些网红来家里坐客体验她的设备。
这个人看着很年轻,实际上她已经31岁了,在3D建模领域已经多年的开发经验,这也是为什么她能制作出画面如此精良的虚拟人的原因。
除了开发经验,她还擅长于人聊天互动,许多连麦都是靠她来主导话题与维持气氛。看她直播,就好像看到了另一个周淑怡。
会做饭,有次专门教粉丝们如何做饺子。
会跳钢管舞,不时邀请网红来她家,教她们跳。

简直是个宝藏啊!
技术实现咱们分成硬件和软件两块来讲。
首先是硬件,CodeMiko的整套硬件设备主要包括
一部带刘海屏的iPhone
Xsens运动捕捉紧身衣
动作捕捉手套
配备两块RTX 3090显卡的主机
为什么一定要带刘海屏的iPhone呢?因为它有TrueDepth camera,也就是原深感摄像头,来捕捉面部3D轮廓信息。 在iPhone上下载一个Live Link Face,就可以实时采集面部信息了。

直播时,这些面部三维空间信息会发送到软件,来实现真人表情与虚拟人物的同步。
Xsens是专业的动作捕捉设备制造商,为诸多电影提供了动作捕捉技术,比如《泰迪熊》。 目前主流的动作捕捉技术主要分为两种,一种是利用光成像,也就是利用摄像头来捕捉动作信息。还有一种是不依靠摄像头,而是在人身上绑上传感器,比如陀螺仪,来侦测空间变化信息。第二种的精度和效果会更好一些,这也正是Xsens采用现场方法。
而显卡呢主要用来画面渲染和实时直播,因此需要足够性能,Miko也是直接简单粗暴地整了两块3090,当然说不准是英伟达送的。
这些硬件设备要多少钱呢?
iphone3千,手套3万,两块显卡一共3万,最贵的是紧身衣,要12万。
合计下来就要超20万了。
软件主要包括:
预先在Maya设计好的人物模型
Unreal虚幻引擎开发工具

据Miko称,光软件的一年要花的钱就要6万。
硬件软件合起来,得有30万了。
光成本这一步,应该就已经劝退诸多主播了。
况且她还会开发代码、会整活、会互动,这个壁垒可不是一般人能越过的。
我想,这也是为什么你没有看到第二个CodeMiko的原因。
没有竞品,所向披靡。
CodeMiko通过她的一系列整活使粉丝自愿充钱,收获颇丰。
包括像英伟达、微星这样的各大厂商也是找上门,送产品、送资金,为这个虚拟形象的发展开路。
但她眼光并没有局限在这儿,而且在考虑更远的问题,比如商业模式的可持续性。
在火了后,
她开了自己的公司,并拉了一名开发者合伙。
最近她的合伙人也在招募技术员,钱多福利多,不分国界,完全远程工作。

没有太多要求,只需你懂一点虚拟引擎开发就好。
在元宇宙如火如荼的今天,遍地都是各种概念的出现,各种投资热引发了人们的各种骚动。
而真正的实践呢,真的是少之又少。
我感觉,CodeMiko通过虚拟主播的这种方式,真正向我们展示了元宇宙的一种可行的实践和表现形式。
人可以通过特定的设备,进入到虚拟世界中,与虚拟世界中的元素进行交互,甚至还能与现实世界中的人打交道。
现在来看,这些设备还很笨重。
Miko说她每次直播都要穿上紧身衣,那个紧身衣绷得很难受,让人有点喘不上气。
而且那个固定iPhone的头盔,也是相当破坏画风。
但我看来,随着技术发展,这些设备会慢慢地向更微型化、更无感化、更智能化的方向发展。
就像扬声器,几十年前体型巨大,如今的形态已经演化为无线耳机,近乎无感地佩戴在耳中。
动作捕捉设备也是一样,将来可能无需校准、穿戴,就能捕捉到我们的一颦一笑。
虽然现在很多人对元宇宙不看好,但阿图认为,元宇宙是人类想象力的表现方式,代表了我们对星辰大海的无限向往。
即使在可预见的未来,我们这代人都可能走不出太阳系,无法去探索更神秘更深邃的宇宙。
既然肉身出不去,那我们就造一个把。
完。
-----------------------
关注阿图同学,一起体验新奇世界~