【统计】Hololive 3D 全身动捕直播所体现出的情况

Xsens动作捕捉 2023-04-26 2932

在 Vtuber 直播领域,和一般的直播相比,3D 全身动捕的直播往往更加值得关注:日常的直播一般只需要普通的 PC / 摄像头 / 手机搞定,但是全身动捕必然需要主播全身穿戴专用的动捕设备,而且还必须在房间内布置一系列测量仪器。因为直播一次需要投入社内比较多的资源,而且这样的直播一般也会具有相对更强的吸引力,所以 3D 全身动捕直播的各种情况某种意义上会揭示社内的资源调度、人员安排等情况,算是一个比较有趣、值得探究的问题

【统计】Hololive 3D 全身动捕直播所体现出的情况  第1张
2018 年 NHK 记者采访 Cover 时候拍摄的画面,使用的仪器方案与 HTC Vive 相像(HTC Vive 也同样出现在了投资人列表里),精度很低
【统计】Hololive 3D 全身动捕直播所体现出的情况  第2张
技术相对先进的光学 - 惯性混合动捕,被广泛应用于游戏行业和电影行业。动捕演员身上所穿着的设备很轻便,而且得到的数据精度很高;但该方案的外围仪器非常庞大复杂,且成本很高
笔者找到了一则 2018 年 NHK 对 Cover 的采访,链接在此[1]

在上一篇发出的文章内,笔者谈到了关于 Hololive 3D 全身动捕团队的一些情况:

但是思来想去,感觉在文章中单纯列举部分的实例总显得不够客观。因此笔者花了四五天的空闲时间,人肉爬虫(把笔者累到半死),最后统计到了 Hololive JP 各成员(包括官号)在内的、全部的 3D 全身动捕直播(采样区间为 2019 年 1 月 1 日到 2021 年 9 月 10 日)

【统计】Hololive 3D 全身动捕直播所体现出的情况  第4张
弄出来大概是这样一份超级长的表格

不过首先需要注意的是,这份人肉爬虫出来的表格必定会有几个方面的问题:

  1. 笔者无法将会员限定的直播统计进去,因而会导致一些直播被忽略掉(特别是时乃空和 Azki 两位偶像方向的,弄过不少的会限 Live)
  2. 笔者非常难以判断,哪一些直播是实时动捕,而哪一些是播片。尽管播片一样需要调用全身动捕资源,但由于可以后期编辑 / 渲染,所以直播不可能出现差错;选择播片很可能意味着设备的可靠性出现了明显问题
  3. 由于是人肉爬虫,所以统计上可能会有差错。一些 3D 直播可能会被忽略掉。但这样的统计实在也没有办法依靠程序:很多的 3D 直播只有脸部/上半身,用手机就可以搞定,而程序根本没有办法挨个对这些直播作出判断(当然,笔者自己的判断也可能会出差错。有好多次直播看起来场景很大,但是主播全程坐着,屁股没有任何挪动,这样的直播当然就不能计算在内)
  4. 由于是笔者人肉一个个看,所以表格中对于各场直播的评价(哪些效果好,哪些效果差)可能会有比较多的主观因素
  5. 一些画面上的差异可能是由推流设置导致的,而与 3D 动捕技术没有关系。码率之类的设定会显著影响画面的清晰度和流畅度;就连推流设备(CPU,英伟达 GPU,专业的直播编码器)的选用都会对画面有显著影响

【统计】Hololive 3D 全身动捕直播所体现出的情况  第5张
2019 年 1 月前, Hololive 全员除时乃空和 Azki 以外,没有成员进行过 3D 全身动捕直播

首先看一下最宏观的数据。从大概 2019 年 1 月到 2020 年 3 月,Hololive 全频道的 3D 全身动捕直播频率大体上来说比较稳定。时乃空的生放送数量明显占据了相当大一部分直播机会,一般每个月会给到一到二次。Azki 大体上也会给到每个月一次的生放送。其他一些一二期生更新的 3D 模型 / 泳装回也有不少(2019 年上半年共发布 6 次新 3D 模型,下半年则有 3 次泳装回和 2 次新 3D 模型发布,2020 年 1 到 3 月发布一次新 3D 模型)。从 2019 年 6 月开始还有一些杂谈(游戏回,邀请了一位社外嘉宾的联动等等)。2019 年 12 月到 2020 年 1 月有一个明显的凹陷,不过 Hololive 全员参加了 1 月 28 日在丰州举行的 Hololive 1st live,预计live 的准备需要占用团队大量的时间精力,直播频率的下降是很容易理解的。

2020 年 4 月和 2020 年 5 月,全身动捕直播的频率诡异地低到了令人无法忽视的水平,4 月只有 1 次,5 月则干脆没有。这一时间点和山田赫敏情报中 2020 年 5 月,Cover 大量技术人员离职的情况相对应。

但与山田赫敏方面情报所给人的第一印象相反的是,2020 年 6 月到 10 月,全身动捕直播的频率一直处于显著的高水平,甚至 6 月到 7 月期间一口气发布了 6 位成员的 3D 模型。当然这样的情况也并非完全解释不通。这部分的直播中绝大部分都是对技术要求相对较低的杂谈直播,对动捕精度、光线效果、运镜手法等等的要求都明显不如 Live。而且更明显的是,6 位发布 3D 模型的新成员中除了不知火芙蕾雅以外,其他 5 人刚好是四期生全员;多人 3D 模型扎堆发布的做法和以往差异过大(就算是同一期,一般也只是在半年内陆续发布),令人怀疑这一批 3D 模型是不是技术团队根据要求在一段时间内集中制作好的。

2020 年 11 月到 2021 年 3 月,全身动捕直播的频率相对于前后两个时期明显较少;虽然 12 月 19 日举办的 Hololive 2nd 需要占用大量的时间精力,但是这一时期翻车和播片的频率都很高:天音彼方原定于 12 月末的一周年 Live 当天出现技术问题未能播出,1 月 2 日补上时里面出现了大量类似于 MV (运镜和滤镜都很极端)的镜头,令人怀疑中间插入了大量的播片;天音彼方前一天的 Live 翻车后,桐生可可次日的 Live 被实锤播片; 1 月尾丸波尔卡的两次直播看上去播片感很重;2 月猫又小粥的直播当场翻车,猫又小粥几乎当场哭出声来 ...... 根据山田赫敏等人的说法,在 5 月大量技术人员出走后,Cover 对中国方面技术团队的依赖程度较高,而后 927 事件发生,中方技术团队在完成既有合同之后没有续约,直接导致了 Hololive 2nd 演出效果的拉胯和一段时间内持续出现的技术问题。

不过这一段时间内 Hololive 的 3D 全身动捕直播也并非一无是处。12 月大神澪的 live 有挺不错的光线效果(但是并不知道是不是播片)。1 月 Azki 更新了模型(就是文章封面的那个),模型质量有比较大的提升,光线质量也很出色

2021 年 3 月至今,全身动捕直播的频率一直处于持续增长的状态,直至 8 月(上个月)达到了 13 次的历史峰值(尽管本月预计难以再维持原本的增长趋势),平均每两天就会进行一次直播,实属夸张。可以肯定的是,Cover 的技术力量出现了明显复苏,或者 Cover 的运营策略明显变得更加激进。而山田赫敏则给出了意味深长的评价:“yagoo 想复制当年的成功”。


【统计】Hololive 3D 全身动捕直播所体现出的情况  第6张

Hololive 各成员频道的 3D 全身动捕直播频率比笔者想象得更加平均。身为元老的时乃空毫无悬念地拿到了频率的最高位,但接近 70 % 的直播机会都是 2019 年的生放送,2021 年总计只有 3 次直播机会,因而事实上在近一年多并没有得到多少资源倾斜;实际上直播优先级最高的是频率无疑是排在了第二位的 Azki,一般来说两次 live 间隔不会超过 3 个月(有不少甚至只间隔了一个月),并且还有最保守 7 次的会限 Live 没有计入(通过查找 Live 后相对应的杂谈回)。

除去时乃空和 Azki 两位“偶像势”,直播频率最高的是凑阿库娅(二期生),其中有 3 次 Live;不知火芙蕾雅(三期生)和常暗永远(四期生)尽管都只直播 4 次,但同样有多达 3 次的 Live。

各个五期生出道时间仅一年出头,且 3D 模型发布速度也很一般,导致大部分成员的全身动捕直播次数很低。兔田佩克拉的低直播数相对来说比较刺眼(考虑到其位居前列的吸金能力)。而百鬼绫目嘛 ..... 不知道咋回事(一说中之人是大学生,功课比较多?)

【统计】Hololive 3D 全身动捕直播所体现出的情况  第7张

客串频率方面还算平淡。猫又小粥占到第一位大概会出乎大部分箱推粉的意料,但前排的猫又小粥、角卷棉芽、常暗永远、宝钟玛琳、星街彗星和不知火芙蕾雅都能算是以歌力见长的(大概);至于白上吹雪,大概是因为人(dao)缘(chu)好(ceng)?比较有趣的是,没有在自己的频道进行过一次 3D 全身动捕直播、日常直播频率也一直偏低的百鬼绫目反倒是参加了足足 4 次客串(不过都集中在 2021 年,说不定是大学毕业了/快毕业了?)。

【统计】Hololive 3D 全身动捕直播所体现出的情况  第8张

总出场频率看不出什么有价值的东西,但毫无疑问,夜空梅露(一期生)输麻了(同时垫底的其他二位都是五期生)......


【统计】Hololive 3D 全身动捕直播所体现出的情况  第9张
2021 年 6~9 月,Hololive 的各场直播

Live 频率变化问题:直到统计完成以后笔者才发现了,2020 年 3 月星街彗星的 Live 是 Hololive 第一个主角非时乃空或者 Azki 的 Live。而且更加引人深思的是,2021 年之前 Hololive 的 3D 直播中,各种杂谈类的直播占据了全部全身动捕直播的 80% 以上;但是到了 2021 年,live 的频率开始以坐火箭般的速度上升,到 8 月甚至以各种理由搞了足足 13 次 Live;很多原本没有办过 Live 的成员也办起了 Live。

【统计】Hololive 3D 全身动捕直播所体现出的情况  第10张
2021 年 7 月 30 日,宝钟玛琳生日 Live,共出场 14 人
【统计】Hololive 3D 全身动捕直播所体现出的情况  第11张
2021 年 8 月 8 日,常暗永远生日 Live,共出场 12 人

直播的出场人数问题:2021 年以前,Hololive 单场直播出场人数的顶峰是 2020 年 4 月的天音彼方生日 Live(9 人),其次是 10 月星街彗星 50w 关注纪念 Live(6 人),再其次是 9 月宝钟玛琳的游戏回和 12 月官号的杂谈回(各 4 人)。结果从 6 月开始,Hololive 的各个 Live 出现了明显的人海战术倾向,出场 6 人以上就出现了 6 回,甚至出现了出场 14 人这样的奇观。

综合以上两点情况,笔者认为:

  1. Hololive 的技术保障能力相比于之前有了明显的提升(尽管宝钟玛琳 14 人出场的那次出现了事故,直播中断 20 min)
  2. Cover 高层极有可能试图在相对较短的时间内大幅提升直播的播放数
  3. Cover 高层或许在试图深入发掘 Hololive JP 现成员的潜力
  4. 上述的情况很可能也揭示了 Hololive 日后长期的发展方向最早推出自家 Vtuber (时乃空)时,yagoo 的愿景是“做偶像”;之后在旗下 Vtuber 出现显著的主播化趋势以后,还试图单独分出 Hololive Gamers,来和偶像方向的成员相区分,并以失败而告终;以上种种导致很多人一直在嘲笑“yagoo 的偶像梦碎了一地”“yagoo 血压又上来了”。但是从近期 Hololive 的动向来看,各个成员的偶像成分不仅没有被削弱,反而在逐步增强。作为“偶像”,各个成员对应粉丝的 Gachi 度预计也会明显提升。笔者认为这或许正是 Cover 高层定下的远期努力方向
去年 12 月 Hololive 发布 IN 二期生到今年 9 月 Hololive 发布 EN 二期生,期间 Hololive 有足足 9 个月没有发布新成员。拒绝人海战术,着力于内部的整顿和现有成员的发展巩固,Hololive 又回到了 2019 年 9 月前那种保守的发展节奏上来。不得不说,这样的经营策略非常对应 yagoo 的风格
山田赫敏评价“yagoo 想复制当年的成功”

一些其他的情况:

直播时长:除去 Azki 的 Live,Hololive 每次的 3D 全身动捕直播时长几乎全部都是雷打不动的一小时左右。这无疑考虑到了中之人的体能,但工作人员工时费用或许是更关键的因素,因为直播中间中断的情况下,直播时长都没有顺延;唯一的一次例外是 2021 年 7 月宝钟玛琳的生日 Live,宝钟玛琳和白上吹雪出场十多分钟后,直播中断约 20 分钟,而后面还有 12 位成员等待出场,(或许是考虑到众多成员的面子)直播最后顺延了 20 多分钟

直播参与人数:上面已经谈到,单次直播最多出场了 14 人;但 Hololive 每次直播期间,台上同台的人数最多不超过 5 人(1st 和 2nd 那样规格外的超大型表演自然排除在外)

直播效果:主观来看,2020 年 3 月的星街彗星 Live 的技术水平毫无疑问达到了很长一段时间以来的顶峰(但有一说一,星街那一次唱得真的有点糟糕,看上去大概是太紧张),而后面 2021 年 Azki 直播也非常出色,但最多只能持平这一水准;Hololive 在一段时间内的各个直播里体现出的技术水平往往是不太稳定的;宏观上来看,Hololive 的技术水平无疑在持续进步

另外如果多加注意的话,Hololive 不同时期不同成员的建模质量有不小的差异;场景的光效复杂程度、模型的多边形数也明显会影响画面流畅度(比如紫咲诗音的 3D 模型公布直播可以说卡的要死)
【统计】Hololive 3D 全身动捕直播所体现出的情况  第12张
2019 年 1 月的时乃空生放送,空妈这个形象简直可以用惨不忍睹来形容 ...
【统计】Hololive 3D 全身动捕直播所体现出的情况  第13张
2020 年 9 月,3 周年杂谈期间的时乃空
【统计】Hololive 3D 全身动捕直播所体现出的情况  第14张
2021 年 3 月发布新私服的时乃空,公式模型的细节明显增多

时乃空:作为 Hololive 绝对的元老,时乃空看上去并没有像很多人想象的那样,得到很多的资源倾斜。撇开 2021 年以后暴降的全身动捕直播频率,时乃空早期的模型看起来相当糟糕;2019 年 6 月 / 8 月似乎模型质量和动捕精度有所提升,但下一轮模型升级一路等到了 2021 年 3 月 ...... 鉴于空妈是没有 Live2D 模型的,这样的待遇可以说有点惨 ......

【统计】Hololive 3D 全身动捕直播所体现出的情况  第15张
2021 年 5 月,Azki 演唱会,注意胳膊部分的不协调

Azki:毫无疑问,Azki 是 Hololive 各个成员中得到 3D 资源支持最多的。看上去 Cover 手上有什么最先进的技术,都会先塞到 Azki 身上:从画面效果来看,Azki 一般都会好于,最起码也会持平同社其他成员直播时的最高水平。2020 年 3 月时对比星街彗星的 Live,Azki 同期的 Live 使用了水准相近的光效,但外套的建模在非常细致的情况下表面显得异常粗糙,质感很奇怪,而且可能多边形数量过多,还额外拖累了直播的帧数。2021 年 2 月,Hololive 更新了 Azki 的第三个模型;尽管确有肢体结构上的问题,笔者个人还是认为该模型还是达到了 Hololive 迄今为止的最高水平;加之出色得多的光线渲染,最终呈现出的直播效果可以说相当出色(不过对比之下仍然不及 2020 年 3 月星街彗星的 Live)。鉴于 Azki 同时属于Hololive 和 Activ8 系的 upd8(后者于 2020 年末解散),个人严重怀疑 Azki 是否得到了 Activ8 方面的技术支持

【统计】Hololive 3D 全身动捕直播所体现出的情况  第16张
不过山田赫敏对 Azki 的 Live 评价并不太高,并指出今年三四月份左右的会限 Live 还出现了严重的翻车情况(笔者自然是不可能在统计时获知的)

赤井心:如果统计没有出错,那么赤井心应该是时乃空、萝卜子和 Azki 三大元老后第四个获得在自己的频道进行 3D 全身动捕机会的 Hololive 成员(之后才是在 2019 年 9 月附近获得最多 SC 的凑阿库娅),而且是 Hololive 第一个进行泳装回直播的成员(空妈排在第二位);赤井心在自己的频道总共进行过 5 次全身动捕直播,但其中 4 次都集中在“寸土寸金”的 2019 年下半年;2019 年内,赤井心的获得的直播机会仅仅少于空妈,Azki 和阿夸;而且考虑到赤井心长期留学于澳洲,在外根本没有 3D 全身动捕直播的机会,如果没有留学的因素,赤井心可能要得到多得多的直播机会。非常明显地,赤井心得到了超规格的资源倾斜。至于其原因,笔者只能打个问号


【统计】Hololive 3D 全身动捕直播所体现出的情况  第17张
【统计】Hololive 3D 全身动捕直播所体现出的情况  第18张
2019 年 4 月 8 日,凑阿库娅的 3D 模型发布直播,模型建模本身比较出色,但模型绑定(绑骨)存在问题,出现了肢体严重扭曲的画面,裙子等地方也会不时抽搐
【统计】Hololive 3D 全身动捕直播所体现出的情况  第19张
2019 年 4 月 17 日,赤井心的新 3D 模型直播,建模水平明显不及凑阿库娅(有厚重的油光感,长发看起来像一整块僵硬的大塑料),而出同时现了类似的绑骨问题(注意严重凸起的右肩部)和模型抽搐问题

在这篇文章发布后的第二天,一位冲蝗战士联系到了笔者。为了便于粉丝制作二创,Hololive 经常放出官方的 3D 模型(其他大多数 Vtuber 团队也是如此),而有 3D 方面经验(室内设计)的这位战友一直在观察着 Hololive 官方建模的质量。这位给出了以下个人观点:

  1. 不同的模型应该是分批次来完成的,建模师也可能不同(模型风格和建模水平的差异)
  2. 结合绑骨的风格和存在的问题,Hololive 方面应该会将一段时间内不同批次的模型集中绑骨,之后安排陆续发布(因而一段时间内推出的新模型,绑骨风格和存在的各种问题都会比较相近)
  3. 在那位战友看来,到了被广泛批评的 Hololive 2nd,Hololive 的渲染技术已经进行了迭代,但由于自身核心团队出走,而且签约第三方公司也拒绝续约,被拉去使用新技术的团队没有对应的使用经验,才最终导致了表现水平的拉胯

为了准备这一回的文章,笔者挨个看遍了 Hololive JP 的全部频道,最终整理出 160 多个 3D 全身动捕直播;笔者也很乐意将这些辛苦统计出来的信息分享给有需要的人。考虑到网盘容易被爆破,如果需要笔者的统计文件,请私聊联系。

本文已纳入“927 桐生可可事件”专栏:

对事件其他相关问题感兴趣的读者欢迎前往阅读。

参考

  1. ^Lets know Hololive more with YAGOO (part 3) https://www.youtube.com/watch?v=nARBc054hjQ

The End