快手虚拟演播助手亮相2022世界人工智能大会,StreamLake数字人及XR解决方案获关注

Xsens动作捕捉 2023-05-09 2267

钱江晚报·小时新闻记者 楼纯

9月1日-3日,由国家发展和改革委员会、工业和信息化部、上海市人民政府等共同主办的2022世界人工智能大会(WAIC)在上海举行。短视频直播平台快手携StreamLake、快手虚拟演播助手亮相本次大会,并出席了AI领Show论坛、数字消费(元宇宙)产业对接会,分享快手在数字人及XR(扩展现实)领域的技术创新及产业应用。

大会闭幕式上,快手上海研发中心——星臻科技(上海)有限公司作为上海市徐汇区企业代表,参与“携手同行 共建元宇宙”新平台启动仪式,将与其他重点项目一起,聚焦元宇宙平台建设,加速产业创新。上海市徐汇区区委常委、副区长俞林伟与快手科技副总编辑杨帆等嘉宾共同启动新平台。

快手虚拟演播助手亮相2022世界人工智能大会,StreamLake数字人及XR解决方案获关注  第1张

快手虚拟演播助手亮相WAIC,引发互动体验热潮

作为全球人工智能领域最具影响力的行业盛会,本次大会以“智联世界、元生无界”为主题,集中呈现了人工智能+元宇宙的前沿技术与创新成果。在大会元宇宙核心展区的快手展台前,快手虚拟演播助手(Kuaishou Virtual Studio-KVS)收获了颇高人气,引发行业人士、参展观众的高度关注。

“太好玩了”、“动作捕捉很灵敏”。展台前的参观者们纷纷表示。

挥手、转身、眨眼、挑眉……体验者只需站在普通的摄像头前,就能被快速捕捉识别面部表情和肢体姿态,并在前方展示屏上的二次元卡通数字人分身上实时呈现、精准复制。

快手虚拟演播助手亮相2022世界人工智能大会,StreamLake数字人及XR解决方案获关注  第2张

快手Y-tech AI技术中心负责人万鹏飞在现场介绍:“这只是快手虚拟演播助手最基础的功能,也是快手AI技术能力的冰山一角,通过实现摄像头动作捕捉技术,突破场景设备等限制,能快速便捷的实现虚拟人驱动直播;如果对数字人驱动的品质有更高要求,可以通过快手虚拟演播助手连接专业的动作捕捉设备。快手虚拟演播助手能够满足不同成本下的数字人直播的需求。

快手虚拟演播助手亮相2022世界人工智能大会,StreamLake数字人及XR解决方案获关注  第3张

据悉,快手虚拟演播助手是一款面向PGC的虚拟人驱动及开播工具。集成3D虚拟人和虚拟场景的一站式能力、内置自研摄像头驱动算法、适配多种穿戴式全身动捕硬件设备、提供丰富的特效和互动玩法、支持多平台直播推流,帮助客户打造元宇宙直播间。

快手相关负责人还表示,借助短视频和直播领域的长期技术积累,快手虚拟演播助手此次亮相WAIC,正是着眼于将传统直播间变成“元宇宙直播间”,为直播电商、虚拟拍摄、智能文娱等带来新的机遇。

探索元宇宙应用场景,快手数字人及XR解决方案引关注

快手虚拟演播助手目前有哪些应用场景和落地案例?快手在数字人领域还有哪些新应用?在大会AI领Show论坛上,万鹏飞带来《快手StreamLake数字人及XR解决方案》主题演讲,分享了快手虚拟演播助手、老铁智播间、移动端混合现实引擎三大应用,以及数字人及XR制作平台、快手虚拟世界互动平台两大平台的独特优势和产业布局。

万鹏飞介绍,快手虚拟演播助手作为一款面向“中之人驱动”的数字人一站式直播工具,面向真人表演驱动数字人场景,具备三大优势:一是支持光学、惯性、摄像头各种不同类型的捕捉方式,满足不同层次的主播需求;二是内置了独家的各种特效,3D场景滤镜,并支持推流高清视频到包括快手在内的各个视频平台;三是打通了快手直播间,让主播可以和观众产生更多的基于虚拟世界的互动玩法。

快手虚拟演播助手亮相2022世界人工智能大会,StreamLake数字人及XR解决方案获关注  第4张

不同于快手虚拟演播助手,“老铁智播间”则是一款为客户提供自动化数字人直播及视频制作能力的产品,具备三大特点:一是没有中之人驱动,全靠AI驱动,可以7×24小时直播;二是便捷的管理平台,可以低门槛使用,降低运营成本;三是覆盖直播、播报、数字员工等丰富应用场景。

快手虚拟演播助手亮相2022世界人工智能大会,StreamLake数字人及XR解决方案获关注  第5张

而作为行业领先的手机端AR/MR系统,快手“移动端混合现实引擎”可以让用户在普通手机上就能体验到以往在高端设备上才能体验到的各种AR/MR效果,机型覆盖率非常高。这秉承了快手一直以来所倡导的技术普惠理念,覆盖高、中、低端手机机型,同时,该系统不仅可以应用于身体、室内,也可以应用在室外、街区、景区等各种不同尺寸的空间环境。

万鹏飞在现场展示了快手移动端混合现实引擎在实时场景感知和三维重建、自动识别建筑物遮挡等领域的虚实融合技术和效果,在试穿、试戴、试妆等场景的应用价值,以及大空间场景的AR、MR效果与用户体验。

快手虚拟演播助手亮相2022世界人工智能大会,StreamLake数字人及XR解决方案获关注  第6张

此外,“数字人及XR制作平台”通过技术、美术的有机结合和联合优化,为客户提供一站式数字人及XR制作服务。“快手虚拟世界互动平台”则是支撑快手在虚拟世界互动领域各种应用的统一的PaaS平台,满足展览、社交、游戏等多种场景需求。

在数字人及XR赛道大热趋势下,快手究竟有何优势?万鹏飞认为,一是平台优势,快手DAU超过3.47亿,其中泛二次元内容消费的DAU过亿,在用户需求洞察和价值挖掘方面优势显著;二是容易落地,快手不仅为客户提供了多种门槛的解决方案,满足其不同阶段需求,也实现了用户设备的高覆盖率,让普通用户通过现有设备就可以参与其中;三是综合实力储备,快手为客户提供了从建模到内容制作的一站式服务,并在技术和美术结合、软硬件结合方面经验丰富,做到全链路联合优化,在同样成本情况下,为客户提供更加优质的服务。

与此同时,在大会“抢占新赛道发展先机,开创元宇宙引育新局”元宇宙高峰论坛上,快手全景视频负责人马英武携手知名学者及业界资深人士共同参与圆桌论坛环节,深入探讨“元宇宙最重要的新科技是什么?最值得期待的元宇宙全新应用场景是什么?”等话题。同时,上海长三角商业创新研究院联合快手等10余家产学研单位及科创企业举行长三角元宇宙产业发展联盟启动仪式。

快手与上海合作持续深入,共同推动产业数智化发展

除了展台互动和技术分享等环节外,快手还参与了“携手同行 共建元宇宙”新平台启动仪式,这意味着其与上海地区的合作再一次升级。多年来,快手与WAIC主办方之一的上海市人民政府的合作愈加频繁和深入,携手推动产业数字化、智能化发展。

2021年4月,快手还与上海市政府新闻办公室达成战略合作,在城市推广、产业合作、政务宣传、媒体融合、人才培养等领域展开全方位合作。本次设立的快手上海研发中心,将作为快手在长三角地区的重要布局,承载快手人工智能技术研发、核心产品研发、游戏项目制作、创新产品孵化等重要功能。

经过多年的深耕和发展,快手在人工智能、元宇宙等领域的技术实力和落地应用不断获得WAIC等行业盛会的高度关注和专业认可,而随着其与上海等各地政府部门的合作持续深入,将有助于共同推动人工智能产业和数字经济的高质量发展。

本文为钱江晚报原创作品,未经许可,禁止转载、复制、摘编、改写及进行网络传播等一切作品版权使用行为,否则本报将循司法途径追究侵权人的法律责任。

The End