2022年8月24日,淘宝造物节全新露脸!为了探索下一代互联网沉溺式购物体会,本次造物节除了在线下广交会展馆打造一个两万平⽶全景式的“未来营地”以外,线上初次上线可万人同时在线的虚拟互动空间“3D张狂城-造物节虚拟营地”。

在3D虚拟营地里,用户能够以轻量级的方法体会高清的游戏质感,并以虚拟人物形象加入到“3D人货场”的国际,与玩家互动,与3D产品互动,满意新一代消费集体爱玩、爱造的诉求,以创新的技能带来全新的消费体会。

2022淘宝造物节3D直播虚拟营地技术亮点揭秘

下面咱们一起看看3D直播虚拟营地的体会&技能亮点:

轻量级裸眼3D“实景游戏”

曾经你喜爱一款3D游戏,客户端下载好几个G,想玩新游戏时却不得不卸载,真是太占内存了!在造物节的虚拟营地,你快速加载出一款裸眼3D、可互动、可直播,甚至还能买买买的高清画面“游戏”,而且你的淘宝App“一点都没变大”,手机加载速度“嗖嗖的”~

2022淘宝造物节3D直播虚拟营地技术亮点揭秘

技能亮点:云端本钱的挑战

传统的在移动端做3D游戏使用的开发,往往需求在端测集成几十上百 M 的游戏引擎,还需求下载几个G的资料资源,这在淘宝app 内目前是不现实的。选用云烘托的方法能够很好的处理这一问题,凭借云端强壮的GPU完结高清复杂的场景烘托,用户无需下载大型的资源文件,也不需求装置任何内容,唯一需求的便是播映实时烘托的媒体流。

但这里带来的最大的问题便是云烘托机器的本钱问题。为了降低云烘托机器的本钱, 咱们除了在云烘托方面,做好模型减面、dp 合并、贴图优化、降低视频资料分辨率等功能优化战略。还在机器调度上, 结合业务场景做了分时段动态扩缩容战略,最大程度进步机器的利用率。

3D人与3D产品初次在3D虚拟国际相遇

曾经在“淘宝人生”里穿衣装扮的3D用户,第一次“走”出小家,来到了造物节的直播3D虚拟营地。在这里,你能够自由跳动、点燃篝火,还能够检查3D产品,观看卖家直播,与玩家互动沟通。3D人、3D产品、3D环境结合在一起,给你沉溺式的奇妙营地探险体会。

技能亮点:人货场的搭建与互动

人与人的交互。淘宝人生里的3D人物,放置到3D虚拟国际里来,首要需求一定的资产转换和烘托本钱。用户在营地里跑动,涉及到用户方位的实时同步。对于用户实时漫游,咱们选用帧同步的技能,依照固定频率去更新用户方位信息, 抱负状况下,用户是不会感觉到卡顿的, 可是不可避免网络拥塞引起帧间抖动,相邻两次方位同步的时刻超过一定间隔,则会引起跳变。为了弥补这种不足, 咱们在人物烘托的时分选用了运动补偿的算法,简单说便是经过算法模拟让用户方位移动过渡的更加滑润。同时在互动数据的同步方面,选用了AOI 网格算法, 处理多人同屏数据同步的问题。这样,3D人物在虚拟国际里随意跑动都会比较流通顺滑。

2022淘宝造物节3D直播虚拟营地技术亮点揭秘

人与产品的交互。用户想要在虚拟场景下自由检查3D产品的细节并不容易,咱们有两种计划能够挑选:一种是移动端烘托,一种是云端烘托。移动端烘托在淘宝内也有相对老练的处理计划,惋惜的是移动端的烘托引擎和云端烘托引擎并不是一套, 所以同一个产品模型并不能通用, 同时还要考虑模型动态下载, 减面优化等问题,为了避开这些劣势,咱们仍是挑选了云端烘托的计划,经过动态切换相机视角,实时响使用户端的交互指令,以到达旋转、缩放观看3D产品的体会。

2022淘宝造物节3D直播虚拟营地技术亮点揭秘

1080P分辨率酷炫高清画质

曾经你在手机App里测验页面小游戏,糊得好像马赛克,跑跑跳跳还掉帧。造物节全新3D虚拟营地,画质高清、效果流通,舞台灯光还能动态追踪到身为“明星”的你~

2022淘宝造物节3D直播虚拟营地技术亮点揭秘

技能亮点:云端烘托的内容制造与实时传输

在云端,咱们选用虚幻引擎做实时画面的烘托, 而且结合动态运镜、动态舞台灯光、人物多视角、粒子效果等技能让画面看起来更加酷炫,用户互动感更强。为了把高清的画面传输到用户的手机上,咱们需求归纳考虑画质,卡顿,延时的平衡, 凭借大淘宝和阿里云共建的GRTN传输网络,以及自研的编解码算法,能够最大程度保障画质的明晰。

交互式虚拟画面不卡顿

曾经你在淘宝主播直播间,倒数“3、2、1、开抢!”感触到了超低推迟秒杀的爽感。但屏幕外的你,却无法经过交互直接干预直播间主播的行动。在3D虚拟营地的你,一边跳舞一边打招呼,还能够点击商家的3D产品,观看喜爱的主播解说,实实在在做到了“与商家、主播同框沟通”。

2022淘宝造物节3D直播虚拟营地技术亮点揭秘

技能亮点:全链路超低推迟

不同于互不干扰的画面传输,在交互式下完成超低推迟的流通体会,咱们需求在百毫秒内完结用户指令的上行、 实时画面的烘托、并将烘托好的画面返回到用户手机端。首要,这里边要归纳考虑用户的机器、网络、接入点状况,来动态挑选离用户最近的推流节点,从而调整云端的推流战略(包括明晰度,编码方法的挑选)。其次,在传输过程中,还需选用实时带宽反馈、FEC 、动态buffer 等弱网控制战略来对抗网络的抖动, 从而使整个链路延时到达合理的方位,最终完成在虚拟国际的交互中,保障流通的交互体会。

结语

此次造物节3D虚拟营地,是淘宝虚拟互动空间“3D张狂城”系列的初次上线测验。下一步,咱们将会结合云端实时烘托, XR/CG技能完成虚拟化场景定制, 支撑更大规划的用户实时互动,为消费者带来更沉溺式互动体会。