Linux MIPI CSI开发指南
279
2022-09-29
揭秘2022冬奥黑科技,阿里云视频云「Cloud ME」如何实现全息会面?
2022北京冬奥会本是一届非凡的存在,这是有史以来第一次将奥运会所需的全部核心系统全面上云,以数字化技术创造奥运的新纪元。
但绿色奥运不止如此,在面临 Covid-19 限制和物理隔阂之下,千里之外,人与人的会面可以透过绿色科技之光而以全息形态实现,这便是阿里云视频云基于AliRTC(音视频通信技术)推出的云上创新解决方案——阿里云聚“Alibaba Cloud ME”,第一次在百年奥运史上跨越物理空间,创造了人与人之间的“云聚”时刻。(以下简称Cloud ME)
云聚现场的汩汩之温—Cloud ME创造传奇会面
“Cloud ME”本意出发,为物理空间限制下渴望探索真实会面感的人们,提供沉浸交互体验,使他们能够以真人3D形态见面,并享受彼此的实时对话与交互。
【冬奥黑科技】“真人即在眼前”的视觉感受和“呼吸即在耳边”的实时交互Cloud ME阿里云聚是如何实现的?传奇过程,如下所现:首先,在影像采集环节,摄影机采集的画面是无法直接在播放端进行全息成像的,所有画面需要通过先进的编码器进行深度压缩,并在实时传输协议和QoS(Quality of Service)抗丢包策略的保障下发送到阿里云的音视频通信(RTC)网络,画面最终上传的格式和尺寸与普通4K电影无异。
随之,当画面到达云端之后,需要借助云上强大的处理能力完成包括转码、渲染、场景重建、光影处理在内的复杂流程,完成从“平面”到“全息”的蜕变,以真人1:1等比虚拟化复刻,生成3D全息人物,以高清方式重建所有互动细节,包括人物的微面部表情和服装纹理,达到“发丝级”全息全尺寸复刻,塑造全真实交互的沉浸感,一切犹如身临其境。天下武功,唯快不破。在如此复杂和大跨度的技术链路上,为了实现顺畅的会面效果,技术实现的关键也在于“速度”,而保障“速度”的关键则是阿里云覆盖全球的音视频传输网络GRTN(Global Realtime Transport Network),及其在视频编解码、网络传输、超大规模音视频处理和调度等方面的核心技术。
基于这些技术,影像画面传输和处理的全过程,包括SDK编码、实时传输,云上处理和渲染,端侧解码和成像,仅需在眨眼间的200毫秒内即可完成,体感上与我们日常交流互动的综合体感相同,毫无延时顿感,极度真实。
由此,Cloud ME发丝级的全息全尺寸复刻、眨眼般的超低延时,和稳若磐石的网络传输力,让更多交互奇迹由而发生。
AliRTC极致技术的普惠之光—“零处理”时代顺势而来
Cloud ME的技术实现,核心依托于阿里云视频云曾提出的AliRTC“零处理”解决方案,即通过“云处理+端渲染”技术,让硬件端只进行简单的采集,传输,播放,同时,所有的复杂工作全部集中在云上完成,让终端实现“零处理”。
这是百年奥运史上,第一次利用云上全息RTC技术,实现跨场景远程会面的技术应用,在疫情期彻底打破了物理空间隔阂。通过Cloud ME,可将运动员、赛事工作人员、志愿者和媒体朋友们“瞬移”到指定地点,实时交互沟通。湖南卫视《新闻大求真》栏目主持人在体验Cloud ME的过程中,就将北京冬奥会现场的志愿者”瞬移“到”节目现场“,进行“面对面”的超级采访,实现了时空同步。来自清华大学的志愿者许雯钧说道:“这感觉就像我们面对面交流一样!”。
版权声明:本文内容由网络用户投稿,版权归原作者所有,本站不拥有其著作权,亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容,请联系我们jiasou666@gmail.com 处理,核实后本网站将在24小时内删除侵权内容。
发表评论
暂时没有评论,来抢沙发吧~