您的位置:首页 >综合要闻 >正文

什么是谷歌Project Starline以及它如何以超真实3D呈现人

尽管 Zoom、Google Meet 和 Microsoft Teams 等视频会议应用程序试图帮助您与您所爱和共事的人建立虚拟联系,但体验仍然相当有限。因此,为了突破远程协作的界限,Google 提出了 Project Starline。它计划在今年晚些时候与 T-Mobile 等合作伙伴开始测试这个项目。

早期的 3D 渲染视频通话系统,无需眼镜

Google 首席执行官 Sundar Pichai 在Google I/O 2021上登台宣布,他的公司“几年前”启动了一个项目,该项目建立在计算机科学的不同领域并依赖于定制硬件和高度专业化的设备。它被称为 Project Starline,是一种早期的自然感觉远程呈现系统,它使视频通话中的其他人看起来好像坐在你面前。每个参与者都坐在一个配备有摄像头和红外投影仪的展位中,可以创造出逼真的画面,而空间音频则让声音看起来就好像从你面前发出并从人的嘴里发出。

该系统使用头部跟踪和 65 英寸、8K 裸眼显示器,允许您与某人进行视频通话并以超逼真的 3D 体验他们。

Google Project Starline 是如何运作的?

Starline 项目包含三个组件:

相机和深度传感器:从多个角度捕捉人物的专业设备

计算机科学进步:定制软件,包括新颖的压缩和流算法

光场显示:定制硬件,以 3D 方式呈现某人的真实形象

Project Starline 使用高分辨率相机和自定义深度传感器从多个角度捕捉用户的形状和外观,然后通过软件将所有这些融合在一起,创建极其详细的实时 3d 模型。谷歌表示,它正在将研究应用于计算机视觉、机器学习、空间音频和实时压缩。效果是一个人坐在你对面的感觉。

由此产生的数据也很大——每秒数千兆位。

因此,为了通过现有网络发送此 3D 图像,谷歌开发了新颖的压缩和流式算法,将数据减少了 100 多倍。谷歌还开发了一种光场显示器,可以向您展示坐在正前方的人的真实形象你在三个维度。

当您移动头部和身体时,Google 的系统可以调整您在光场显示器中看到的图像以匹配您的视角。它无需额外的眼镜或耳机即可创造出体积感和深度感。首席执行官桑达尔·皮查伊在 2021 年 I/O 大会上表示:“你可以用自然的手势说话并进行眼神交流。这与我们坐在对面的感觉非常接近。”

免责声明:本文由用户上传,与本网站立场无关。财经信息仅供读者参考,并不构成投资建议。投资者据此操作,风险自担。 如有侵权请联系删除!