在名为“re-creation of virtual environment through a video call”的文件中,微软主要描述了一种在视频通话期间重建虚拟环境的技术。
微软指出,随着网络会议越发普及,可用于参加网络会议的设备类型正不断增加。这种设备包括但不限于智能手机,平板计算设备,机顶盒,智能电视,视频游戏系统,以及增强现实,虚拟现实和混合现实设备。
当参与者使用ar设备参加网络会议时,ar设备可以捕获所述参与者周围环境的视图,并将视图的图像或视频传输给其他会议参与者。 从而向其展示ar头显用户周遭的真实环境图像或视频。其他会议参与者同时能够看到ar设备覆盖在现实环境中的任何虚拟对象。
专利描述了一种用于从不同的,变化的和或多个角度查看现实环境的3d表示的优化人机界面。ar设备可以使用表面重构摄像头和传统的红绿蓝摄像头实时捕获场景的3d表示。可以将3d表示传输到用户的计算设备并进行显示。用户可以以第三人称模式查看3d表示。用户同时可以选择平面图模式,从而通过上帝视角进行查看。
相关专利:re-creation of virtual environment through a video call
在一些实施例中,可以利用过去捕获的数据来增强用于生成3d表示的实时数据。例如,当ar设备用户移动或环顾四周时,设备会从不同的角度捕获场景的3d表示。来自不同视角的数据可以集成到3d表示中。这样,其他参与者能够看到更多的视角。类似地,可以将其他设备捕获的数据集成到3d表示中。在一些实施例中,另一设备是固定摄像头;在其他实施例中,另一设备是另一会议参与者所佩戴的另一ar头显。
在一些实施例中,可以保存不同时间捕获的数据,这样用户就可以暂停,后退和快进3d表示。
名为“re-creation of virtual environment through a video call”的微软专利申请最初在2018年5月提交。需要注意的是,这只是一份专利申请。