新京报快讯(记者 吴为)“科技冬奥”是北京筹办冬奥会的重要元素。日前在北京赛区的各场馆中,冬奥项目的一些高科技也在测试活动中落地。4月2日,记者在国家体育馆体验了以任意视角观察比赛的“高科技”。
4月2日,国家体育馆VR多维观赛工作人员盛骁杰介绍设备情况。新京报记者 陶冉 摄
手机观赛,观众可选择更多视角细看瞬间
国家体育馆内,测试活动的冰球比赛正在举行。场地外,北京大学“科技冬奥冰雪VR”项目组成员盛骁杰用手机展示了以“自由视角”观看比赛的新体验。
“在大型的体育赛事中,用自由视角技术观赛,以前还从来没有过。”盛骁杰在手机屏幕上滑动,正在进行的比赛画面就会转换角度,当他选择了一个自己满意的角度时,松开手指,比赛就将以新的角度进行。
“现在大家看到的是其中的一种应用形态,在比赛过程中可以通过若干相机对整个场景进行三维建模,最终输出的是一个可以任意渲染的三维画面。”盛骁杰说,平时大家看比赛只能从一个角度看,现在可以把整个比赛进行三维渲染。
据他介绍,现在看到的画面只用了40个相机就能重建出这样一个画面,但其实最终呈现出来的画面相当于1200多个相机。后续还会有互动的效果,这个效果也正在准备当中。
手指滑动手机时,既可以让画面静止以观察某一个比赛瞬间的不同角度,又可以让画面保持流动而不打断比赛,这取决于用户的个人选择。
盛骁杰介绍,从技术上说,只要安装了sdk的手机端,手机就具备了这样的能力,它接收到现场的特殊格式的信号后,配合手机就可以使用这样的观看形式。
这种技术不仅丰富了观众实时多视角的观看,盛骁杰说,在内容生产侧,特效也可以嵌入到普通转播信号。而自由视角也可以结合裁判的工作,使单一视角可能对判罚的失误减少。
4月2日,国家体育馆,位于国家体育馆新闻中心内设置机器人为媒体记者运送比赛成绩单。新京报记者 陶冉 摄
电视、手机、头盔都将成为“自由视角”观赛设备
除了手机,电视、头盔也将成为“自由视角”观赛的可使用终端。
北京大学博雅特聘教授,前沿计算研究中心执行主任,也是此次北京大学“科技冬奥冰雪VR”项目组的负责人陈宝权解释了这一技术的研发和落地过程。
“让观众能有更多视角观赛,我们项目组主要涉及了四方面的课题。”陈宝权说,首先是设置和内容生成,然后是数字孪生推演,然后经过编解码,最后发送到用户的终端。
“孪生,就是现实和数字,完全是一一对应的,对于现实的场馆和赛事,我们构建一个完全数字化的呈现,一一对应后,就可以在数字事件里设计镜头怎么摆放。”陈宝权说,前期安装设备,都是在孪生系统里进行了预演,相机放在哪,具体分布的点在哪可以捕获最好的画面。在孪生系统里设计好,然后在现场里标好,现场依次安装,就获得了实现。
陈宝权介绍,场馆未来要做转播,需要对转播的路径进行设计,就像拍电影,要有个预演,需要有数字化的场馆。在数字化的场馆可以推演不同事件的变化,比如是进球等各种状况,我们会预先设计各种镜头的轨迹。
“VR的效果是提供自由视点,什么样的视点就非常重要,就像拍电影,你到底从哪几个角度,不像以前,我就是几个摄像头,没有什么可选的,不存在这个环节。直播的时候,就可以根据已经设计的预案根据用户的需求给他提供相应的轨迹。”陈宝权说。
编解码和传输,则是将非常高容量的视频信号通过广电网、5G网、因特网等各种网络传到云上、中央服务器,最后通过网络回传到各个用户的终端上,比如电视、手机、头盔等。
新京报记者 吴为 摄影记者 陶冉
编辑 陈思 校对 李项玲