3月5日是北京2022年冬残奥会首个比赛日,残奥冰球项目在国家体育馆拉开战幕。在中国对战斯洛伐克的首秀中,电视机前的观众看到了不同以往的转播画面——赛时精彩瞬间实现自由视点(子弹时间)回放。
这样的转播效果源自国家体育馆“冰之帆”场地内布设的一套自由视角视频系统。该系统由60台广播级超高清相机和数台服务器及网络设备共同组成,将“子弹时间”从电影后期效果搬到了体育比赛实时转播中,电视机前观看残奥冰球项目的观众获得了全新的观赛体验。
定制一场专属个人的赛事转播
“自由视角”视频系统是国家重点研发计划“科技冬奥”重点专项“冰雪项目交互式多维度观赛体验技术与系统”的创新成果。项目负责人、北京大学教授陈宝权告诉科技日报记者,电视转播中的“子弹时间”效果只是系统应用的一个方面,如果将转播放置到移动终端,观众便可通过在手机屏幕上的直接滑动交互定制一场专属个人的赛事转播。
“交互式‘自由视角’视频系统,能够帮助观众连续地改变观看点位,选择自己喜欢的角度去看同一场赛事活动。”陈宝权表示,这套系统之所以能实现交互式自由视点观看,是因为在技术层面将此前的三自由度视频生成提升到了六自由度,“相当于把观众的眼睛带到了赛场上空,让观众可以在任意位置和方向观看比赛。”
实现360度无死角转播
从场馆图像数据采集到观众在任意环绕视点实时观看,需要智能算法实现全场域视点的无缝链接。
项目组为系统配置了一个“聪明大脑”。首先通过三维重建让新视点的合成变得可能,而后自适应编码与传输技术,根据用户视点改变的意图来预测下一步趋势,进行有针对性的计算与数据传送。
陈宝权说,项目组通过三维重建实现新视点的图像生成,避免因现场相机之间的间隔空档给观众视点漫游造成跳跃感,同时插入足够多的虚拟视点,最终实现丝滑的自由视角观赛体验。
为让观众在后续推广应用中自主寻找到最佳观赛视角,陈宝权团队还设计了“VR冬奥赛事孪生推演与视听语言创意设计软件”,可针对不同赛事在系统内设置不同的镜头规划,就像有现场导演一样,让观众不错过每一个激动人心的瞬间。