本文围绕CCTV5移动客户端为俄罗斯世界杯推出的新版本,通过介绍在引入多角度直播赛事数据深度融合、全景声三维音效以及人工智能赛事集锦等新技术过程中的技术思路、实现方法、成功经验和不足之处,为电视媒体的媒体融合技术建设提供了有益的参照。
多角度直播    赛事数据    三维声    全景声    人工智能移动客户端
CCTV5移动客户端是中央电视台体育频道的官方客户端,与央视影音、CCTV 微视一起,构成了央视2018俄罗斯世界杯新媒体报道的三驾马车。CCTV5移动客户端也是这三个中唯一一个由央视本部的技术部门按照体育频道的业务需求量身打造的移动客户端。
CCTV5移动客户端重生于2016年6月,作为央视技术团队的负责人,笔者带领产品和技术团队完成了它的一次次蜕变和升级,支撑和服务了法国欧洲杯、里约奥运会、平昌冬奥会和俄罗斯世界杯等重大国际赛事的新媒体报道以及两年多日复一日从未中断的体育新媒体内容传播。
在这一过程中,面对市场上和同门间众多产品的竞争,CCTV5移动客户端在既没有良好的体制机制也不能烧钱推广的情况下,依托体育频道的优质内容资源和央视技术体系的整体支撑,取得了长足的进步。基于版权的电视同步直播与增量直播、全方位的体育资讯和短视频、形式多样的用户互动以及专业赛事数据的结合,逐步成为了CCTV5移动客户端的特。
、微博、移动客户端、小程序……,这些被称为“新”的媒体,都是由于移动互联网、移动计算等技术的发展颠覆了传统的媒介形式,在无数技术创新、应用创新、业务模式创新的基础上逐步夺取了受众的时间和关注而成俄罗斯世界杯,是央视体育频道2018年最为重要的宣传报道任务,对于作为体育频道官方客户端的CCTV5来说,全新的版本、全新的设计更需要新的技术、新的能力。经过近半年的技术准备和紧张开发,CCTV5移动客户端及其后台新媒体集成发布平台为俄罗斯世界杯带来了多角度的赛事直播、赛事数据的深度融合、沉浸式的三维声直播、人工智能的实际应用等多方面的创新和实践。
二 多角度的赛事直播
相对于传统的电视播出,新媒体视频直播不再有频道资源的限制,可以按照传播的需要和用户的需求同时进行多路的并发直播。在CCTV5客户端,大量因为频道资源的限制无法进行电视直播的赛事,都以清流直播的方式服务于不同爱好和需求的用户,在里约奥运会和平昌冬奥会期间,更是通过CCTV5客户端将大量官方的多场次、多角度信号进行了直播。
俄罗斯世界杯期间,为CCTV5客户端提供内容集成分发服务的新媒体集成发布平台为每场比赛提供了多达7路的并发直播能力,除比赛主信号外,还包括耳机听三维声、
39
菏泽信息网
Advanced Television
Engineering
2021四六级下半年准考证打印
官方提供的增量信号都是不包含解说的,为了帮助用户在收看战术全景信号的直播时掌握比赛动态,解读每一个进球的战术配合,应体育频道要求,我们在世界杯期间又增加个直播声道替换功能,将战术全景信号的现场音频声道替换成包含解说的主信号音频,并且通过切换台和I/O 网关模块保证了音视频信号的同步。
如图2所示,来自声道的替换工作主要由IP 信号切换台和I/O 网关模块完成。来自上游的主路直播信号和战术全景信号同时经过I/O 网关模块输入到切换台,切换台首先对两路输入的视音频进行分离,然后根据实际情况在I/O 网关模块上对主信号音频或者战术全景信号视频进行延时处理,最后由切换台合并成一路战术全景视频+主信号音频的新组合视频信号,供值班编辑进行随时切换输出。
从实际效果上看,本次世界杯主信号和战术全景信号之间的时差较小,处于I/O 网关模块的2秒可调节范围内,而全景声信号的延时则基本超过了2秒,未来如果希望用全景声音频进行替换,除了更换支持全景声的IP 信号切换台外,还需考虑前置能够处理超过2秒以上延时的专用设
备。此外,如需考虑主备路同时切换的情况,还需要在主备路切换台之间进行同步控制,如通过管理工作站调用切换台API 实现集中控制切换。
三 赛事数据的深度融合
专业的赛事数据一直都是大型体育赛事转播和节目制作的重要的辅助手段。从2004年雅典奥运会以来,央视一直都同步引入官方的赛事数据用于辅助赛事评论和节目制作。2016年里约奥运会,CCTV5客户端开始尝试融合专业的赛事数据,将实时的赛事数据通过客户端进行展现,满足部分较为专业的用户进一步掌握比赛进程的需要。本届世界杯,体育频道对于赛事数据的应用提出了更高的要求,
希望能够将比赛的实时数据在客户端进行同步
展示,同时将赛事事件的时间点对应到直播、回看以及快编的时间线或者编辑界面上。
为此,新媒体的数据应用成为了赛事数据应用的主力,我们一方面像以前一样搭建了官方赛事数据接入处理系统,统一接收官方数据服务提供商deltatre 的赛事数据,对数据
1. 数据来源
(1) 基础赛事数据
俄罗斯世界杯组委会委托deltatre 提供基础赛事数据服务。deltatre 提供两种数据访问方式:
z 推送方式:主要包括出场名单、实时赛况、比赛结果等;
z 抓取方式:可以提供所有赛事数据服务,包括推送方式提供的数据,以及推送方式不提供的数据。例如:队伍信息,分组信息,运动员信息,赛程,技术统计等。
(2)高阶赛事数据
威维体育与体育频道达成合作协议,作为独家数据引擎合作伙伴,为体育频道打造全新的世界杯
数据平台。威维体育在台内部署了高阶数据分析系统,通过与威维体育的后台系统对接,对赛事进行分析,形成高阶分析数据。高阶分析数据以接口方式推送到集成发布平台的赛事数据接收服务器。
2. 电视制作数据服务
系统对外提供以下三种数据服务方式:
z 为傲威(Orad )包装系统提供数据支持服务:系统根据傲威包装系统的需求,把组委会的数据处理成傲威包装系统所需数据,供在线包装系统使用;
z 为维斯(Vizrt )包装系统提供数据支持服务; z 为演播室大屏系统提供数据支持服务。
3. 新媒体端的赛事数据应用
直播页面数据展现。包括出场阵容、进球/射门/控球
率/红黄牌/传球次数/跑动距离/抢断犯规次数等统计性数据以及赛事事件时间点。用户可以随时刷新统计数据,根据赛况事件快速播放对应画面(图6)。
全屏播放时间线事件标记及快速定位回看。比赛发生的进球、红黄牌等重要事件均在时间线上进行了标注,方便错过精彩片段的用户定位回看视频(图7)。
在赛事整场回放页面,同样在时间线上提供了丰富的赛事事件标记,方便用户基于赛事数据快速回看精彩瞬间(图8)。
快编窗口基于赛事数据自动打点。为了帮助体育频道
41
Advanced Television
Engineering
的编辑在进行点播视频快编时能够快速到重要的事件时间点,在基于赛事收录的快编界面上,实现
了基于赛事事件的筛选和快速定位,大大提高了快编的工作效率(图9)。
由于赛事数据和直播视频流分别从不同的线路回传,赛事数据的事件点和比赛画面之间往往会产生时间差,如果时差较大,就会使得事件标记偏移。根据世界杯期间的实测,时差往往能够超过120秒,而且不同场次之间时差也有一定差别。为此,集成发布平台还专门提供了针对每场比赛的时差调整功能。
数据中心。除了实时数据服务,在CCTV5移动客户端上还设立了数据中心,提供全方位的赛事数据,包括各类
统计型数据、积分榜、球队榜、球员榜,此外利用高阶赛事数据,还推出了超能战士榜,结合世界杯数据和历史数据,揭示球员的大赛发挥情况(图10、图11)。
四 沉浸式的三维声直播
本届世界杯,官方公共信号制作方HBS 提供了用于沉浸式音频制作的16声道音频信号,这些信号包括沉浸式音频的国际声信号,通过5.1声道的音床和4个高度对象来表现,包括了取自赛场左侧、右侧分别2个声道的球迷效果以及现场的公共扩声信号。利用这些声道信号,经过专业的三维声音频制作和渲染,能够最大限度地还原赛场的真实音场,达到“声”临其境的效果(图12)。
CCTV5电视频道目前是5.1环绕声播出,在技术上短期内无法实现三维声播出,要想让广大用户在世界杯期间
体验三维声沉浸式的现场音效,最为快捷的方式就是通过
湖北省成人高考网上报名入口
熟的三维声传输和双耳渲染解决方案。
新媒体全景声直播,是一个涉及前场信号接入、前后
场间信号传输、电视音频制作、总控传输与新媒体直播、
商业CDN分发和客户端呈现等多个环节的复杂业务,没有
先例可循,赛前也很难提前进行全流程验证。
在新媒体端,主要的工作包括全景声视音频IP流的接
入、多码率视频编码和音频透传、直播源站流推送、直播
源站流媒体服务、CDN分发和防盗链控制、客户端解码和
音效还原(图13)。
在客户端,我们全新开发了新的视频播放器,嵌入了
杜比公司的DD+解码和双耳渲染引擎,能够实时进行杜比
全景声音频的解码和还原,这样CCTV5移动客户端的用户
就可以通过耳机收听到逼真的现场音效(图14)。
进行大型国际体育赛事的新媒体杜比全景声直播,无
论是对于央视还是杜比公司来说,都是第一次。直播时除
广东人事考试局网站了要在客户端集成DD+解码和渲染引擎外,要在服务端提
协杯第六轮北京国安-上海上港杜比全景声直播的实战,我
们终于在世界杯开赛前完成了全系统的部署,CCTV5移动
客户端也就成为了全网唯一支持杜比全景声三维音效世界人力资源查询
杯赛事直播的移动客户端。
相对于原有立体声的新媒体直播,全景声直播系统进
行了如下调整:
z音频部分:在音频制作岛完成中文评论声道替换以
及杜比全景声制作后,直接按照音频目标码率进行杜比数
字+编码,嵌入到高清信号后通过总控和新媒体信号调度
系统送达新媒体集成发布平台;
z新媒体集成发布平台全程对杜比数字+音频不进行
处理,直接透传;
z编码器完成视频多码率编码后,分别嵌入杜比数字
+音频后以UDP方式传输到公有云源站;
z公有云源站流媒体服务器按照HLS方式而不是
RTMP方式供CDN回源抓流(图15)。
世界杯期间,全部64场
比赛中,CCTV5频道直播的
56场比赛全部进行了全景声直
播,截至7月16日,总计有
2021司法考试报名时间290707人次收看,总点击量为
950427次。相对于主信号的立
体声直播,三维声信号带来了