2022北京冬奥会赛程过半,激战正酣。在“家门口”的赛场上,已获得4金3银2铜的中国冰雪健儿正与来自世界各地的运动员同台竞技,观众可以通过咪咕视频、中国移动魔百和、视频彩铃“前排围观”冬奥精彩,见证冰雪健儿的荣耀时刻!
作为2022北京冬奥会的官方转播商,中国移动咪咕承担赛事转播及带动三亿人参与冰雪运动的责任和使命,不仅邀请了冰雪名将陪伴观众畅聊冬奥,同时还通过技术创新给观众带来更佳的观赛体验。
冬奥新看法
5G+XR开启冬奥观赛新方式
第24届冬季奥林匹克运动会精彩开赛,作为2022北京冬奥会官方持权转播商,中国移动咪咕通过体娱跨界、虚实交互的联动,为这场2022冰雪盛会吹响“集结号”。冬奥期间,赛事精彩纷呈,观众常常要同时关注多场比赛,进行多场比赛的切换,观赛体验零散无沉浸感。为解决以上问题,咪咕公司将关键技术研发项目“5G云XR”的成果---6DoF场景下多屏同看技术,应用在北京冬奥赛事直播中。本成果利用Inside-Out定位技术,结合Nreal AR眼镜提供六自由度的赛事体验场景,同时利用多实例播放技术,实现多路独立视频同时播放功能,达到三维空间多屏同看场景效果。
这是首次将5G+XR观赛技术应用到冬奥赛场,打造了虚实结合的多赛同看三维直播空间,同时支持三场比赛直播、赛事结果、奖牌榜、赛程、相关推荐、热卖商品等8块虚拟屏幕观看比赛,通过拖动即可随意切换比赛,支持任意屏幕缩放和远近调节,实现自由布局,并采用柔性射线控制,有效降低传统僵硬拖拽造成的不适和眩晕感。利用特色赛事内容优势,贴合体育用户真实需求,打造6DoF沉浸式虚实融合的观赛体验,实现了XR终端及场景新突破。
随着5G技术的普及和终端设备显示能力的进一步提升,消费者对于“真实”“沉浸”的超高清音视频体验的呼声越来越多、越来越强烈。依托中国移动网络优势及5G的大带宽、低时延、稳定可靠等特点,并结合终端AR眼镜,多路赛事直播同传清晰稳定,多屏切换自然流畅,观看者随心所欲仿佛置身赛场。此次冬奥会上打造的多屏同看多维观赛的全新视觉体验将对推动5G+XR应用产业生态的发展带来了长远且积极的推动力与影响力。
科技助奥
智能双语字幕直击冬奥赛事
为贯彻落实“筹办好北京冬奥会、冬残奥会”重要指示精神,咪咕公司创新研发AI双语直播字幕,并于2022年2月3日在咪咕视频上线应用,支撑冬奥赛事。
直播最大特点就是将现场声画同步、实时播出,具有强烈的现场感和时效性。它不仅能让观众在第一时间耳闻目睹现场的情况,还带给观众极强的“在场”感和参与感,因此,它给予观众的不仅仅是一个结果,更是整个充满暴念的发生演进过程,但这必须借助视、听综合特性。
通过这些年对大型赛事的支撑,我们越来越深切地认识到,视觉画面并不能完全独立、完备地传播所有信息,更需要听觉信息的传递。然而,对于听障患者或是处于静音、噪声下的特殊人群,无法获取声音带来的补充信息。那么,在观看直播的过程中,体验感将大大折损。
不仅如此,专业的直播,如体育赛事,因其特有的规则,常伴有“难以琢磨“的专业术语,就连听觉人群在视、听信息完全捕捉的情况下,也因其非专业性,常伴有不解与无奈。
对此,咪咕公司依托智能中英翻译,搭载语音自训练平台,打造业界首个AI实时双语字幕。同时,为了在此次冬奥期间让广大观众感受到AI科技的魅力,我们还围绕体育场景精细化训练,结合自研知识图谱、智能纠错、语义分析、垂直领域优化等多种手段,全面提升体育直播字幕准确率,平均准确率超95%,雪车雪橇等项目准确率达98%,极大的解决了体育赛事普遍面临的“听不到,听不清,听不懂”问题,丰富了直播信息,弥补了听觉特殊人群在直播的听觉信息缺失。
冬奥期间,AI双语实时字幕在咪咕视频APP上以“为了听不见的你”的暖心名称服务大众,被网友直呼“好懂”!更是被网易、搜狐、腾讯企鹅号等媒体称赞为暖心的陪伴。咪咕公司此次在直播双语字幕的探索,是对AI如何赋能生活,深耕服务创新的充分思考与实践,对科技之力赋能体育强国、赋能高质量发展具有重要意义。
科技助力冬奥
咪咕公司首发AVS3移动端直播应用
2022冬奥期间,咪咕公司携手北京大学、上海交通大学将AVS3编解码标准应用在咪咕视频北京冬季奥运会赛事直播中。据悉,这是AVS3标准在移动端直播场景首次应用及落地,探索了一种AVS3在移动端直播应用的解决方案,让用户随时随地欣赏精彩的冬奥赛事。
AVS工作组是由原信息产业部科技司批准成立的标准组织,目前已经运行19年,完成了三代AVS标准的制定,AVS3是全球首个已推出使用的面向8K及5G产业应用的音视频信源编码标准,对加速AVS3与5G新媒体的融合发展、完成我国AVS3+5G+8K产业发展领先全球的部署意义重大。AVS3编码模块采用了精细的块划分方案、更高效准确的预测算法、适配性更高的变换模式以及效率更高的滤波算法,AVS3的编码性能和国际视频编码标准HEVC相比,性能提升接近30%,并且相同码率下,AVS3视频质量明显高于H.265/HEVC,冰雪健将在冰雪赛场上的矫健身影每一帧都清晰可见,犹如近在眼前。除此之外,AVS3采用了多线程解码优化, 大幅提升解码性能,终端软解码能力从原来的25fps提升到50fps。
随着5G技术的普及和终端设备显示能力的进一步提升,消费者对于“真实”“沉浸”的超高清音视频体验的呼声越来越多、越来越强烈。然而现阶段业界常用的H.265/HEVC 存在专利风险。AVS3作为我国全自主知识产权,打破国际专利对我国音视频产业发展的制约的音视频标准,为超高清视频产业和消费者带来更多选择,咪咕公司此次在移动端的直播试验,示范了AVS3在编解码标准的适用广泛性,为我国超高清视频领域实现从并跑到领跑的跨越提供强大助力,为超高清国产化标准生态体系构筑带来了长远积极的推动力。
科技点亮大屏
炫彩超清视界
为实现“科技冬奥·8K看奥运”的目标,咪咕公司基于多年超高清沉浸式视频服务经验创新研发8K超高清直播制播一站式技术能力,成为率先在全国多地实现8K直播技术落地的公司,覆盖北京、上海等地近30块公共屏幕,包括商圈、营业厅、咖啡店、园区、街道、银行等场景,让广大人民群众“零距离”体验8K显示带来的震撼临场视觉体验。
咪咕公司本次推出的“科技冬奥8K超高清”解决方案,包含8K公共信号制作、8K频道播出、8K直播分发及8K信号展示的端到端供给功能,所有环节均采用8K标准,并通过千兆光网+5G的新一代内容分发能力体系,最终保障各类泛场景8K展现点位均可稳定接收到超过120Mbps超大码率+HDR技术的8K直播信号,配合灵活的终端适配解决方案,满足户外8K大屏、大屏幕8K电视及各类异型屏幕、4K、高清等各类显示终端高质量播放8K直播内容。
“科技冬奥8K超高清”方案在视觉展现和内容制作两方面进行了技术探索。在视觉展现方面,为确保公共区域大屏幕场景下的视觉还原效果,方案采用HDR标准的8K信号,8K+HDR的高光亮度可达到10000尼特;基于BT.2020的广阔色域,最多包含颜色达到687亿种,达到人眼对色彩的分辨极限。同时在现有编码方案基础上进行了深度参数调优,提出一整套适应8K直播场景的内容传输分发方案;在内容制作方面,咪咕公司建立了完善的8K频道生产制作能力,可实现将8K直播信号、8K点播素材及非8K的各类素材进行灵活编排,解决了8K场景下信号切换和素材衔接等技术难题,在国内新媒体领域率先制作并播出7x24小时的8K公共信号。
基于技术和内容的双支柱,“科技冬奥8K超高清”方案为泛场景、全时段的公共大屏观众群体呈现更卓越、更舒适的视觉效果,带来“还原真实,让所见成真”的视觉盛宴。
赋能冬奥传播新范式
中国移动5G融媒手机报打造沉浸式赛事报道
为传递奥运精神,全方位呈现冬奥冰雪盛宴,中国移动5G融媒手机报在冬奥会期间,围绕赛事热点,特别推出《新闻早晚报—北京2022年冬奥会专刊》,汇聚音视频、图文、H5等富媒体内容,以5G消息和视频短信形态传播冬奥会精彩内容,使用户能准确、便捷获取冬奥会相关资讯,带领用户瞬间“抵达”火热的比赛现场,感受沉浸式体验。
5G融媒手机报充分发挥技术优势,推出5G消息冬奥专刊,以特有的富媒体卡片式展现形式,赋予用户看、听、读、智能互动为一体的多维度阅读体验,用户滑动卡片,便可获取多条精彩资讯。5G消息突破传统短彩信的容量和格式限制,使用户可享受丰富的超高清视频、图文及热门资讯,随时随地体验奥运现场的澎湃激情。用户可通过回复不同文字或语音,查找自己感兴趣的内容。5G消息聊天机器人在与用户的自然语言交互中洞悉需求,提供个性化服务。5G消息冬奥专刊设置精彩时刻、前线播报、冬奥小课堂、赛事预告等多个主题栏目,用户可通过按钮实现一键抵达。
在当前5G消息终端覆盖不足的情况下,为进一步提升用户消息接收体验,5G融媒手机报创新使用视频短信链路监控技术,实现5G消息、视频短信、普彩、短信等形态消息的自动回落。该技术可以在视频短信下发过程中或下发后自动监测目标终端所能支持的媒体类型(MIME)的标示信息,当发现异常时及时改变策略继续不同类型消息的下发,并进行信息记录,从而提高下发成功率。冬奥会赛事期间,5G融媒手机报针对非5G消息终端用户推出视频短信和H5内容,实现5G融媒冬奥资讯全覆盖。
凭借5G技术赋能,5G融媒手机报在北京冬奥会期间打造兼具专业性、互动性、娱乐性的赛事体验,推进5G消息创新应用,预计服务用户超2.8亿人次。中国移动咪咕将持续探索数字阅读领域,顺应用户需求的变化,打造创新文化全场景沉浸体验生态,融合感官场景拓展阅读的想象空间,引领数字阅读行业5G风潮。