索贝分享人工智能技术与超高清应用建设经验
2019-12-13 10:18:41 
2019年12月9日-12月12日，中国电影电视技术学会·新技术应用专业委员会2019研讨会在黑龙江哈尔滨召开。会议以“融创视界 智慧媒体”为主题围绕广播电视技术热点问题展开技术交流，研究解决方案，本次研讨会由中国电影电视技术学会主办、黑龙江广播电视台承办。国家广播电视总局科技司、中国电影电视技术学会有关领导以及来自中南-东北9个省份的11家成员电视台代表、业界技术专家等近百人参加研讨会。
12月11日，成都索贝数码科技股份有限公司（以下简称“索贝”）融合媒体事业部售前总监陈竹受邀出席论坛，发表题为《超清融媒 智汇未来》的主题演讲，分享了索贝在70周年国庆阅兵制播项目中的技术亮点与建设经验，以融合媒体与超高清应用在国内的发展为背景，展示了索贝在人工智能和超高清方面的探索。
智汇未来 拥抱AI
智慧科技 引领高效
在本次国庆阅兵活动中，从大阅兵三军仪仗队进入视线开始，AI引擎能够自动编辑前方70余个机位的画面内容，完成一条短视频仅耗时90秒左右。国庆70小时直播期间，央视新闻共计推出近百条AI视频，近7000秒的国庆阅兵精彩展现。
这是总台技术系统首次将多种人工智能技术综合运用于大型新闻活动报道，创新了节目生产方式，提高内容生产制作效率，是总台新技术、新产品应用推广和实践创新的重要一步。
AI技术的加入使得视频产量实现几何式增长，其识别准确率高等特点，大大提高了效率,解放了人力。使得视频编辑们可以省出精力,专注于其他更加精细化且有编辑思路的视频产品的制作上。
针对新闻新媒体国庆报道AI剪辑需求，索贝以公司最新打造的媒体智能平台——麒智AI平台为基础开发出视频AI智能剪辑系统，利用平台积累的计算机视觉、音频、自然语言处理算法，进行快速定制、训练算法提取视音频特征，同时结合平台具备的大数据分析处理算法及工具，进一步完成数据及特征分析整合，形成应用所需的有用的信息及知识，最后结合编辑场景所需完成最后的知识应用，形成AI编辑生产力，完成之前需要大量人力投入的编辑工作。
麒智AI平台基本结构
AI剪辑平台以图像识别技术为基础，结合语音识别等人工智能技术，设计开发了队伍方阵识别、有效镜头检测、自动合成剪辑三大类智能处理模型，通过三类模型的综合应用，实现智能剪辑功能。以“画面质量分析算法”、“波形匹配算法”、“片段时间分析算法”等多种智能手段，结合索贝“麒智AI平台” 的推理能力，加入领域知识图谱，成功应用于本次阅兵AI剪辑任务。
厚积薄发 实力说话
一直以来，作为广电行业的领军企业，索贝十分重视先进技术在媒体行业的应用研究。在人工智能方面，索贝坚持长期的资源、资金和人力投入，专门成立了媒体智能实验室，并与上海交大、四川大学、鹏城实验室等科研单位进行深度合作。
同时，索贝始终坚持AI结合业务的研发原则，只有建立起面向用户价值场景的AI应用的实际能力，才能实现AI与媒体行业深层次的融合。
索贝除了提供了智能拆条、智能标签、智能编目、智能审片、智能唱词、智能叠字幕、智能图像修复、智能内容审查、智能收录、智能推荐等多个智能化媒体产品。还与中央广播电视总台合作，开发了智能篮球剪辑系统，通过AI技术实现了赛事过程实时分析、在线剪辑、个人集锦等功能。
并且，为了提升新媒体稿件的生产效率，索贝研发了智能多媒体稿，它将多个AI技术应用结合起来，对电视新闻进行智能拆条，智能提取出适合新媒体的稿件内容要素，包括文字和图片等，组合形成多媒体稿件并发布。
超清融媒 4K领跑突破8K
全流程4k直播 多版本制作
作为国内广播电视行业软件开发及系统集成的领军企业，索贝专注于4K超高清制播技术，不断优化超高清节目生产工艺。通过索贝首创的“自动化色彩管理技术，自动识别超高清素材的原始色彩空间和伽马曲线，通过自动化转换处理，达到目标色彩空间，极大简化4K/8K制作的素材色彩管理问题。
与此同时，通过4K HDR智能实时下变换HD SDR技术，实现了4K UHD/HD节目同步制作、同步输出，解决了过去重复两遍制作输出的问题。
4K制播全流程的实现，很大程度上是依赖索贝凭借多年来引领视音频行业的尖端技术与对存储的深度研习，自主研发的VIDA分布式视频处理框架。
索贝将VIDA技术架构融入到超高网络化系统中，实现超高清时代的视频并行处理，解决超高清转码、合成的效率问题。索贝的VIDA技术架构能够在拼接部分完成闪拼，大大提高了分片处理的时间，提高转码合成效率。目前，该框架性能已经取得了广电总局的认证报告，检测报告显示，VIDA具备闪拼特性，可大幅提高文件合成效率，随服务器增加转码合成效率线性增加。
北方4K制作联盟成立
在本次会议期间，北方4K制作联盟在黑龙江举行了揭牌仪式，联盟基地正式落地黑龙江。北方4K制作联盟目标将建设成为面向全国甚至全世界的高质量4K节目、素材的集散中心，打造成素材种类齐全、质量优异的4K素材库和网络交易平台，全国性的4K内容培训基地，为全国有4K视频需要的广电平台、影视机构、企事业单位提供优质产品和服务。
首次规模应用8K制作
本次阅兵，总台再次突破超清边界，将索贝8K网络化采编系统规模应用于天安门阅兵现场，这是8K制作在行业内的首次规模应用。
在本次阅兵中，索贝8K HDR超高清多通道收录，通过建立I/O协同并行处理架构优化细分编码算法支持单讯道8K /四讯道4K 多格式录制，沿用“边采集边迁移、边迁移边编辑” 收录工艺更好的适配网络化制作流程。
索贝8K HDR超高清非编，实现了8K不同编码、不同动态范围、不同曲线的8K多格式高码混编以及实时输出。全网络化特性让用户在多台设备上并行剪辑，满足高效率高质量的节目创作要求。
全面突破8K核心技术
随着5G时代的到来，8K应用落地亦加快了步伐。在刚刚过去的2019年军运会上索贝联合总台成功实现了5G+4K移动云生产，这位为进一步推动8K超高清技术与5G技术协同发展积累了宝贵的经验。
2019年11月，索贝成功中标中央电视台混合制作岛4K生产系统二期8K收录制作系统！这是总台5G+4K/8K+AI战略布局又一实践，也标志着索贝8K超高清边采边编、智能色彩空间管理、多形态智能渲染、断点续生、专利半幅输出编辑等能力得到验证和认可，将全面支撑总台8K超高清节目收录及制作，再攀超高清巅峰。
