基于智能编目存储技术的IPTV监管系统的设计
韩盛国| 广电视讯| 2022-10-20
【流媒体网】摘要:保障江西IPTV安全播出,确保新时代智慧广电“绿色安全、可管可控”。

  0引言

  “智慧广电”是中国广电行业为振兴与促进广电事业布局的一项发展战略,江西省交互式网络电视(IPTV)监管系统将充分利用大数据、云计算、可信计算、人工智能等新技术,创新智慧广电监管手段,实现对江西IPTV集成播控平台、用户终端等环节的IPTV节目进行采集、处理及分析,及时发现违规和非法节目,保障江西IPTV安全播出,确保新时代智慧广电“绿色安全、可管可控”。

  1IPTV监管系统需求分析

  超高清视频是继视频数字化、高清化之后的新一轮重大技术革新,加快发展超高清视频产业,对满足人民日益增长的美好生活需要、驱动以视频为核心的行业智能化转型、促进我国信息产业和文化产业整体实力提升具有重大意义。目前IPTV直播和点播均有大量的4K节目,传统的IPTV监管系统采用CPU或者GPU方式进行码流的收录及转码,对硬件资源消耗较大且效率不高。此外音视频均以节目为单位进行存储,无法满足基于场景、镜头级别的检索,同时也为了顺应短视频碎片化的新闻内容获取,更加符合新媒体传播方式下市场发展的需求,电视新闻节目逐渐开始采用“片段层”的传播方式,即将一个完整的新闻视频依据内容进行拆分,从而形成短小、完整的新闻片段。基于上述问题,针对IPTV监管系统进行了重新设计。

  2IPTV监管系统设计

  整合利用已有的各类硬件资源,形成完备的监测监管基础平台,实现对IPTV监测监管的有机整合及统一管理与展现,基本实现全媒体接入、全环节监管、全业务融合发布的一站式监管模式,解决当前监测监管领域存在的“信息孤岛”及业务互相独立、分散、管理不便的现状,实现监测资源有效利用,监测监管数据充分共享,为广电行业监测监管提供科学的决策依据和高效的技术支撑。基于智能编目存储技术的IPTV监管系统采用全IP化设计,该系统包含采集接入、数据处理、业务处理、业务展示、辅助系统、支撑平台等部分。智能编目存储技术的IPTV监管系统逻辑架构图如图1所示。

图1智能编目存储技术的IPTV监管系统逻辑架构图

  1)采集接入层

  采集接入层负责完成各级各运营商IPTV信息的采集,采集内容包括EPG信息、直播节目、点播节目、终端画面(包含增值服务画面信息)、用户数据、安全数据等。采集位置包括3大通信运营商的集成播控平台分平台以及对应的用户终端。

  2)数据处理层

  数据处理层由节目收录、节目存储、EPG分析、码流层分析及内容分析等部分组成。①节目收录。针对采集层获取的直播码流、点播节目以及EPG信息进行收录;②节目存储。针对采集层获取的码流以及节目进行存储,针对高清、超高清节目均进行转码及码流压缩,用于后续流媒体的播放。转码模块采用超高密度实时UHD(超高清)视频转码芯片完成,极大地提升了转码的效率以及并发数量;③EPG分析。针对3大通信运营商的集成播控平台、用户终端的EPG进行智能分析、比对、发现私增、插播、隐藏等情况;④码流层分析。利用预设的分析参数,实时对IPTV集成播控平台以及用户终端的直播码流进行解析,判断码流是否符合传输标准,并将解析结果实时回传至业务处理层,并最终在业务展示层进行汇总展示;⑤内容分析。作为IPTV监管系统的核心内容,充分利用人工智能引擎以及其他音视频监测手段,针对文本、音频、视频、图片等内容进行综合的分析判断,并将分析的结果传回业务处理层。同时利用语音报警、文字报警等各类报警手段进行预警。

  3)业务处理层

  业务处理层是整个IPTV监管系统应用的支撑,包括智慧监管、业务调度和智能引擎3方面。智慧监管应用模块针对EPG、节目码流、节目内容等各种异常、敏感、违规的数据进行汇总并提供智能报警。业务调度模块主要针对数据采集、收录、转码、分析等各个业务进行智能调度。智能引擎模块包括语音识别、OCR识别、场景识别、智能语义等人工智能引擎。

  4)业务展示层

  业务展示层是所有可操作以及系统可视内容的集合。本系统可通过客户端、大屏幕、手机等多终端进行访问。

  3系统亮点

  3.1超高密度实时UHD(超高清)视频转码

  视频转码模块充分利用视频处理芯片技术,单张支持高达4路4K 60帧/s的H.264及H.265编解码,支持32路1 080 p 30帧或至多128路较低分辨率视频的编解码。通过将复杂的编码/解码运算放在芯片上,实现视频转码器最大限度地降低了编解码对主机CPU的占用率,和软件转码及基于GPU的转码相比,让实时转码的效率和规模有了质的提高。超高密度实时UHD(超高清)视频转码流程图如图2所示。

图2超高密度实时UHD(超高清)视频转码流程图

  3.2智能拆条存储

  综合利用节目播出后EPG分析技术、镜头检测技术、语音识别技术、OCR识别技术,针对全天24 h的视频进行智能拆条,以最小颗粒度进行存储,方便后期其他系统加工剪辑。智能拆条存储业务流程如图3所示。

图3智能拆条存储业务流程图

  首先通过节目播出后EPG分析系统,将24 h的视频素材按照EPG进行拆分,按照电视剧、新闻栏目、广告时段等类型进行分类。

  针对电视连续剧、电影等类型的节目不做进一步的拆分。

  针对新闻栏目,综合利用镜头检测、语音识别以及语义分析技术,将新闻栏目拆分为独立的新闻视频,并利用文本检测及OCR识别技术定位并识别新闻标题。

  针对广告时段,利用音视频样本匹配技术、智能广告发现技术、语音识别以及语义分析技术将各个广告进行拆分,并智能给出广告名称。

  3.3智能识别编目

  目前广播电视行业中广泛使用国家广播电视总局发布的《广播电视音像资料编目规范》(以下简称《规范》)作为广播电视节目的编目依据,该《规范》以节目、片段、场景、镜头等4层结构模型对视频内容资源进行标引和描述,实现媒资编目和应用的标准化。以此实现智能编目,提高工作效率与质量。

  利用人工智能识别引擎针对IPTV媒资库的各类音视频文件进行智能分析,从而形成媒资标签,智能识别编目流程图如图4所示。

图4智能识别编目流程图

  通过智能媒资预处理引擎,针对媒资数据进行预处理,将视频文件转换为视频编码H.264、音频编码AAC,封装格式MP4的视频文件,用于播放及后续视频处理。同时提取视频文件中的音频流,保存为16K 16 bit 单声道的WAV文件,以便于后续的语音识别、声纹识别进行调用识别。将视频按照镜头切分生成关键帧,用于后续OCR识别、人脸识别、暴恐识别、色情识别等。

  通过对各类识别引擎识别的结果通过命名实体识别、主题分类等进行综合分析,对媒资内容生成智能标签,实体标签包括人名、地名、机构名、时间日期;主题标签包括娱乐、社会、音乐、人文、科学、历史、军事、体育、科技、教育等;敏感标签包括正常、涉政、色情、性感、暴恐等。同时能够根据编目字段搜索到对应的节目、片段、场景、镜头等。

  4结语

  通过引入超高密度实时UHD(超高清)视频转码技术,有效提高了编码压缩效率和设备处理性能,极大地提升了IPTV视频压缩转码的效率和数量。通过引入智能拆条存储、智能识别编码等人工智能技术,使IPTV节目的存储和编目更加智能化、快捷化。通过上述技术手段推动了IPTV监测监管的智慧化转型,提高了监测监管工作的能力和效率,为新时代智慧广电监测监管提供有效的技术手段。

责任编辑:侯亚丽

分享到:
版权声明:凡注明来源“流媒体网”的文章,版权均属流媒体网所有,转载需注明出处。非本站出处的文章为转载,观点供业内参考,不代表本站观点。文中图片均来源于网络收集整理,仅供学习交流,版权归原作者所有。如涉及侵权,请及时联系我们删除!