【摘要】 各个广播电视台在多年来的发展过程中已经累积了大量的视音频素材,这些视音频素材异常珍贵,如何做好这些资源的整合和挖掘显得尤为重要,而最有效的途径就是在现有已经建成的媒体资产管理系统上,利用现代化的智能技术如语音识别、人脸识别等AI技术以及大数据技术,为台内多个业务系统提供素材管理、归档、交互、共享以及发布等能力,合理高效的对历史素材进行便捷管理,提升媒资系统对广播电视台的业务能力支撑。本文主要探讨智能媒资建设中涉及到的以上关键内容。
【关键词】 智能媒资 大数据 AI技术
一.引言
智能化媒资系统是借助现代信息与数字化技术,围绕计算机网络核心,采用先进IT技术,在开放体系架构基础上完成资料数据智能标记、智能分类、语音识别、人脸识别等内容智能分析的网络系统;实现与广播电视台现有各个业务子系统网络化的互联互通,媒资内容的编目和检索能力达到相关标准和规定,并且系统的建设将采用多级冗余备份措施,从物理层到逻辑层全方位的保障系统的高可用性。
二.智能媒资业务系统总体设计
智能化媒资系统需基于人脸识别、语音识别以及语义识别等多种AI人工智能引擎,为上层业务应用提供统一的人工智能能力接口平台;系统能实现智能化媒资资源的有效上载、智能处理、管理和长期保存以及便捷调用等业务应用,将满足对各类资源向多渠道分发和调用的业务需求;系统具备完善的管理措施,提供完善的网络管理软件系统,以保证基础网络信息平台的可管理性,系统将确保与外界文件交换的高效率和安全性,提供多重的安全防范体系和访问控制机制,并能够实现多线程的任务管理。
1.智能媒资业务模块
智能媒资业务系统的建设,将实现智能化媒资资源的有效上载、智能处理、管理和长期保存以及便捷调用等业务应用,满足对各类资源向多渠道分发和调用的业务需求。
2.智能处理模块
包括智能化处理平台的建设。可以基于人脸识别、语音识别、语义分析识别等多种AI人工智能引擎为上层业务应用提供统一的人工智能能力接口平台,底层的人工智能引擎包括人脸识别引擎、语音识别引擎、语义分析引擎等人工智能引擎,为上层的智能化媒资系统提供相应的人工处理能力服务。
三.智能媒资业务系统总体架构设计
智能媒资系统的总体架构分为三层,分别是Ia aS层即设施服务层、 paas层即平台服务层、SaaS层即软件服务层。

图1 云架构模型
系统的整体架构与过去的单独业务系统模块不同,采用了云架构模式来对系统实行规划。

图2 系统框架图
媒资系统在总体上采用三层云架构的方式进行建设,分类IAAS层、PAAS层、SAAS层,每一层各司其职。
IaaS层:提供整个系统运行所需要的存储资源、计算资源、网络资源。
PaaS层:承担着“承上启下”的重要使命,向上衔接上层应用工具,向下衔接基础资源的调度应用。PaaS平台一方面能够将上层业务系统从繁琐的软件基本能力建设中解放出来,具备工具的解耦能力,包括工具接入规范、资源库解耦、用户权限解耦、存储访问解耦、流程解耦、工具参数信息解耦;另一方面具备一系列服务能力:应用工具接入平台的管理服务能力、工具解耦及业务环节所需的媒体处理服务能力、应用工具参数及内容元数据、对象、标签、索引、权限的管理服务能力、数据服务能力、用户管理服务能力、监控支撑上层应用的服务能力、流程引擎源及注册业务参数的服务管理能力,打造“平台+工具”的新一代融合模式。
SaaS层:提供媒资用户所需要使用的入库工具、检索工具、审片工具等多类型工具。
拓扑图如上:

图3 广播电视台媒资系统拓扑图
智能媒资系统需要与现有高清新闻制播网络系统互联互通。现有制作系统及其关联系统的技术规范遵循WebService协议,新建第三方发布系统遵循以上协议所定义的技术规范来实现服务接口,完成新建技术系统与现有系统的互联互通。

图4 系统交互图
四.智能媒资系统功能模块设计
1. 一站式访问智能媒资门户
系统可提供统一的应用与服务的入口,消除不同工具、系统间切换的工作环境所造成的效率损失和账号管理 麻烦。
业务应用都通过BS架构方式实现,编目及审核业务都不会受到场地、设备的制约,均可随时随地通过互联网访问便捷处理。
至少需要具备如下功能:
· 独立的门户首页,提供应用、工具、服务的注册和上下线管理。
· 支持提供统一用户认证服务,为所有不分客户端形态的应用、工具提供接入服务,创造在门户上实现一次登录全站畅行的效果。
· 门户应用的权限控制,为不同业务人员提供不同的工作界面。
· 可以根据使用人员的工作习惯进行自定义应用图标排列。

图5 智能媒资门户界面图
2.媒资入库模块设计
随着互联网的发展,为了方便用户的使用,媒资入库采用B/S web入库的方式和C/S独立客户端入库的两种方式相结合。其中B/S web入库的方式不仅支持普通的单个档入库,也支持数据集批量入库。
支持对入库的素材内容进行按工作流角色、素材类型和来源等多种管理维度进行分类和整理,并可以通过素材的智能关联,方便后台用户进行快速的检索和生成管理需求。
媒资入库形式:
B/S web入库:支持单个资料素材入库也支持 AVI+WAV 文件入库,支持带附件上传,支持上传元数据编辑及同类型档批量元数据编辑。
支持导入文件的元数据描述xml文件的自动导入,并且导入文件可以支持手动设置转码格式。
支持对录入文件进行简单编辑剪辑后重新合成入库。
支持在上载导入工具中对采集内容进行初级编目,为资源著录元数据信息,且编目字段可根据使用方要求由用户自定义修改。
支持为上传文件进行自定义相关信息填写。
C/S独立上载客户端:支持支持多种媒体介质(DVC P RO蓝光盘, Betcam蓝光盘、数字Betcam蓝光盘、 DVD光盘,Sony XDCAM光盘,SXS卡,松下P2卡,本地磁盘、网络磁盘和移动硬盘等数字和模拟介质内容采集 上载。)
支持多种制播设备采集,包括XDCAM录像机,XDCAM U1/2驱动器,高标清录像机和P2读卡器。
支持基于9Pin Remote协议控制录
像机设备,完成蓝光盘内容快速定位。
支持SDI信号采集时,能够根据用户配置的编码格式同时生成的高低码率数字文件,同时能够自动适应高标清信号源。
3.智能编目
智能编目功能,应用于整档新闻节目的智能化编目,系统可支持各种AI相关的业务能力,利用人工智能与大数据技术,快速实现语音、人脸等识别、标签的快速提取等,提高对视频内容本身的著录描述效率。
智能编目主要由人脸识别、语音识别、语义分析产生相关的标签,在流程上,即可在入库审核时调用智能引擎分析进行分析编目,又可在入库后手动发起智能编目。因此,系统可提供资源操作轨迹功能。
在入库的时候可对视频进行智能审核,包括技术质量审核和内容审核,识别敏感人物,审核的结果可在页面中 显示。

针对人脸标签标签,支持通过人脸识别进行标签编目同时提示敏感人物。支持敏感人物检测,可在后台自行增加敏感人物库的人物,对出现敏感人物的视频片段进行精确定位。

针对语音识别及转译,支持时码信息同步播放跟随。

针对综合编目结果,支持对资源内容在关键内容、人物、地点、时间、事件维度展示标签;支持语义分析,将分析的结果进行智能编目(智能分类、智能标签),同时也作为检索标签,在检索流程中可被检索;支持智能编目的标签可在全文检索被检索到;支持自定义元数据,手动审核修改删除编目信息。

4.检索功能
媒资检索系统能提供多维度检索方式:全文检索、高级检索、分类检索、二次检索、拼音检索以及条件过滤过滤组合检索,满足用户的各种检索习惯。检索系统提供层次检索功能,包括编目层,关键帧等。
检索系统提供对结果集的浏览功能,结果集的浏览的内容包括:标题、条目类型、时长、时间等。结果集的显示还包括分页浏览、按多种方式排序等功能。检索结果智能排序,针对每一类资源都针对性的提供最适合的展现方式。
检索系统的统计查询模块,提供媒体文件访问情况的统计,如下载量的统计等,以便帮助用户发现哪些媒体文件是最近热点。
在智能上,支持通过语音识别技术自动处理含有音频内容的节目,并可根据音频内容实现全文检索。
(1)全文检索
在检索框中直接输入字段中包含的关键词,可以将对应的内容检索出来。检索框支持逻辑组合检索,如and/or等。
为了更加精确的检索,可以在检索框上方选择检索内容类型(全部、视音频、图片、音频、文文件、数据集、其他)后,再在检索框中输入关键词,进行检索。
检索结果可以根据入库时间、标题名、相关度设置升降序。

(2)高级检索
用户可以根据已知信息,对每个字段进行检索设置,如设置题名、密级、创建者、入库者等,实现精确检索。
检索结果可以根据入库时间、标题名、相关度设置升降序。
(3)分类检索
系统设计时,将检索结果中包含的条件字段汇集展示,点击任意条件信息,过滤该条件包含的检索内容。主要条件字段包括:编目状态、文件类型、栏目、来源、画质等。
索引字段可以选择设置为条件,推荐配置枚举型字段。
检索结果可以根据入库时间、标题名、相关度设置升降序。
备注:条件过滤检索即标签检索。

(4)组合检索
支持在当前结果中再次检索,或者多重检索方式相迭加,使检索结果更加精确。

(5)关联检索
全文检索引擎可以完成针对大规模数据,在秒级时间内完成这一搜索需求,并可以同时提供针对搜索内容的复杂关联和统计信息。
5.媒资出库
媒资系统可以通过下载应用将所需资源文件下载到本机、推送到指定路径等多种方式进行出库调用。系统支持同一资源可同时分发到多个平台,也支持多个资源同时发送到同一平台。系统支持对下载申请单、下载审核单、下载任务的统一监看、任务的审核、任务取消、删除等进行管理。
主要功能如下:
(1)支持出库时添加水印,申明或保护版权。
(2)支持向下游系统输出各类资源文件,主要包括:源码文件、附件、海报、片花等。
(3)支持提供同一资源的不同码率、不同格式转换功能,适配不同业务格式要求。
(4)提供批量下载功能,允许将感兴趣的素材直接进行编辑,剪辑和拼接操作后发起下载。
(5)下载支持权限管理,下载方式中需要提供下载到工作站、下载到指定路径等流程选择;提供下载格式及码率选择。
(6)支持对检索到的文件下载时发起申请/审批流程,并可以在申请历史和审批历史中查看操作。
(7)支持每个用户对自己发起的下载任务进行查询和跟踪。
(8)素材出库到外部系统,可以将系统中的素材出库到指定的共享文件夹中,并支持多种协议。
五.结论
在智能媒资系统建设过程中,通过对智能手段的的探讨,立足于当前发展现状,充分利用虚拟化、微服务架构和AI技术,建成一个适合广播电视台业务需求的智能媒资系统,大大提升广播电视台业务生产能力和生产效率,并促进广播电视事业的健康可持续发展,并为广播电视台未来业务发展赋能。B&P