全台网关键业务流程短信预警平台的实现计算机架构_计算机-网络与通信.pdf

《全台网关键业务流程短信预警平台的实现计算机架构_计算机-网络与通信.pdf》由会员分享，可在线阅读，更多相关《全台网关键业务流程短信预警平台的实现计算机架构_计算机-网络与通信.pdf（11页珍藏版）》请在淘文阁 - 分享文档赚钱的网站上搜索。

1、全台网关键业务流程短信预警平台的实现 摘要 我台的业务生产系统以 ESB EME 业务数据总线为主干，新闻制播 网、媒资网、综合制作网通过互联主干实现互联互通；在实际业务生 产过程中，因为各种原因，有可能出现媒资上下载、新闻制播等关键 生产流程中的任务出错情况。针对此类情况，结合大洋系统提供的工 作流机制以及数据流信息，自主开发了一套节目生产系统关键任务短 信预警系统。该系统不仅造价便宜，部署便捷，而且能实时捕捉生产 过程中的出错和异常，第一时间采取相应处置手段，提高业务生产的 效率，减轻生产系统运维的整体压力。关键字 非编媒资互联 新闻制播 工作流 实时监控 短信报警 一、前言 苏州广播电视

2、总台是比较有代表性的城市型传媒集团。依托全台 节目生产制播网络的持续建设，苏州台的节目生产流程已经基本实现 文件化，生产效率极大提高。在节目制作网络内部，各板块通过主干 平台实现互联互通。媒资系统通过全台网主干为节目制作系统提供了 平均 300 次/日的素材调用，其中 2/3 为新闻业务服务，在新闻网内 部，每日平均也有 150 条成片送演播室播出。依托传统的流程监控软 件，可以了解这些关键任务在流程中的运行情况。但在一般情况下，除非运维部门设置监控中心，派专人监控业务流程，否则由使用部门 发现任务出错，再通知运维部门干预，往往需要十几分钟甚至更长时 间，在关键时段这些新闻相关任务的故障，可能

3、会给节目播出造成较 大影响，而专门设置由人值守的监控中心则管理使用成本过高，为及 时捕捉生产过程中的出错和异常，第一时间采取相应处置手段，提高 业务生产的效率，减轻生产系统运维的整体压力。我台技术团队依靠 自身力量开发了关键业务流程短信预警平台。二、苏州台生产制播网络现状和业务流程分析 1、生产制播网络总体架构 生产制播网络以总线型的分布式结构搭建，集成了包括新闻网在 内的多个制作网络、媒资系统、主干互联平台、演播室播出系统。各 业务板块均通过标准的接口与总线连接，通过 ESB EMB 双总线，实 现了多个业务板块之间开放、规范、松耦合的互联互通，业务生产系 统能够实现基于工作流的 24 小时

4、不间断节目生产。我台当前的业务生产系统网络拓扑如图 1-1 所示，采用简单的以 太网连接方式，媒资模块、新闻制播模块、综合制作模块连接到业务 网核心交换机。EMB 服务器、ESB 服务器、业务网核心交换机为互联 主干平台的物理基础，ESB、EMB 双总线为业务支撑平台。主干平台 是互联互通的核心，为业务生产模块、媒资模块提供接入方式、业务 交互方式以及数据交换方式并具有可扩展性；提供了不同业务模块之 间的业务整合功能;各个业务模块在主干平台上集成了数据的交换和 路由、流程的管理和控制、实现全台业务系统的统一管理和互联互通 制作网通过互联主干实现互联互通在实际业务生产过程中因为各种原因有可能出现

5、媒资上下载新闻制播等关键生产流程中的任务出错情况针对此类情况结合大洋系统提供的工作流机制以及数据流信息自主开发了一套节目生产系统关置手段提高业务生产的效率减轻生产系统运维的整体压关键字非编媒资互联新闻制播工作流实时监控短信报警一前言苏州广播电视总台是比较有代表性的城市型传媒集团依托全台节目生产制播网络的持续建设苏州台的节目生产流程网主干为节目制作系统提供了平均次日的素材调用其中为新闻业务服务在新闻网内部每日平均也有条成片送演播室播出依托传统的流程监控软件可以了解这些关键任务在流程中的运行情况但在一般情况下除非运维部门设置监控中心 图 1-1业务生产网络系统拓扑图 2、业务生产模块 新闻制播模块

6、分为新闻制作网和演播室系统，从采集、粗编、精 编、配音、审片到播出都在网络中完成，实现了制播一体化。新闻制 作网由文稿子系统、非编子系统和内容管理子系统组成；演播室系统 采由主+备播出服务器、视频服务器及信号采集、传输设备。综合制作模块承担以综艺类节目后期制作、电视剧和广告串编、数字电视等业务，包含数字电视收录制作网、电视剧制作网、广告制 作网、综艺节目制作网多个非编子系统。媒资模块是管理总台媒体资源、节目资料等内容的系统，通过上 载、编目、审核、存储、发布、检索、下载等流程将海量资料在数据 库中全面存储，为节目生产提供丰富的检索功能。3、业务生产流程 1）新闻制播流程 新闻制作模块 新闻播出

7、模块 流媒体 综合制作模块 制作网通过互联主干实现互联互通在实际业务生产过程中因为各种原因有可能出现媒资上下载新闻制播等关键生产流程中的任务出错情况针对此类情况结合大洋系统提供的工作流机制以及数据流信息自主开发了一套节目生产系统关置手段提高业务生产的效率减轻生产系统运维的整体压关键字非编媒资互联新闻制播工作流实时监控短信报警一前言苏州广播电视总台是比较有代表性的城市型传媒集团依托全台节目生产制播网络的持续建设苏州台的节目生产流程网主干为节目制作系统提供了平均次日的素材调用其中为新闻业务服务在新闻网内部每日平均也有条成片送演播室播出依托传统的流程监控软件可以了解这些关键任务在流程中的运行情况但在

8、一般情况下除非运维部门设置监控中心图 2-1新闻制播流程 新闻制播流程分为制作和播出两个阶段。记者根据新闻线索拍摄 采访后回到制作机房，用自己的账号登陆编辑工作站，首先在大洋文 稿系统中新建一条稿件，然后进入大洋非编系统编辑已关联好的故事 版，对故事版进行精剪和上字幕，最后走提交演播室流程。非编桥设 置完故事版的打包路径后，转换桥向打包队列中新增一条打包任务，打包完成后由演播室桥向trans 队列中添加一条 trans 外部任务，非 编桥回置完成状态，任务继续由 trans 服务执行外部迁移和内部迁 移，最终将要播出的成片迁移到新闻演播室视频服务器上。整个制播 过程中任务会在以下几个节点出错或

9、停滞不前：打包出错、打包终止、打包不进行、trans 出错、trans 不进行、审核不通过等，这些出错 都会导致节目制作和传输的失败，需要人为干预。2）媒资上载流程 制作网通过互联主干实现互联互通在实际业务生产过程中因为各种原因有可能出现媒资上下载新闻制播等关键生产流程中的任务出错情况针对此类情况结合大洋系统提供的工作流机制以及数据流信息自主开发了一套节目生产系统关置手段提高业务生产的效率减轻生产系统运维的整体压关键字非编媒资互联新闻制播工作流实时监控短信报警一前言苏州广播电视总台是比较有代表性的城市型传媒集团依托全台节目生产制播网络的持续建设苏州台的节目生产流程网主干为节目制作系统提供了平均

10、次日的素材调用其中为新闻业务服务在新闻网内部每日平均也有条成片送演播室播出依托传统的流程监控软件可以了解这些关键任务在流程中的运行情况但在一般情况下除非运维部门设置监控中心 提交上载媒资请求后，流程可能会在节目查重、获取目标路径、调用 EM 曲艮务、转码、入库、入库回调这些工作流节点出错，导致流 程终止 3）媒资下载流程 图 2-2媒资上载流程 制作网通过互联主干实现互联互通在实际业务生产过程中因为各种原因有可能出现媒资上下载新闻制播等关键生产流程中的任务出错情况针对此类情况结合大洋系统提供的工作流机制以及数据流信息自主开发了一套节目生产系统关置手段提高业务生产的效率减轻生产系统运维的整体压关

11、键字非编媒资互联新闻制播工作流实时监控短信报警一前言苏州广播电视总台是比较有代表性的城市型传媒集团依托全台节目生产制播网络的持续建设苏州台的节目生产流程网主干为节目制作系统提供了平均次日的素材调用其中为新闻业务服务在新闻网内部每日平均也有条成片送演播室播出依托传统的流程监控软件可以了解这些关键任务在流程中的运行情况但在一般情况下除非运维部门设置监控中心媒资与各制作网通过 ESB EMB 双总线互联，用户在制作网提交下 载请求后，流程可能会在后续的节目查重、媒资下载、获取目标路径、调用 EM 曲艮务、入库、入库回调这些工作流节点出错，导致下载流程 终止。三、关键业务流程监控预警平台的实现 1、平

12、台构成及思路 硬件：1）服务器、2）华为 CDMA 短信猫、3）电信天翼卡；平台 软件：1）基于 COMS信的短信报警程序、2）节目生产系统关键任务 监控模块，软件结构如图 3-1所示；制作网通过互联主干实现互联互通在实际业务生产过程中因为各种原因有可能出现媒资上下载新闻制播等关键生产流程中的任务出错情况针对此类情况结合大洋系统提供的工作流机制以及数据流信息自主开发了一套节目生产系统关置手段提高业务生产的效率减轻生产系统运维的整体压关键字非编媒资互联新闻制播工作流实时监控短信报警一前言苏州广播电视总台是比较有代表性的城市型传媒集团依托全台节目生产制播网络的持续建设苏州台的节目生产流程网主干为节

13、目制作系统提供了平均次日的素材调用其中为新闻业务服务在新闻网内部每日平均也有条成片送演播室播出依托传统的流程监控软件可以了解这些关键任务在流程中的运行情况但在一般情况下除非运维部门设置监控中心B MtYD 发送线程 短信发送模块 图 3-1软件架构图 工作方式：关键任务监控模块通过收集关键流程的工作流和数据流信 息并深度挖掘，筛选出错信息，并以结构化的数据插入发送队列中，短信报警程序按照固定时间间隔将发送队列中的信息发送给当天 IT 值班运维人员。2、监控关键流程对象 新闻制播模块有两套新闻子网，综合制作模块有四个子网，这六 个子网都通过互联主干与媒资模块互联互通，关键流程如下：媒资下载到 1

14、套新闻网；媒资下载到 2套新闻网；媒资下载到广告制作网；媒资下载到节目制作网；媒资下载到 5套新闻网；媒资下载到数字电视制作网；1套新闻网送播流程；2套新闻网送播流程；EMB 流 程；SNA RTYD Bst Y I 出错信息队列 制作网通过互联主干实现互联互通在实际业务生产过程中因为各种原因有可能出现媒资上下载新闻制播等关键生产流程中的任务出错情况针对此类情况结合大洋系统提供的工作流机制以及数据流信息自主开发了一套节目生产系统关置手段提高业务生产的效率减轻生产系统运维的整体压关键字非编媒资互联新闻制播工作流实时监控短信报警一前言苏州广播电视总台是比较有代表性的城市型传媒集团依托全台节目生产制

15、播网络的持续建设苏州台的节目生产流程网主干为节目制作系统提供了平均次日的素材调用其中为新闻业务服务在新闻网内部每日平均也有条成片送演播室播出依托传统的流程监控软件可以了解这些关键任务在流程中的运行情况但在一般情况下除非运维部门设置监控中心数据库 DYESBD来实现，库中表 WF_PROCESSINSTAN 了每一条 3、数据库设计 该平台需要本地建立数据库来存放关键任务出错信息、人员管理 信息、任务监控信息等；数据库实例命名为 smsdb,包括三张表：用 户管理表、监控流程信息表、出错任务信息记录表；用户管理表存运 维人员的姓名、该用户负责的监管流程、该用户的手机号码；监控流 程信息表记录流程

16、对应数据库服务器 IP、库名、管理用户及口令等；出错任务信息表记录出错的任务信息，例如任务名称、类型、出错步 骤、该任务创建时间、报警状态位等。4、短信猫接口设计 短信猫接口主要提供三个功能函数，并封装成动态链接库，以便 在编码时显式调用。1)Open函数，连接短信猫，建立 COM 通信信道；2)SendMsg 函数，发送短信文本；3)Close 函数，断开短信猫，关闭通信信道。5、任务监控策略 制作网通过主干与媒资模块互联的 ESB 流程监控通过分析工作流 关键任务的实时运行情况，包括任务名称、任务 ID、任务类型、任 务状态、任务当前活动节点、任务出错的活动节点ID，表 WF_ACTIVI

17、TY 定义了不同类型的流程的所有活动节点 ID 以及活动节点名称。筛选 ESB 流程的条件：任务类型字段值为 mam2edit,任务状态的错误码为 非零值，每隔 30 秒重复做数据分析，确保及时捕获流程的出错信息。EMB 任务的监控主要分析 DY EMBDB数据库，库中表 制作网通过互联主干实现互联互通在实际业务生产过程中因为各种原因有可能出现媒资上下载新闻制播等关键生产流程中的任务出错情况针对此类情况结合大洋系统提供的工作流机制以及数据流信息自主开发了一套节目生产系统关置手段提高业务生产的效率减轻生产系统运维的整体压关键字非编媒资互联新闻制播工作流实时监控短信报警一前言苏州广播电视总台是比较

18、有代表性的城市型传媒集团依托全台节目生产制播网络的持续建设苏州台的节目生产流程网主干为节目制作系统提供了平均次日的素材调用其中为新闻业务服务在新闻网内部每日平均也有条成片送演播室播出依托传统的流程监控软件可以了解这些关键任务在流程中的运行情况但在一般情况下除非运维部门设置监控中心DY EMB_MAINTASKINFOYEMB_FINISHEDMAINTASKINF录 了所有正 在执行和已经完成的 EMB 任务。这两张表的字段定义相同，包括任务 名称、任务进度、出错信息、回调信息等；筛选所有 EMB 出错任务的 条件：任务状态码不等于 8;筛选 EMB 不回调任务的条件：任务状态 码为&回调状态

19、码为 1;筛选添加 EMB 失败的任务的条件：同时检 索表 DYEMB_MAINTASKINFOYEMB_FINISHEDMAINTASKINF若检索 结果为空，则说明该任务在 EMB 中没有添加成功 新闻制播流程中的打包任务和迁移任务非常关键，对于打包任务 的监控主要通过分析打包数据库 DY Re nder来实现；DYRen der库中的 表DYRC_TASKINF记录了相关打包任务的信息，监控提演播室的打包 出错任务的条件：任务状态码不等于 8，任务发起人为 trans_bridge 对于迁移任务的监控通过分析大洋演播室数据库 studio30 实现，库 中表 rendertaskinfo

20、 和 transtaskinfo 对应着 trans 外部任务和内 部任务，rendertaskinfo 和 transtaskinfo 的数据结构一致，记录 了任务 ID、任务名称、任务进度、任务状态、任务出错原因等信息，监 控 迁移任务 出 错 的 条 件：状 态 码 为 5，任 务发起人 为 studio_bridge。6 关键任务监控模块 制作网通过互联主干实现互联互通在实际业务生产过程中因为各种原因有可能出现媒资上下载新闻制播等关键生产流程中的任务出错情况针对此类情况结合大洋系统提供的工作流机制以及数据流信息自主开发了一套节目生产系统关置手段提高业务生产的效率减轻生产系统运维的整体压

21、关键字非编媒资互联新闻制播工作流实时监控短信报警一前言苏州广播电视总台是比较有代表性的城市型传媒集团依托全台节目生产制播网络的持续建设苏州台的节目生产流程网主干为节目制作系统提供了平均次日的素材调用其中为新闻业务服务在新闻网内部每日平均也有条成片送演播室播出依托传统的流程监控软件可以了解这些关键任务在流程中的运行情况但在一般情况下除非运维部门设置监控中心圈光途任劳誓善工具 :gz I 幵思！溢 济I哥rs F P皿任务 F注址和 P走打包 硬迅翻 图 3-2用户界面 1 关键任务报警模块监控的关键任务：trans，打包，EMB 任务，ESB 流程，通过勾选复选框可开启或停止监，能够为每个监控任

22、务设置轮 询时间片；每个任务的监控都以单独的后台线程执行，该线程负责记 录关键任务出错信息并将线程和数据库操作信息写入日志；各个线程 互不影响，确保程序稳定运行。7短信报警模块制作网通过互联主干实现互联互通在实际业务生产过程中因为各种原因有可能出现媒资上下载新闻制播等关键生产流程中的任务出错情况针对此类情况结合大洋系统提供的工作流机制以及数据流信息自主开发了一套节目生产系统关置手段提高业务生产的效率减轻生产系统运维的整体压关键字非编媒资互联新闻制播工作流实时监控短信报警一前言苏州广播电视总台是比较有代表性的城市型传媒集团依托全台节目生产制播网络的持续建设苏州台的节目生产流程网主干为节目制作系统

23、提供了平均次日的素材调用其中为新闻业务服务在新闻网内部每日平均也有条成片送演播室播出依托传统的流程监控软件可以了解这些关键任务在流程中的运行情况但在一般情况下除非运维部门设置监控中心 H軒储担it 1 芍嚣門時1 LUlj-in LL M2 M：nvi ATWB 二 1 种厂 图 3-3用户界面 2 如图 3-3所示短信报警模块的用户界面，提供软件与短信猫的 COM 信道连接与断开功能：COMP 默认为 COM,1 数据波特率默认为 115200;提供单独的短信发送测试；提供发送队列的信息检索功能；可设置循 环发送短信的时间间隔。四、项目效果和发展 该短信预警平台在总台生产业务网络中部署并试运

24、行近两个月，效果极佳。通过与技术值班管理系统关联，各种业务流程出错信息可 以短信方式直接发送到当日值班人员的手机上，为安全播出的应急响 应提供了充裕的反应时间；同时，在使用部门反馈问题之前，运维团 队就已经完成故障处理，极大提高了全台网技术服务水平，保证了使 用部门对技术服务的高满意度。在实际运行中，系统报警的准确率在 98%左右，较少出现误报漏报的情况。目前平台尚有不足，接下来我 台技术团队将从功能、可靠性、实用性多方面进行不断完善。串口条1仙 可曲制 埶哗厂 贞忡圭1”:融 创 曲II聊 机芒址胃总 二竺 制作网通过互联主干实现互联互通在实际业务生产过程中因为各种原因有可能出现媒资上下载新闻制播等关键生产流程中的任务出错情况针对此类情况结合大洋系统提供的工作流机制以及数据流信息自主开发了一套节目生产系统关置手段提高业务生产的效率减轻生产系统运维的整体压关键字非编媒资互联新闻制播工作流实时监控短信报警一前言苏州广播电视总台是比较有代表性的城市型传媒集团依托全台节目生产制播网络的持续建设苏州台的节目生产流程网主干为节目制作系统提供了平均次日的素材调用其中为新闻业务服务在新闻网内部每日平均也有条成片送演播室播出依托传统的流程监控软件可以了解这些关键任务在流程中的运行情况但在一般情况下除非运维部门设置监控中心