操作员手册模板.doc

《操作员手册模板.doc》由会员分享，可在线阅读，更多相关《操作员手册模板.doc（31页珍藏版）》请在淘文阁 - 分享文档赚钱的网站上搜索。

1、Moia Control 安安装装手手册册 北北 京京 先先 进进 数数 通通 信信 息息 技技 术术 股股 份份 公公 司司 研研 究究 与与 发发 展展 中中 心心 Moia Control 安装手册 北京先进数通信息技术股份公司 - i - 目目 录录 目目 录录.I 1. 部署示意图部署示意图.1 2. 配置要求配置要求.1 2.1. 服务器.1 2.2. 磁盘空间.1 2.3. 软件环境.2 2.4. 前端客户端.2 2.5. 数据库.2 2.6. 网络.2 2.7. 主机端口.2 3. 后台服务安装后台服务安装(C 语言版语言版).3 3.1. 安装包说明.3 3.2. 安装环境准

2、备.3 3.2.1. 数据库环境 .3 3.2.2. DataStage环境.3 3.3. 安装与卸载.4 3.3.1. 解压解包 .4 3.3.2. 调度节点安装 .4 3.3.3. 调度分布式安装 .6 3.3.4. 执行节点安装 .9 3.3.5. 节点执行卸载 .10 3.3.6. 多活节点卸载 .11 3.3.7. 服务进程管理 .11 4. 后台服务安装后台服务安装(JAVA 语言版语言版) .14 4.1. 安装包说明.14 4.2. 准备工作.14 4.2.1. Java运行环境.14 4.2.2. 运行Datastage作业相关设置.15 4.2.3. 解压 .15 4.2.

3、4. 修改配置文件 .15 4.3. 节点安装.16 4.4. 启动服务.17 4.5. 停止服务.18 4.6. 节点卸载.18 4.7. 版本及环境信息查询.19 5. WEB 服务安装服务安装(TOMCAT).20 5.1. 解压WEB安装包.20 5.2. 环境准备.20 5.3. 配置服务器信息.20 5.4. 停止服务器.22 Moia Control 安装手册 北京先进数通信息技术股份公司 - ii - 6. WEB 服务安装服务安装(WAS).22 6.1. 修改服务器COOKIE属性(WAS8.5 以上版本).22 6.2. 部署及配置WAR包 .22 6.3. JNDI连接

4、配置.23 7. 大屏部署大屏部署.24 7.1. 准备.24 7.2. 安装.24 8. 浏览器设置浏览器设置.25 Moia Control 安装手册 北京先进数通信息技术股份公司 - 1 - 1. 部署示意图部署示意图 2. 配置要求配置要求 2.1. 服务器服务器 Moia Control安装运行支持的操作系统包括：: Red Hat 5 7 CentOS 5 7 SUSE Linux 10、11 AIX 5、6（执行节点） Windows（执行节点） 2.2. 磁盘空间磁盘空间 推荐配置： 20G以上的安装使用空间。 10G以上资料库存储空间。 建议值： Moia Control 安

5、装手册 北京先进数通信息技术股份公司 - 2 - 1w个作业每日运行，每天日志大小在 2 - 10G。若每天运行 8 小时计划 完成度 90%，每天日志大小在 5G左右，数据库日志增涨量大约为 30M左右。 （不同的计划配置和运行情况差异可能很大） 2.3. 软件环境软件环境 服务器端，需要开放或安装以下系统环境： Red Hat/CentOS/SUSE：sar、dmesg、uname、stdbuf、glibc 2.2.5（运行库） AIX：cc、bootinfo、vmstat、oslevel、ping、uname Windows：jdk WEB端，需要安装Oracle JDK1.61.8 版

6、本。 2.4. 前端客户端前端客户端 IE10 ，IE11，Chrome。 2.5. 数据库数据库 Oracle 10g ORACLE 19c DB2 V9、DB2 V10 MYSQL 5.6 PostgreSQL 10.8 2.6. 网络网络 服务器和客户端之间正常使用TCP/IP以及UDP通讯; 调度Datastage并行作业需要机器之间开通rsh，且无密码访问。 2.7. 网络端口网络端口 Moia Contorl 安装环境网络需求（分布式调度节点） 源应用 - 目标应用默认端口 长/短连 接 调度节点 - 资料库TCP:与数据库类型相关长连接 调度节点间互相访问 TCP:57501 短

7、连接 调度节点 - 执行节点 TCP:57505 短连接 Moia Control 安装手册 北京先进数通信息技术股份公司 - 3 - 调度节点 - zookeeper TCP:2181 长连接 执行节点(c 版本) - 调度节点 TCP:57501 UDP:57502 短连接 执行节点(JAVA 版本) - 调度节点 TCP:57501 短连接 zookeeper 节点间互相访问TCP:2888、3888长连接 web 服务 - 资料库TCP:与数据库类型相关长连接 web 服务 - 调度节点 TCP:57501 短连接 浏览器 - web 服务TCP:8080（tomcat）长连接 接口调

8、用 - web 服务TCP:22512、22513短连接 Moia Contorl 安装环境网络需求（单调度节点） 源应用 - 目标应用默认端口 长/短连 接 调度节点 - 资料库TCP:与数据库类型相关长连接 调度节点 - 执行节点 TCP:57505 短连接 执行节点(c 版本) - 调度节点 TCP:57501 UDP:57502 短连接 执行节点(JAVA 版本) - 调度节点 TCP:57501 短连接 web 服务 - 资料库TCP:与数据库类型相关长连接 web 服务 - 调度节点 TCP:57501 短连接 浏览器 - web 服务TCP:8080（tomcat）长连接 接口调

9、用 - web 服务TCP:22512、22513短连接 2.8. 服务器硬件配置建议服务器硬件配置建议 服务器分类硬件资源 最低配 置 建议配 置 说明 cpu4c16c 内存 4G64G 数据库 存储空间 10G50G MoiaContorl 资料库。 存储空间要求与历史日志保留天数 有关。 cpu4c16c 内存 4G32G 调度节点 存储空间 （安装目录） 20G100G 调度 server,负责调度逻辑控制。 存储空间按照每 1 万作业每天 10G 日志预估,与作业量、整体跑批时 间跨度、日志保留天数有较大关系。 cpu 内存 由所调度 系统决定 由所调度 系统决定 执行节点 （本地

10、作业） 存储空间 （安装目录） 20G 由所调度 系统决定 本地作业，运行在执行节点本地的 作业。 执行节点本身对 cpu、内存资源消 耗基本可以忽略。 存储空间主要用于存放作业日志， 与作业日志输出情况及保留天数有 直接关系。 Moia Control 安装手册 北京先进数通信息技术股份公司 - 4 - cpu4c8c 内存 4G8G 执行节点 （远程作业） 存储空间 （安装目录） 20G 由所调度 系统决定 远程作业，在 agent 只是完成提交 动作，真正运行在服务端，比如调 度存储过程、大数据、webservice 之类作业。 执行节点本身对 cpu、内存资源消 耗基本可以忽略。 存储

11、空间主要用于存放作业日志， 与作业日志输出情况及保留天数有 直接关系。 3. 后台服务安装后台服务安装(C语言版语言版) 3.1. 安装包说明安装包说明 Moia Control为适应不同的操作系统和数据库，根据安装环境所在的操作系 统和位数，以及所使用的数据库环境和版本，安装包的命名规则如下： MoiaControl.$版本号_$操作系统$位数_$数据库名称_$DS.tar.gz 例如： MoiaControl.V5.10.001_Linux64_ORACLE_DATASTAGE.tar.gz 该安装包可以安装Linux64 位内核，oracle环境的调度节点。 可以安装Linux64 为内

12、核，有Datastage环境或者没有Datastage环境的执行节 点。 3.2. 安装环境准备安装环境准备 3.2.1. 数据库环境数据库环境 Oracle数据库用户需要具有连接和开发权限。 DB2 数据库用户需要具有连接和开发权限，4k及以上表空间。 Mysql和PostgreSQL需要具有连接和开发权限，并且创建UTF8 的字符集数 据库。 Moia Control 安装手册 北京先进数通信息技术股份公司 - 5 - 3.2.2. DataStage 环境环境 目前支持Information Server 8.5、Information Server 8.7、Information Se

13、rver 9.5、Information Server 10.1、Information Server 11.3。 新建用户安装Moia Control后，需要将安装用户添加dstage组。 3.3. 安装安装与卸载与卸载 3.3.1. 解压解包解压解包 上传安装包到安装目录下后，执行命令进行压缩包的解压。如： gzip -d MoiaControl.V5.06.001_Linux64_ORACLE_DATASTAGE.tar.gz tar xvf MoiaControl.V5.06.001_Linux64_ORACLE_DATASTAGE.tar 3.3.2. 调度节点安装调度节点安装 3.

14、3.2.1. 配置安装文件配置安装文件 打开安装目录下配置文件install.srv 1、填写调度节点IP地址,IPADDR=本机IP地址，不填写会自动获取。机器配置了 多ip，则该项必须填写。 2、填写数据库的home路径，数据库是oracle填入ORALCE_HOME，如果是DB2 填 入INSTHOME。 3、填写数据库名，用户及密码。 4、填写物理节点名字PNODE_NAME。以及改物理节点上需要开通的各个服务所占 用的端口号。 Moia Control 安装手册 北京先进数通信息技术股份公司 - 6 - EVT_PORT=57501 # 事件服务端口 CMD_PORT=57502#

15、命令服务端口 5、ZOOKEEPER安装选项 不使用双活调度节点选择 0 如果需要使用分布式调度节点，且已经安装zookeeper则选择 1，并填写以下项： 注:如果是ZOOKEEPER集群，使用逗号分割 如果需要分布式安装多个调度节点，并且未安装zookeeper，需要在本机自动安 装选择 2，并填写以下项。该方式安装完成后，仍需要完善zookeeper集群。 3.3.2.2. 执行安装脚本执行安装脚本 配置好install.srv文件后，执行sh install.sh -srv显示配置内容： 确认无误后输入回车进行安装。 Moia Control 安装手册 北京先进数通信息技术股份公司 -

16、 7 - 这里选择N新安装MoiaControl调度平台，并回车确认你的选择，开始安装新的 调度平台。 3.3.3. 调度分布式安装调度分布式安装 3.3.3.1. zookeeper集群安装集群安装 安装第一个调度节点时，若未使用zookeeper，或者新安装zookeeper，在 安装分布式多调度节点时，必须完善zookeeper集群。 根据官方建议，zookeeper集群最佳个数为 2n+1，根据实际情况自行调整。 第一步：主机名称到第一步：主机名称到IPIP地址映射配置地址映射配置 以/etc/hosts中配置的机器为例。 168.16.5.50 server-1 168.16.5.5

17、1 server-2 168.16.5.52 server-3 第二步第二步：修改修改ZooKeeperZooKeeper配置文件配置文件 解压缩zookeeper-3.4.6.tar.gz，修改配置文件conf/zoo.cfg，内容如下 所示： tickTime=2000 initLimit=10 syncLimit=5 dataDir=/opt/zookeeper/data clientPort=2181 maxClientCnxns=200 Moia Control 安装手册 北京先进数通信息技术股份公司 - 8 - autopurge.snapRetainCount=3 autopur

18、ge.purgeInterval=1 server.1=168.16.5.50:2888:3888 server.2=168.16.5.51:2888:3888 server.3=168.16.5.52:2888:3888 三台机器zoo.cfg配置均如此。 第四步第四步：设置设置myidmyid 168.16.5.50 执行： echo “1” /opt/zookeeper/data/myid 168.16.5.51 执行： echo “2” /opt/zookeeper/data/myid 168.16.5.52 执行： echo “3” /opt/zookeeper/data/myid

19、注意：安装调度节点时，新安装的zookeeper也需要修改zoo.cfg，并且 myid也需要对应。并重启zookeeper。 第五步：启动第五步：启动zookeeperzookeeper zookeeper的bin目录下执行：sh zkServer.sh start 停止zookeeper命令： sh zkServer.sh stop 第六步：修改调度节点配置第六步：修改调度节点配置 修改调度节点etc/MOIA_ADT.cfg配置文件中， G_ZOO_USED=1 ZOOK_HOST=168.16.5.50:2181，168.16.5.51:2181，168.16.5.52:2181 并重

20、启调度节点服务。 3.3.3.2. 配置安装文件配置安装文件 打开安装目录下配置文件install.srv 1、填写调度节点IP地址,IPADDR=本机IP地址，不填写会自动获取。 机器配置了多ip，则该项必须填写。 2、填写数据库的home路径，数据库是oracle填入ORALCE_HOME，如果是DB2 填 Moia Control 安装手册 北京先进数通信息技术股份公司 - 9 - 入INSTHOME。 3、填写数据库名，用户及密码。 4、填写物理节点名字PNODE_NAME。以及该物理节点上需要开通的各个服务所占 用的端口号。物理节点名不能重复。 EVT_PORT=57501 # 事件

21、服务端口 CMD_PORT=57502# 命令服务端口 5、ZOOKEEPER安装选项 安装双活节点必须选择 1，并填写zookeeper server的配置选项。 3.3.3.3. 执行安装脚本执行安装脚本 配置好install.srv文件后，执行sh install.sh -srv显示配置内容： 确认无误后输入回车进行安装。 Moia Control 安装手册 北京先进数通信息技术股份公司 - 10 - 这里选择D安装MoiaControl双活调度节点，并回车确认你的选择，然后开始安 装。 注意：这里一定选择D，选择N会重新建表安装。 3.3.4. 执行节点安装执行节点安装 3.3.4.1

22、. 配置安装文件配置安装文件 打开安装目录下配置文件install.agt 1、填写调度节点IP地址,IPADDR=本机IP地址，不填写会自动获取。 机器配置了多ip，则该项必须填写。 2、填写datastage或information home目录 如果没有Datastage工具，该项留空不填 3、填写调度节点相关信息，用于安装时与调度节点通信 SRV_PORT端口号为调度节点的EVT_PORT监听端口号（填写任意一个调度节点均 可）。 4、填写物理节点名字PNODE_NAME。以及改物理节点上需要开通的各个服务所占 用的端口号。物理节点名不能重复。 Moia Control 安装手册 北京

23、先进数通信息技术股份公司 - 11 - 3.3.4.2. 执行安装脚本执行安装脚本 配置好install.agt文件后，执行sh install.sh -agt显示配置内容： 确认无误后输入回车进行安装。 3.3.5. 节点执行卸载节点执行卸载 卸载脚本为uninstall.sh，卸载完成后，将删除数据库中执行节点配置相 关数据，并停止执行节点服务。执行节点安装下文件不会删除，可手工进行删 除。 执行节点安装目录执行uninstall.sh，卸载当前的执行节点。 可以在调度节点上执行uninstall.sh，可选择卸载某个执行节点。 卸载脚本为uninstall.sh,直接执行会出现使用方式：

24、 -p-p 直接卸载该物理节点直接卸载该物理节点 Moia Control 安装手册 北京先进数通信息技术股份公司 - 12 - -g-g 向导模式卸载向导模式卸载 在提示输入信息中输入 1 则表示卸载对应节点 Moia Control 安装手册 北京先进数通信息技术股份公司 - 13 - 3.3.6. 多活节点卸载多活节点卸载 使用uninstall.sh p 即可卸载调度节点。需要在其中一 个调度节点执行命令，卸载另外的其他调度节点。 使用条件限制：必须安装两个及以上调度节点才能卸载其中一个，单个调 度节点不能卸载。 3.3.7. 服务进程管理服务进程管理 启动和停止服务进程请使用安装Mo

25、iaControl的用户，禁止直接使用root用 户进行启动。 进入MoiaControl安装目录下，激活环境变量： ./setenv 或者将 env/moia.env作为用户环境变量并激活，才可以执行相关命令。 调度节点启动服务调度节点启动服务 MTaskScan 扫描服务 MTaskDec 调度决策服务 MTaskRes 资源分配服务 MCtrlSrv 作业分发服务 MTimeScan 定时扫描服务 MClmSrv 节点管理服务 MCmdSrv 命令接收服务 MDataSync - 数据同步服务 MAppSend - 状态推送服务 Moia Control 安装手册 北京先进数通信息技术股

26、份公司 - 14 - 执行节点启动服务执行节点启动服务 MCtrlAgt 作业控制服务 MClmAgt 节点代理服务 启动服务命令（启动服务命令（lsmt查询进程信息）查询进程信息） startup.sh 启动服务 调度节点： 执行节点： shutdown.sh 停止服务 调度节点 执行节点 Moia Control 安装手册 北京先进数通信息技术股份公司 - 15 - MSrvAdm 进程查看 命令使用方式： 示例： Moia Control 安装手册 北京先进数通信息技术股份公司 - 16 - 4. 后台服务安装后台服务安装(Java语言版语言版) 4.1. 安装包说明安装包说明 Java

27、版本只适用于安装Agent，适用于Windows、Linux及等AIX操作系统。 安装包名称为： MoiaControl.$版本号_Agent_Java.zip。 4.2. 准备工作准备工作 4.2.1. Java 运行环境运行环境 产品运行需要Java运行环境，建议安装Oracle公司 1.6.0 版本及以上JDK或 JRE。 运行产品需要设置环境变量JAVA_HOME，即：Java安装主目录，如： JAVA_HOME=/usr/java/jdk1.6.0_35JAVA_HOME=/usr/java/jdk1.6.0_35 4.2.2. 运行运行 Datastage 作业相关设置作业相关设置

28、 4.2.2.1. Windows 在Windows下运行Datastage作业，只能安装 32 位Java运行环境。 4.2.2.2. Linux或或AIX 以InformationServer安装在/opt/IBM下为例。 在Linux下，运行Datastage作业需要设置环境变量LD_LIBRARY_PATH。 LD_LIBRARY_PATH=/opt/IBM/InformationServer/Server/DSEngine/lib:/opt/IBM/InLD_LIBRARY_PATH=/opt/IBM/InformationServer/Server/DSEngine/lib:/op

29、t/IBM/In formationServer/ASBNode/lib/cpp:/opt/IBM/InformationServer/ASBNode/apps/proxy/cformationServer/ASBNode/lib/cpp:/opt/IBM/InformationServer/ASBNode/apps/proxy/c Moia Control 安装手册 北京先进数通信息技术股份公司 - 17 - pp/linux-all-x86_64pp/linux-all-x86_64 在AIX下，运行Datastage作业需要设置环境变量LIBPATH。 LIBPATH=/opt/IBM/InformationServer/Server/DSEngine/lib:/opt/IBM/InformatioLIBPATH=/opt/IBM/InformationServer/Server/DSEngine/lib:/opt/IBM/Informatio nServer/ASBNode/lib/cpp:/opt/IBM/Infor