银行金融领域数据大集中之路.pptx

《银行金融领域数据大集中之路.pptx》由会员分享，可在线阅读，更多相关《银行金融领域数据大集中之路.pptx（44页珍藏版）》请在淘文阁 - 分享文档赚钱的网站上搜索。

1、内容提要内容提要数据大集中的背景工行数据大集中的建设历程数据大集中过程中的关键技术及难点工行数据大集中带来的好处工行实施数据大集中后面临的挑战及对策第1页/共44页数据大集中的背景数据大集中的背景 为什么要实施数据大集中?数据大集中的前提条件第2页/共44页 为什么要实施数据大集中为什么要实施数据大集中客客户户需需求求经经济济全全球球化化行行业业竞竞争争技技术术进进步步外部驱动力第3页/共44页 为什么要实施数据大集中为什么要实施数据大集中公公司司治治理理经经营营管管理理风风险险控控制制成成本本控控制制内部驱动力业业务务拓拓展展安安全全运运行行第4页/共44页 为什么要实施数据大集中为什么要实

2、施数据大集中n业务驱动：业务发展和创新速度不断加快，新业务的技术实现和市场化速度要求越来越快n技术驱动：软硬件产品成熟度以及通讯网络质量稳定性不断提高，一个集中、统一、整合的技术平台可以更好地为业务发展与创新提供强有力的支持，可以更好地为客户提供统一服务水平和质量的标准化服务n管理驱动：成本、效益、质量、风险管理；企业内部变革和管理流程再造，要求全面打造决策支持、经营管理、业务操作三个层面的企业核心竞争力n服务驱动：真正实现“以客户为中心”，借助于先进的技术手段“不断拓展新的服务渠道”，为客户提供优质高效的服务第5页/共44页 为什么要实施数据大集中为什么要实施数据大集中关键要素关键要素分行独

3、立运行模式分行独立运行模式数据大集中模式数据大集中模式应用开发分散开发：需求不统一全国推广：速度慢异地互联：环节多版本控制：难度大统一规划统一设计统一开发统一应用推广生产运行技术平台不统一，运行维护管理难度高应用程序处理环节多，效率低对外服务质量和水平参差不齐不便于实现标准化、规范化的生产运行管理技术和应用平台标准化服务水平和质量标准化生产运行操作标准化、自动化生产运行管理的规范化、程序化、制度化管理服务客户和数据分散，不便于集中统一管理处理环节多，时效性、准确性差统一集中的客户信息和经营数据存储与处理为经营管理和业务决策提供及时准确的服务成本管理分散投资，资源不能实现有效共享大量重复性建设造

4、成投资的巨大浪费集中投资实现投资效益最大化集中采购实现采购成本最低化集中建设实现资源共享最优化风险管理分散管理，风险控制能力低，系统可用率低集中管理，风险防范能力高，高可用性管理综上所述：企业规模越大，实施数据大集中的紧迫性越高，效益越显著，但实施的难度也越大。第6页/共44页 数据大集中的前提条件数据大集中的前提条件n技术方面n管理方面n业务方面n项目管理第7页/共44页 数据大集中的前提条件数据大集中的前提条件n技术方面n高可用性技术平台设计n选用成熟可靠的软硬件产品n关键资源的冗余配置设计n快速高效的故障恢复能力n应用体系的配套改造n可靠的外部基础设施支持n选用两家以上电信运营商提供网络

5、接入n确保外部双路供电，UPS及自备发电机的强有力基础设施保障n必要的外部产品和技术支持服务n产品维护和二线技术支持n生产问题和重大故障的现场支持n通过合同确保服务的水平和质量第8页/共44页 数据大集中的前提条件数据大集中的前提条件n管理方面n管理流程的标准化、规范化、制度化n运行操作流程的标准化和自动化n配套管理制度的建立和修订，有效防范各类风险n做好科技队伍建设和人才培养n业务方面n实现业务需求的统一归口管理n业务流程再造与技术平台集中建设的协调发展n项目管理n建立强有力的项目管理组织体系，确保各项工作的有序开展n统筹规划、分布实施n充分的测试和必要的验证n重点做好风险控制和应急处理机制

6、，最大程度上减少项目实施对客户的影响第9页/共44页工行数据大集中的建设历程工行数据大集中的建设历程中国工商银行简介信息系统规模IT战略历程第10页/共44页n中国最大及最具影响力的商业银行n截至2004年末：u资产总额近57000亿元人民币，占中国境内银行业金融机构资产总和的18%，位居中国第一。u全年经营利润达746亿元，位居中国第一。u英国银行家杂志按一级资本排序，名列全球1000家大银行的第25位，连续五次入围美国财富全球500强。中国工商银行简介中国工商银行简介第11页/共44页n中国信息化建设领先的银行n截至2004年末：u信息化建设水平均处于国内领先地位和国际先进水平。u国内率先

7、实现全国数据大集中的商业银行。u国内率先实现千公里级最高安全等级异地灾难备份系统。u国内信息化建设水平最高、电子化覆盖全行的商业银行。u中国电子银行和网上银行规模最大和发展最快。2004年电子银行交易额达38.44万亿元，网上银行交易额34万亿元。连续三年被国际主流媒体评为中国最佳网上银行。行业信息系统领导者行业信息系统领导者第12页/共44页信息系统规模信息系统规模数据中心7x24x36521000个营业网点3400万笔联机交易/天 17000台ATM230 万笔存取款交易/天80000台POS 63万笔交易/天674万信用卡11000万借记卡280万笔交易/天消费金额160亿/月1100万

8、网上银行个人客户85万笔交易/天15.35万网银企业客户31万笔交易/天电话银行客户1818万户71万笔交易/天第13页/共44页n15800MIPS生产主机处理能力（two sysplex)n100T生产存储容量（主机）n近千台开放系统服务器n千公里级异地主机灾备系统（北京/上海）n系统运行状况u主机系统可用率达99.95%。u系统高峰时间交易率超过1000笔/秒/1 sysplex。u主机系统交易平均响应时间约0.1秒。信息系统规模信息系统规模第14页/共44页信息系统主要配置主机侧硬件主机侧硬件开放平台侧硬件开放平台侧硬件主机生产环境使用 IBM的Z990主机2084-B16高、中、低端

9、UNIX服务器（SUN、IBM）测试、灾备环境IBM的Z900-110、9672-ZZ7、9672-ZY7等 高、中、低端PC服务器（SUN、IBM、HP）生产、灾备环境主要采用IBM 磁盘磁 盘 机（HDS、HP、EMC、IBM）测试、研发、数据交换平台环境采用了IBM、HDS、EMC等不同公司的磁盘磁带机（STK、HP），交换机（CISCO、BROCADE）等第15页/共44页整合后主机灾备架构整合后主机灾备架构第16页/共44页生产生产系统系统PrimaryPrimary(24TB)(24TB)SDMSDM系统系统SecondarySecondary(24TB)(24TB)Tertiar

10、yTertiary(24TB)(24TB)恢复恢复系统系统生产中心生产中心灾难灾难/测试中心测试中心CNTCNTCNTCNTFlashcopyFlashcopy测试测试Test DasdTest Dasd(30TB)(30TB)Sys+TempSys+Temp(6TB)(6TB)TempTemp(6TB)(6TB)主机系统灾备架构主机系统灾备架构XRC/FICONXRC/FICON第17页/共44页办公用户网办公用户网Extranet接入网Extranet接入网GEGSRGSR2.5G2.5GGE数据中心（主）数据中心（备）15454154546509FireWall6509FireWall业

11、务内网业务内网ATM线路1（10M）ATM线路2（10M）业务内网二级分行拨号线ATM终端服务器ATM直连ATM营业网点DDN专线Extranet接入网一级分行二级分行拨号线ATM终端服务器ATM直连ATM营业网点DDN专线办公/业务内网一级分行ATM线路2（20M）ATM线路1（20M）ATM2（4M）ATM1（4M）ATM2（6M）ATM1（6M）测试网业务内网测试网Extranet接入网办公/业务内网工行全国网络系统连接图第18页/共44页 经营分析型应用 业务管理应用架构应用架构客户关系企业级数据仓库财务管理 风险管理资产管理绩效管理人力资源 资产管理 内部管理办公管理科技管理第19页

12、/共44页说明：报文 文件 总行（数据中心）系统整体架构系统整体架构 ATMPOS自助终端Internet电话邮件及应用服务IE浏览器NoteClient档案后督报表报送分行数据平台分行外连前置合作伙伴方（前置）总行外连前置企业级数据仓库文件传输平台统一认证总行业务大前置办公管理 通用报文交换平台分行综合大前置文件传输平台总行数据平台 电子银行 业务管理 核心业务处理企业级客户信息 柜员终端第20页/共44页n用创新、灵活和成熟的技术方案支持银行的成长n以稳定、安全、高效和可靠的IT结构提供具有竞争力的业务运行环境n建立一支具有核心研发能力和管理世界级数据中心的技术和运行团队n实现由集中式信息

13、系统向单一管理视图的高度集成的简约的信息系统的演变IT 战略战略第21页/共44页银行需求技 术架构标准及流程业务方案员工技能培养平台和工程业 务部门客户项目定义与业务案例开发集成运行支持IT 战略战略 ICBC IT价值链第22页/共44页工行信息化建设发展历程工行信息化建设发展历程技术体系从分散到集中n1996年，从县支行到地市行，再到省分行和总行，共拥有几千个计算中心。n1999年大机延伸工程竣工后，全行数据中心数目减少为47个。n2002年10月，数据集中工程提前两年竣工，北京、上海两大集中式数据中心全面投入使用，承担全行核心银行系统的运行任务。n2004年9月，通过数据中心整合工程的

14、实施，数据中心（北京）主机生产系统顺利迁移至上海，全行生产运行管理集中到数据中心（上海）。n在2005年，完成全行生产、灾备、测试、研发体系建设和组织机构调整工作，最终实现全行科技一体化管理。第23页/共44页 数据大集中建设历程数据大集中建设历程-人员组织人员组织n科技一体化管理体系n科技管理流程价值链第24页/共44页全行科技一体化管理体系全行科技一体化管理体系数据中心（上海）一级分行信息科技部（处）总行信息科技部软件开发中心研发部数据中心（北京）一级分行信息科技部（处）二级分行科技科二级分行科技科总行总行业务部门一级分行业务部门海外数据中心海外分行第25页/共44页科技管理流程价值链科技

15、管理流程价值链北京上海珠海、广州等北京规划分析设计开发集成交付生产运行北京软件开发中心上海一级分行数据中心整合以后各机构在软件价值链中的作用第26页/共44页n制度n标准n规范n培训n顾问服务建立了以生产运行管理、科技项目管理、科技行政管理三条主线的制度体系。通过管理制度、技术标准、操作规范实现了对管理、技术和操作三个层面风险的有效防范。数据大集中建设历程 制度流程第27页/共44页n管理办法与实施细则u问题管理u变更管理u安全管理u应急管理u操作管理u数据管理u机房管理u性能管理u网络管理u变更测试u计算机资源管理u科技档案管理u考核管理信息制度生产运行管理制度范信息制度生产运行管理制度范例

16、例第28页/共44页 重点工程建设情况介绍n大机延伸工程（1996-1999）n数据集中工程（1999-2002）n全国骨干网络改造工程（2003）n数据中心灾备工程（2003）n企业总控中心工程（2003-2004）n数据中心整合工程（2004-2005）n应用系统开发与推广n核心业务系统n综合业务管理系统（2002年5月）n全功能银行系统（2003年11月）n经营管理与决策支持系统n信贷管理系统n综合报表统计系统nn电子银行n网上银行/一体化电话银行系统/工程规划设计与实施：思路清晰、统筹规划、分布实施、组织有力、执行到位。第29页/共44页数据大集中过程中的关键技术及难点 关键技术应用

17、主要难点第30页/共44页 关键技术应用关键技术应用n高可用性系统结构设计n系统：并行耦合体（Parallel Sysplex）技术n联机应用：CICSPlex技术n数据库：数据共享（DataSharing）技术n网络：负载均衡技术n操作管理和维护自动化n并行批量处理系统（OPC）n系统网络自动化监控系统（Netview/SA/Openview）n7*24小时不停机系统维护n生产备份系统建设n主机异地灾难备份系统（RTO2小时，RPO2分钟）n远程异地磁带库备份系统nN+1/HA/Workload balance备份系统第31页/共44页 关键技术应用关键技术应用n数据迁移技术nPPRC/XR

18、C/PPRCXD/SRDF技术的合理使用n应用系统分层负载均衡技术nCMC/TOR/AOR/FOR(DB)第32页/共44页 主要难点主要难点n系统建设容量和规模大，系统复杂度高，新技术应用多，没有可借鉴成功经验，外部技术支持和服务环境不成熟n涉及系统多、范围广、环节多，项目管理和风险控制难度大n如何实现平稳迁移、最大限度地减少停机时间，是工程组织和技术水平的一个挑战和难点n与技术体系建设的高水平相比，科技人员管理和技术水平的提高相对滞后，风险意识需要进一步加强n技术体系和组织结构的快速变化，对制度体系建设的时效性和适应性要求更高第33页/共44页 主要难点主要难点n非规范数据的整理清洗转换迁

19、移和加载(可控的停机时间)n新旧系统的混合运营n业务员工操作技能和管理技能调整培训n端对端的集成测试和压力测试第34页/共44页工行数据大集中带来的好处工行数据大集中带来的好处n统一的技术平台和服务水平管理，实现了“以客户为中心”的服务理念，更好地为客户提供全天候全地域高质量的标准化服务。n通过实现应用产品的四统一，大大缩短了应用开发和推广的周期，提高了应用产品市场化的速度和质量。n通过数据的集中存储和处理，实现了客户信息的集中统一管理，通过技术手段实现了对全行业务操作的集中授权管理，实现了对经营管理的硬控制，为全行决策支持提供了及时、准确、高效的信息化服务。n通过全行科技一体化体系的建立，实

20、现了全行科技管理和技术的优势资源的高度集中，可以更好地为业务发展和创新服务。n大大降低了整个信息系统的运维和管理成本n为业务系统的整合级流程再造提供了稳定的技术平台第35页/共44页n银行业务和管理处于重大变革和转型期u需求的不稳定性（尚未形成稳定的业务体系）u组织的不稳定性（正在变革的治理结构）u技术架构的不稳定性（正在进行中的系统重构和整合）n复杂庞大的信息系统规模u15000MIPS主机和100T需有效管理的数据u需要管理由数以百计的开放系统服务器组成的几十个分布式应用系统u始终处于高负荷运行中的信息处理平台n外部支持单位和业务合作伙伴的有效合作u技术产品供应商缺乏有效及时的服务u业务合

21、作伙伴技术体系的不完善数据大集中后面临的挑战及对数据大集中后面临的挑战及对策策第36页/共44页nIT部门尚未形成稳定的管理框架和运作流程n技术管理团队缺乏成熟的技术和管理技能n大量的高密度的技术变更n计划内停机的有效控制和减少n高度集成的应用系统和集约化的研发体系与区域客户差异化服务需求的矛盾数据大集中后面临的挑战数据大集中后面临的挑战第37页/共44页数据大集中后面临的挑战数据大集中后面临的挑战系统故障分类统计u硬件和系统平台原因 55%55%这些原因在开发、测试系统均未发生，均由于硬件系统热备份失效，PTFPTF缺失，容量参数评估不足引起u应用软件原因 17.5%17.5%集成测试不足，

22、问题经常重复发生（问题未有效解决或解决方案未形成规范文档）u管理原因 27.5%27.5%系统监控不及时，技术人员技能不足，变更文档不完整，缺乏有效的应急操作手册和回退方案大多数问题由于前一天晚间系统变更引起第38页/共44页对策对策n系统思维u提高整个系统的可用性必须从涉及IT价值链的各个环节整体分析规划入手，找出关键失效因素n分步实施u如何利用有限的资源先解决关键问题n风险和成本的最佳平衡第39页/共44页对策对策n实施各中心功能定位优化计划u对各数据中心和开发中心就设计、开发、测试、运行、支持、灾备等功能进行重新定位，理顺技术架构和管理流程n在系统设计时严格遵循以下原则u没有单点故障u更

23、强调系统的横向扩展性（更多的LPAR而非更大的LPAR)u动态系统维护u多对多的系统连接u负载均衡技术和动态路由技术等等u在系统恢复技术中考虑突发问题n加强变更管理u将各类技术变更固定安排在每周六晚进行第40页/共44页对策对策n平台标准化工作，减少系统复杂性，提高可维护性u对开放平台（特别是B/S结构）进行软应件平台标准化n建立各类技术标准和管理流程u科技项目管理办法u信息系统生产运行管理制度（基于ITIL）u信息系统安全体系规范（基于BS7799)n建立技术管理支撑平台（ECC）u项目管理u资源管理u网络管理、存储管理、集中监控u问题管理、变更管理、应急管理 u知识库管理第41页/共44页对策对策n数据中心进行ISO9000认证n开发中心进行CMM认证n引进国外技术和管理专家团队进行顾问服务n输送管理人员和技术骨干到国外大型数据中心实习培训n合理分布应用体系,建立分行级中间业务平台和数据交换平台第42页/共44页谢谢!欢迎提问欢迎提问第43页/共44页感谢您的观看！第44页/共44页