网格计算讲座幻灯片.ppt

《网格计算讲座幻灯片.ppt》由会员分享，可在线阅读，更多相关《网格计算讲座幻灯片.ppt（28页珍藏版）》请在淘文阁 - 分享文档赚钱的网站上搜索。

1、网格计算讲座网格计算讲座第1页，共28页，编辑于2022年，星期二2主要内容主要内容一、计算的乌托邦二、网格计算的核心技术l高性能调度技术l资源管理技术l网格安全技术三、网格的体系结构四、网格计算技术的商业应用五、网格计算技术在科学计算领域的应用六、网格国内外研究情况第2页，共28页，编辑于2022年，星期二引言：引言：l网格作为一种能带来巨大处理、存储能力和其他IT资源的新型网络，可以应付临时之用。网格计算通过共享网络将不同地点的大量计算机相联，从而形成虚拟的超级计算机,将各处计算机的多余处理器能力合在一起，可为研究和其他数据集中应用提供巨大的处理能力。有了网格计算，那些没有能力购买价值数百

2、万美元的超级计算机的机构，也能利用其巨大的计算能力。3第3页，共28页，编辑于2022年，星期二4一、计算的一、计算的“乌托邦乌托邦”？Gartner公司的Rob Batchelder认为，网格的构想一直是计算领域的“乌托邦”，在科技应用上虽有巨大前景，但最大的缺陷是缺乏明显的商业应用。自20世纪90年代在欧美出现以来，网格主要被用于帮助分散的大学研究人员分析粒子加速器和巨型望远镜的数据。但在过去的两年中，网格的概念和Globus Toolkit已在研究和教育领域得到广泛应用，数十项全球性的大项目采用这些技术，以挑战科学计算中的海量计算问题。基因研究是网格技术的自然应用，这一领域所需的投资很难

3、由一家企业来承担，生物科技企业可用网格技术来分析基因数据;医生可以用网格技术制作出病人器官的三维模型，作为诊断疾病的辅助手段。其他行业，如航空、保险、运输和国防，也会从中受益。如此看来，网格计算并非是可望不可及的乌托邦，其商业应用的广阔前景就在眼前。第4页，共28页，编辑于2022年，星期二5二、网格计算的核心技术二、网格计算的核心技术l为解决不同领域复杂科学计算与海量数据服务问题，人们以网络互连为基础构造了不同的网格，有代表性的如计算网格、拾遗网格、数据网格等，它们在体系结构和需要解决的问题类型等方面不尽相同，但都需要共同的关键技术，主要有如下几种:第5页，共28页，编辑于2022年，星期二

4、6l高性能调度技术高性能调度技术 在网格系统中，大量的应用共享网格的各种资源，如何使得这些应用获得最大的性能，这就是调度所要解决的问题。网格调度技术比传统高性能计算中的调度技术更复杂，这主要是因为网格具有一些独有的特征，例如，网格资源的动态变化性、资源的类型异构性和多样性、调度器的局部管理性等。所以网格的调度需要建立随时间变化的性能预测模型，充分利用网格的动态信息来表示网格性能的波动。在网格调度中，还需要考虑移植性、扩展性、效率、可重复性以及网格调度和本地调度的结合等一系列问题。第6页，共28页，编辑于2022年，星期二l资源管理技术资源管理技术 资源管理的关键问题是为用户有效地分配资源。高效

5、分配涉及到资源分配和调度两个问题，一般通过一个包含系统模型的调度模型来体现，而系统模型则是潜在资源的一个抽象，系统模型为分配器及时地提供所有节点上可见的资源信息，分配器获得信息后将资源合理地分配给任务，从而优化系统性能。7第7页，共28页，编辑于2022年，星期二l网格安全技术网格安全技术 网格计算环境对安全的要求比 Internet的安全要求更为复杂。网格计算环境中的用户数量、资源数量都很大且动态可变，一个计算过程中的多个进程间存在不同的通信机制，资源支持不同的认证和授权机制且可以属于多个组织。正是由于这些网格独有的特征，使得它的安全要求性更高，具体包括支持在网格计算环境中主体之间的安全通信

6、，防止主体假冒和数据泄密；支持跨虚拟组织的安全；支持网格计算环境中用户的单点登录，包括跨多个资源和地点的信任委托和信任转移等。8第8页，共28页，编辑于2022年，星期二9l如何统一视图如何统一视图;l如何统一访问如何统一访问;l如何统一存储如何统一存储;l如何统一管理如何统一管理;l如何分布处理如何分布处理;l如何按需服务。如何按需服务。第9页，共28页，编辑于2022年，星期二10三、网格体系结构三、网格体系结构l分层模型l沙漏结构lOGSA第10页，共28页，编辑于2022年，星期二11111、沙漏（、沙漏（详细构成）详细构成）工具与应用目录代理诊断与监控等资源与服务的安全访问 应用层汇

7、聚层资源与连接层 各种资源，比如计算机，存储介质，网络，传感器等 构造层 第11页，共28页，编辑于2022年，星期二1212特定构造层资源及其功能特性构造层资源举例 功能特性 计算资源启动程序，监控和控制进程的执行，控制进程资源分配的管理机制，提前预留机制，查询功能.存储资源存放与获取文件的机制，第三方高性能传输方式，读写文件子集机制，远程数据选取与归约机制，对分配用于数据传输资源的控制管理机制，提前预约机制，查询功能.网络资源对网络传输资源的管理机制，查询功能（用来得到网络特性和负载）.代码库源代码和目标代码管理机制，比如CVS控制系统.目录目录查询与更新操作机制，比如关系数据库第12页，

8、共28页，编辑于2022年，星期二1313连接层安全认证特性特点描述单一登陆用户只需登陆一次，就可以以该身份访问不同的构造层网格资源，不需要对不同的资源多次重复登陆，也不需要用户进一步介入.代理用户必须有让程序以自己身份运行的能力，因此程序就能够访问用户认证的不同资源.该程序还能够有条件将它的部分权限授予另一个程序（受限制的代理）.与局部安全方法的集成不同的资源可以使用其局部的安全方案，但是网格安全方案必须与那些局部的方案进行互操作.不要求网格安全方案完全代替局部安全方案，但是它必须能够实现向局部安全的映射.基于用户的信任机制用户可以使用多个提供者提供的资源，但并不是要求资源提供者在安全环境中

9、协同操作或互操作.即如果一个用户有权使用站点A和B的资源，用户能够将A和B的资源结合起来使用，并不要求A和B的安全管理相互作用.第13页，共28页，编辑于2022年，星期二1414资源层的协议类型与描述协议类型描述信息协议得到资源的结构和状态信息，比如配置，当前负载，使用策略等.管理协议通过判断访问共享资源，指出资源需求以及执行的操作.初始化共享关系，保证要求的协议操作与底层共享资源提供的共享策略一致.还要考虑记账和付费的问题，协议还可能需要具有监控操作的状态并控制某些操作的功能.第14页，共28页，编辑于2022年，星期二1515汇聚层服务和协议服务与功能名称描述目录服务允许虚拟组织参加者发

10、现存在的资源或者是存在的资源的特性，允许用户根据名字或者属性来查询资源.协同分配，调度以及代理服务允许虚拟组织参加者申请一个或者更多的资源，并且在相应的资源上进行任务调度.监控和诊断服务用于监视虚拟组织资源的失败，恶意的攻击，入侵检查，过载等等.数据复制服务支持虚拟组织存储，网络与计算的管理，按照响应时间，可靠性，费用等标准优化数据访问性能.网格支持下的编程系统可以才网格中提供熟悉的编程模型，使用不同的网格服务解决资源发现，安全，资源分配以及其它问题.负载管理系统与协同分配工作框架提供描述，使用以及管理多步，异步以及多组件工作流.软件发现服务基于求解问题的参数发现和选择最好的软件实现和执行平台

11、协作服务用于潜在较大的用户社团内的协同交换信息，包括同步和异步两种方式.第15页，共28页，编辑于2022年，星期二1616五层结构应用应用层多科学模拟VOD系统汇聚层（面向问题）联合求解器，分布式数据文档检查点，作业管理，故障避免，负载均衡汇聚层（通用）资源发现，资源代理，系统监控，社团授权，收回证书资源层访问计算，访问数据，访问系统结构，状态与性能信息连接层通信（IP），服务发现（DNS），认证，授权，代理构造层存储系统，计算机，网络，代码库，目录第16页，共28页，编辑于2022年，星期二17172、开放网格服务体系结构、开放网格服务体系结构OGSA （Open Grid Service

12、s Atchitecture）l五层沙漏结构以协议为核心;l强调资源共享-具体资源服务;l开放网格服务体系结构OGSA以服务核心;l服务包括计算资源、存储资源、网络、软件等；l一般意义上的服务，即服务共享；第17页，共28页，编辑于2022年，星期二18183、OGSA支持技术支持技术lGlobus Toolkit;l是一种用于构建计算网格的开放体系结构、开放标准的项目。Globus Toolkit工具包来源于Globus项目，是一个开放源码的网格的基础平台，基于开放结构、开放服务资源和软件库，并支持网格和网格应用，目的是为构建网格应用提供中间件服务和程序库。lWeb ServiceslXML

13、（可扩展置标语言）lSOAP（简单对象访问协议）lWSDL（网页服务描述语言）lUDDI（一种目录服务）第18页，共28页，编辑于2022年，星期二1919服服务务登登记处记处服务请求者(如用户应用程序)工厂服工厂服务务要求服要求服务务网格服务处理资资源配置源配置服服务实务实例例注册服务发现发现服服务务交互标准化使用WSDL服服务务数据保持有效数据保持有效通知服务调用通知服务调用身份验证和授权是适用于所有的请求OGSA服务服务第19页，共28页，编辑于2022年，星期二20四、网格的商业应用四、网格的商业应用l生物医学：网格可提供药品开发人员所需的计算能力，用以研究药物和蛋白质分子的形态与运动

14、。l工程：波音、福特、bmw公司都在尝试用网格计算进行复杂的仿真与设计。l数据搜集/分析：制造、石油加工、货物运输、甚至零售企业都要维护昂贵的设备，时常会出现问题，造成不好的结果。同无线传感器一样，网格能够存储和处理所有交易。l娱乐产业：特殊效果设计。第20页，共28页，编辑于2022年，星期二21五、网格计算技术在科学计算领五、网格计算技术在科学计算领 域的应用域的应用l分布式超级计算分布式超级计算 网格计算可以把分布式的超级计算机集中起来，协同解决复杂的大规模的问题。使大量闲置的计算机资源得到有效的组织，提高了资源的利用效率，节省了大量的重复投资，使用户的需求能够得到及时满足。第21页，共

15、28页，编辑于2022年，星期二l高吞吐率计算高吞吐率计算 网格技术能够十分有效地提高计算的吞吐率，它利用CPU的周期窃取技术，将大量空闲的计算机的计算资源集中起来，提供给对时间不太敏感的问题，作为计算资源的重要来源。l数据密集型计算数据密集型计算 数据密集型的问题的求解往往同时产生很大的通讯和计算需求，需要网格能力才可以解决。网格可以药物分子设计、计算力学、计算材料、电子学、生物学、核物理反应、航空航天等众多的领域得到广泛的需求。22第22页，共28页，编辑于2022年，星期二l基于广泛信息共享的人与人交互基于广泛信息共享的人与人交互 网格的出现更加突破了人与人之间地理界线的限制，使得科技工

16、作者之间的交流更加的方便，从某种程度上可以说实现人与人之间的智慧共享。l更广泛的资源贸易更广泛的资源贸易 随着大型机的性能的提高和微机的更加普及，及其资源的闲置的问题也越来越突出，网格技术能够有效地组织这些闲置的资源，使得有大量的计算需求的用户能够获得这些资源，资源的提供者的应用也不会受到太大的干扰。需要计算能力的人可以不必购买大的计算机，只要根据自己的任务的需求，向网格购买计算能力就可以满足计算需求。23第23页，共28页，编辑于2022年，星期二24六、国内外研究情况（国外）六、国内外研究情况（国外）l“I-way（Information Wide Area Year）”:experime

17、nt at 1995 Supercomputing conference(SC95),using 17 sites across the US running，“I-way”开发了资源调度，lFAFNER(Factoring via Network-Enabled Recursion):建 立 对RSA130分 解，要 求 机 器=4MB工作站即可。at 1995 Supercomputing conference(SC95)第24页，共28页，编辑于2022年，星期二25lGlobus：建一个 计算网格，提供一个Globus工具。lLegion:始于1993，目的是构造一个元计算环境，基于对

18、象的“元系统，由Viginia大学开发，提供了一种软件基础设施，通过它 可以 实现 异构、地理分布的高性能计算系统的无缝交互。该项目孵化了一个新公司称为 Applied Meta，目前为，目前为Avaki，提供商业化的网格解决方案第25页，共28页，编辑于2022年，星期二26leScience英国关于网格重要研究计划，主要用于科学协作计算的仿真。lNimrod Monash University，澳大利亚，始于1994，将许多很类似的计算分布到局域网的计算机上lUNICORE，德国的研究项目，始于1997，目的是将德国的超级计算中心进行集成lCondor,University of Wisc

19、onsin,始于1988，目的是共享一个系里的计算资源.Condor-G是将GlobusToolkit中的某些工具集成后的新版本。第26页，共28页，编辑于2022年，星期二27六、国内外研究情况（国内）六、国内外研究情况（国内）l元计算技术-1998 l863元计算系统课题-1999l在国内，有三个最大的网格项目l863计划支持的中国国家网格（CNGrid)-1999;l教育部项目“中国教育科研网格计划ChinaGrid”-2000;l自然科学基金支持的e-Science。l“十一五”计划-网格课题l其他:l中国国家气象网格l遥感图像处理网格l空间信息栅格l.l企业网格计划-中国网通/中国电信第27页，共28页，编辑于2022年，星期二 结束！结束！28 谢谢！谢谢！第28页，共28页，编辑于2022年，星期二