大数据文件传输工具Aspera.ppt

AsperaHigh-speedTransferMovingtheworldsdataatmaximumspeed以最大的速度传输世界的电子资产Aspera的使命新一代传输技术无论文件大小、传输距离及网络状况，都能以最快的速度传输全球的电子资产3致力于数据传输方案的软件技术公司位于美国加利福尼亚创建于2004年，165个员工，现已为IBM公司fasp协议的创建者创新的、专利技术的、高效率的大数据传输技术Aspera的高速文件传输软件套件以fasp协议为核心出色的针对软件及硬件在WAN上文件传输的加速方案在各种WAN传输测试方面排名第一专利:fasp的大数据传输及动态带宽控制技术在美国及其它30个国家已经申请专利，并且在其它32个国家的专利申请正在进行中。增长:2,200以上客户,超过19,000个许可,50%的年增长率。服务的市场:MediaandEntertainment,FederalGovernment,LifeSciences,Healthcare,CloudComputing,SoftwareandGaming,FinancialServices,Legal,eDiscovery,Engineering,Technology,Telecommunications,ServiceProviders,ArchitectureandDesign,EnterpriseIT全球24x7支持。WhoisAspera?TCP及替代技术的挑战距离对网络影响延迟增加丢包率增加快速网络随着距离增加而降低服务质量TCP性能随距离增加而降低吞吐量的瓶颈随着时延及丢包率的增加而变得更加明显TCP的吞吐量没有随着带宽的扩展而扩展TCP的最初设计目的是适应低带宽增加更多的带宽不会提高吞吐量替代技术基于TCP-网络延迟及丢包率必须低UDP-带宽利用率比较低数据缓冲-不适合适用于大量大文件的传输及工作流优化的TCP-提高了TCP的性能，但对于快速网络而言效率还是比较低下数据压缩-对于特定文件而言，时间的消耗及传输效率不受影响CDNs-overhead比较高，并且扩展的成本非常昂贵faspTM优越的性能FTPAcrossUSUSEUUSASIASatellite1GB12hrs24hrs420hrs820hrs10GB1520hrs2040hrsImpracticalImpractical100GBImpracticalImpracticalImpracticalImpracticalfasp2Mbps10Mbps45Mbps100Mbps200Mbps1Gbps1GB70min.14min.3.2min.1.4min.42sec.8.4sec.10GB11.7hrs140min.32min.14min.7min.1.4min.100GB23.3hrs5.3hrs2.3hrs1.2hrs14min.Aspera的传输时间随着带宽的增加而直线增加，与丢包率、时延无关CrossUSAdd1%to5%IntercontinentalAdd1%to10%SatelliteAdd1%to10%TCP的传输时间受制于丢包率、时延（网络距离）而不是带宽6fasP:高性能传输最大速度传输端到端的传输效率及吞吐量优化传输性能与带宽成正比，与传输距离无关，丢包率影响甚微避免拥塞及有效的带宽控制策略自动地、充分地利用可用的带宽资源动态地分配优先级及带宽安全与可靠性以安全的方式实现用户及终端的认证AES-128加密算法，适用于传输过程中加密及落地加密可扩展的管理、监控、控制实时地查看传输进度、性能、带宽使用率详细的传输历史记录、日志非常低的Overhead在30%丢包率的情况下，具备少于0.1%的overhead高性能传输单个大文件及大量的小文件结论最高速度可比FTP快1000倍精确地预测传输时间在并发传输及吞吐量方面具备无可伦比的扩展性7faspTM可适应性的速率控制及管理无语伦比的带宽控制自动地、充分利用可用的带宽资源以一种“公平的”的策略保护其它的网络传输允许TCP“爆发”，可以及时收回可用带宽实时地针对优先级的调整高并发的传输堆栈动态地针对每个正在传输的文件、用户及任务的优先级调整动态地调整并发传输的带宽消耗，为高优先级的传输分配更多的带宽资源全方位的监控机报表实时的传输进度及性能分析实时的带宽使用率详细的传输历史记录及日志8WAN AccelerationAspera fasp主要关注点主要关注点应用级加速及流程控制高速的数据块传输关键特性关键特性降低传输数据YesYes充分利用带宽资源NoYes实时地速率控制NoYes直接与云存储集成NoYes文件类型支持文件类型支持压缩的文件NoYes加密的文件NoYes内容不重复的文件NoYes单个文件传输，方向单一且仅传送一次NoYesFasPvsWANAccelerationProductsoverviewMovingtheworldsdataatmaximumspeedAspera产品家族High-speed transfersfor web,desktop and mobileHigh-speedfiletransferserversforonpremise,private,public,andhybridclouddeploymentsFile sharing,collaboration and exchange applicationsTransfer management,monitoring and automation Scalable,multi-directional,multi-node synchronizationTRANSFERCLIENTSWEBAPPLICATIONSMANAGEMENT&AUTOMATIONSYNCHRONIZATIONTRANSFERSERVERSInnovative,patented,highlyefficientbulkdatatransporttechnology,uniqueandcoretoallAsperaproductsFASPTRANSPORT10AsperaEnterpriseServer统一的文件传输服务器主要功能统一的基础文件传输服务器针对大数据的高速fasp传输企业范围内大数据量内容的获取与分发全面的自动化及定时机制先进的用户及服务器管理全面的监控及报告高可用配置(active/activeoractive/passive)单独部署及云部署(public,private,hybrid)使用场景企业范围内文件传输大量内容的获取高性能地内容分发许可及部署基于带宽能力的销售策略针对AsperaOnDemand基于使用方法的销售策略高可用配置(active/activeoractive/passive)支持多种平台(Unix,Linux,Windows,Mac,Solaris,IsilonOneFS)可以与AsperaClient,Point-to-Point及其它EnterpriseServers集成12AsperaConnectServer具备Web界面的应用平台主要功能基于EnterpriseServer具备Web界面的应用平台提供简单的Portal界面，每个用户可以看到自己的Root目录通过AsperaConnectwebbrowserplug-in传输增强了fasp传输，可以为Shares及faspex的Web应用服务提供丰富的API，与自定义的Web应用集成使用场景基于浏览器的文件交换第三方内容及数据的收集与客户的Web应用集成许可与部署基于带宽能力的销售策略针对AsperaOnDemand基于使用方法的销售策略高可用配置(active/activeoractive/passive)支持多种平台(Unix,Linux,Windows,Mac,Solaris,IsilonOneFS)支持与AsperaConnectbrowserplug-in连接AsperawebPlun-in的自动安装13ASPERAshares全球高效的文件共享主要功能非常容易使用的Web应用，及所有共享内容的统一视图全面与AsperaConnectbrowserplug-in集成，提供高速的、安全的文件传输数据内容可以在enterpriseservers,private,public及hybridclouds上部署强大的安全模型可以实现通过单一的管理界面控制所有共享资源的安全，比如授权、用户管理、访问控制。查询、过滤、排序的功能方便了客户从大量的文件中找到唯一的文件或目录Shares通过一种安全的、灵活的访问控制策略与Asperafaspex的接收、发布功能完全集成使用场景在企业内部数字资产的分发不同团队的协作项目团队与第三方内容或数据收集方的合作全球的，基于浏览器的数据分发14AsperafaspexPerson-TO-Person文件交换与协作主要功能高性能fasp传输全局的person-to-person或基于项目的文件交换与协作使用基于web的界面、email,手机，及桌面客户端易于创建与管理基于文件协作的支持本地及远程的文件资源(on-premiseandcloud)使用场景企业内数字资产的分发不同地理位置的团队协作基于文件的审核、批准及质量保证工作流与外部合作伙伴之间的数字资产交付于协作AsperafaspeX CLIENTOPTIONSBrowser,DESKTOP,mobileandEMAILapps主要功能与fasp,faspex的安全模型集成,通过简单的触发器实现落地文件的加密针对iOS,Android设备的高速传输应用Cargoautomaticdownloadertothedesktop与MicrosoftOutlook集成使用场景远程新闻的收集、上传及发布到中心节点作为工作流的一部分查看、审批图片、视频从email客户端发送大文件或文件目录自动下载最新的内容，并且无延时远程医药图像的查看及诊断15faspexAdd-inforOutlookfaspexApponiPhonefaspexApponiPadCargoDownloader自动利用faspex下载主要功能自动下载faspex包，支持Windows与Mac通过内嵌的加密机制保证文件内容的安全易使用的GUI控制下载内容的自动解密针对每个服务器及账户配置下载目录支持并发下载数量的可配置性针对每个下载任务进行实时的传输速率控制及监控暂停、取消、重新开始、断点续传使用场景继承了person-to-person的文件交付流程，可以利用faspex包的自动下载机制可以从多个faspex服务器收集数据，把所有的下载统一到单一客户端自动下载最新的内容，并且无延时17AsperaConsole全网范围内的传输管理、监控及控制主要功能优先级控制，管理文件传输的速度及带宽使用率集中地配置及管理传输节点浏览及启动远程站点之间、组织之间的传输任务自动化传输，包括定时及分发自定义活动视图、计费报表及通知针对单个文件传输及路径，提供安全的、私有的视图及控制能力开放的架构。可以与业务流程及内容传输工具集成使用场景集中管理、监控及控制所有在企业内的Aspera文件传输活动high-SpeedTransferDirect-to-CLOUDCloudAsperasoftware-ondemandavailableonAWSandWindowsAZURETransferServersOndemandhigh-speedfasptransportto,from,andacrosscloudinfrastructureunlimitedscaleoutwithadditionaltransferserverinstancesBasetransferserver,orWeb-enabledapplicationplatformwithsupportforConnectbrowserplug-inforbrowser-basedtransfersDirectintegrationwithAmazonS3andWindowsAzureBLOBobjectstorageforlinespeedingestWebApplications(AWSOnly)AsperaSharesMulti-nodefileingestandsharing,providesaccesstocontentacrossanylocationwithpowerfulsecurityandaccessmodelAsperafaspexGlobalPerson-to-personfiledelivery,collaboration,andexchangewithadd-hoccontentingestandcontributionOptionalClientsOptionaladd-onstoextendthecontentingestandcontributiontomobiledevicesandemailclientsAvailableforAppleiOSdevices,GoogleAndroid,andMicrosoftOutlookemailclient,aswellasCargoautomaticdownloader19Asperafaspproxy主要功能在苛刻的网络环境中提供安全的、高速的fasp传输保留了fasp高性能的一切特性支持所有Aspera客户端及服务器支持in-bound及out-bound，并且支持认证支持多对多关系及反向代理配置AsperaSync高速同步与复制在WAN上的，跨平台的高速同步与复制软件主要功能高速的，双向的目录与文件同步高扩展性支持大文件及大量的小文件及目录高效率-支持远距离WAN安全符合FIPS140-2平台无关支持Linux与Windows存储无关与任何标准的文件及块存储系统兼容与rsync类似支持include与exclude过滤文件级的数据包冗余删除技术，降低不必要的传输，降低同步时间及降低存储的使用使用场景异地同步及复制，比如存储的迁移、灾备、数据上收等双向的系统镜像，比如数据内容的可替换性访问Hub及spoke同步，针对高速的内容收集及分发Scalable,multi-directional,multi-node synchronizationSYNCHRONIZATION22DisasterRecovery/BusinessContinuityReplicatemissioncriticaldatafromaprimarysitetooneormorealternatesitesSystemsremainavailableafterasystemoutageorsiteloss-criticaldataispreservedSyncUsecasesContentDistribution/SystemMirroringAutomaticallyreplicatedigitalcontentfromonesystemtoanotherContentisalwaysavailable,offeringhighavailabilityoftheserviceHubandSpokeforCollectionorDistributionDailycollectionordistributionofdataacrossalargenetworkofendpointsContinuousupdateofonlinecontent,softwareandmediaDataMigrationforDiverseStorageEnvironmentsReplicateentirefilesystem,orportionsofthefilesystemPreservefileattributessuchaspermissions,accesstimes,ownership,etc.PrimarySiteAlternateSitePrimarySiteAlternateSiteWebApplication22OrchestratorAutomatedWorkflowPlatform24Orchestrator-OpenPlatform3rdPartyLibraryFreetoOrchestratorUsersTranscodingVideo Quality ControlMediaInfoDatabase/StoresAntivirusAd Insertion&Media ManagementEmailImage ManipulationWatermarkingEncryptionFile TransferImageMagikMedia ManagementIT ManagementFTP/SFTPSCP25ASPERA开发者网络CompletesetofSDKswithguides,referenceinformation,andsamplecodeforintegratingAsperatechnologyintointodesktop,network-based,andwebapplicationsinplaceofFTP,HTTP,orcustomTCP-basedcopyprotocolsusingC+,Java,JavaScript,or.NET.ASPERAMOBILEAPIsAndroidSDKAsperaAndroidSDKprovidesaJavaAPItotransferfilesusingfasp-AIR.iPhoneSDKAsperaiPhoneSDKwithObjectiveCAPItotransferfilesusingfasp-AIR.ASPERAAPPLICATIONAPIsfaspexWebAPIAsetofservicesthatenablesuserstocreateandreceivedigitaldeliveriesviaaWebinterface,whiletakingadvantageoffasphigh-speedtransfertechnology.ASPERATRANSFERAPIsAsperaWebServicesASOAPbasedwebserviceAPIthatallowsinitiation,monitoringandcontrollingoffaspbasedfiletransfers.ConsoleAPIFullprogrammaticmanagementoftransfersessionsincludinginitiation,queuing,managementandcontrolthroughaRESTfulAPI.SharesAPIFullprogrammaticcontroloverbrowsingShares,transferauthorization,andupload/download.ASPERABROWSERAPIsConnectJavaScriptAPIJavaScriptAPIexposedbyAsperaConnectforintegrationoffaspbasedfiletransfersintowebapplicationsforacompletein-browserexperienceAsperaMulticastSDKAJavaclasslibraryforinitiationandmanagementofIPmulticastbaseddatatransmissionsusingAsperafasp-MC.faspManagerAclasslibrarythatallowsintiations,monitoringandcontrollingoffaspbasedfiletransfers.CustomerCasestudiesWithover23millionstreamingmembersglobally,NetflixdeliversstreamingmoviesandTVshowstoover700differentdevicesPCs,internet-connectedTVs,gamingconsoles,tabletsandsmartphones.Solution:Withover50terabytesofnewcontentamonthfromover200globalpartners,NetflixusesAsperaOnDemandDirect-to-S3technologytomove,processandstorecontentinAmazonWebServicesS3storage.Benefit:High-speedfasptransfersdirecttoS3storageallowNetflixtoleveragetheextremescalabilityofAWS,eliminatingtheneedtobuilditsowndatacentersandenablingondemandcomputecapacitycontrol.UniversalPicturesproducesmajormotionpicturessuchas“Battleship”and“SnowWhite”massiveprojectsrequiringanarmyofpartnersandfacilitiesseamlesslyworkingtogethertodeliveratop-notchfinalproduct.Solution:High-speed,reliableandsecureexchangeofdailypost-productionmediafiles(15-30GBeach)betweenmultiplecompaniesaroundtheglobeusingAsperafaspex.Benefit:Easy-to-usefiletransfersolutionthatsdeployedinhours,notweeksandreal-timecollaborationbetweengeographicallydistributedteamsleadingtosignificantreductioninproductioncycletimes.BGI,theworldslargestgenomicsresearchinstitute,producesthousandsofgenomesaday.Usingharddrivestosenddatatocustomersandpartnershadprovenexpensive,error-proneandtimeconsuming.Solution:BGIintegratedAsperasfasphigh-speedtransfertechnologyintoits“EasyGenomics”cloud-basedbioinformaticsserviceanddeployedAsperaConnectServerforhighspeedsequencingdatadeliveryservice.Benefit:Withfastcloudtransfers,EasyGenomicstakesadvantageofunlimitedparallelcomputingofferedbythecloudandAsperasrichAPIsenabledtheintegrationofhigh-speedtransfersdirectlywithinEasyGenomicswebportal.AT&TU-versedeliversadvanceddigitalTV,high-speedInternet,anddigitalhomephoneservicetogetheroverstateoftheartfiberoptictechnologyandcomputernetworkingasafullyintegratedexperience.Solution:High-speeddigitalfiletransfersofadcontentfromsponsorsintoanend-to-endfullyautomatedad-ingestandfile-basedworkflowthatverifies,schedules,andconfirmsdeliveryandbroadcast.Benefit:“Lightsout”automationenableslargescaleadingest,withhighreliabilityandservicelevelsdrivingincreasedadrevenueandmoresponsorsatsignificantlyloweroperationalcosts.27Aspera合作伙伴CLOUDMEDIAService and Technology Storage2728fasp软件环境ThankYou