阿里云弹性计算-陈波-14届泰山论坛.ppt

1阿里云弹性计算陈波2分而治之的局面 业务视角3分而治之的局面 技术视角公司里大大小小十多个Hadoop集群独立地在运行；各式各样的分布式存储与缓存服务，百花齐放；某客户需要的存储达10-50PB，需要30008000台服务器，但这里面大部分数据都是“休眠”的；4统一技术平台的想法将几千台PC组成一台“超级计算机”存储：一块10PB级别的硬盘轻松存放10B网页几十万人，每人百G云空间计算：一台万核以上的机器一个月的渲染作业只需40分钟完成多租户的运行环境资源共享安全隔离故障屏蔽，数据冗余服务“永远”不中断数据“永远”不丢失目的是。5统一技术平台的想法使用开源软件 or 自主研发？简单对象存储用MongoDB，索引数据用HDFS，虚拟机块存储用什么？不同服务之间的CPU、磁盘空间、IO、网络带宽的争抢如何协调，高优先级应用如何保障？重复开发与部署命名服务、分布式锁、HA、监控等基础设施？6飞天体系结构Linux数据中心Data Center资源管理Resource Management安全管理Security Management远程过程调用RemoteProcedure Call分布协同服务Distributed Coordination Service集群布署Deployment集群监控Monitoring分布式文件系统Distributed File System任务调度Job Scheduling云服务引擎ACE开放存储服务OSS开放结构化数据服务OTS开放数据处理服务ODPS弹性计算服务ECS关系型数据库服务RDS7弹性计算平台发展历程2010年1月原型版本基本的管理功能2010年10月第一版万网进入“永不宕机”虚拟机迁移快照、回滚网络防攻击2011年11月第二版推出存储与网络架构的优化大规模化自动化运维业务上的复杂需求8弹性计算平台功能概述 基础功能镜像管理：-支持主流Windows、Linux发行版；虚拟机管理-创建启动关闭释放监控 VM-操作系统主机名、密码更改安全组管理-杜绝MAC/IP欺骗、ARP攻击-DDoS攻击检测-自定义防火墙规则9弹性计算平台功能概述 高级功能快照故障恢复在线迁移弹性内存10弹性计算平台功能概述 高级功能互联网应用谈之色变的攻击 DDoS大流量攻击并发连接数攻击11与业界产品比较产品高级功能阿里云-弹性计算Amazon-EC2块存储快照回滚防DDoS攻击故障恢复在线迁移弹性内存自定义镜像负载均衡安全组ECUVPC12中国国情带来的产品复杂度形同虚设的SLA-“无限责任”中国站长/开发者要求的弹性资源-不是水平扩展，是“膨胀”前付费与后付费-Open API与BOSS按流量计费与按带宽计费-与云计算的思想相违背-额外的技术实现难度备案、内容审查形形色色的客服问题：应用入侵、弹窗应用13快速交付、弹性扩展、实时监测14 煎蛋网：以翻译和摘要形式向中文用户提供境外新鲜资讯煎蛋网：以翻译和摘要形式向中文用户提供境外新鲜资讯 安全可靠安全可靠15平台架构16系统设计17关键技术点核心技术存储虚拟化网络安全调度成本设备选型针对不同用户场景的部署方案自动化运维（10个集群）实时读写 HA随机访问-Low Latency网络环境-突发流量（攻击、FO）IO争抢XEN/Kernel/文件系统/驱动的兼容性Guest OS的配置管理Guest OS的性能优化单网络容量问题 广播风暴VM迁移域伪造IP/MAC的攻击、ARP欺骗DDoS攻击端口扫描攻击猜测密码攻击资源充分利用 vs.用户体验库存控制故障检测（电源瞬断、攻击、罕见故障）18平台技术方向集群规模-单个数据中心5000台物理机-超大单网络容量：10-30万台VM功能扩展-用户分级，QoS-VPC与VPN支持-自助装机与VNC支持-跨机房调度与容灾19Q&A谢谢！