81
Author/ ID: Dept: IT 云云云云云云 Version: V1.5 (20140101) 华华 FusionSphere 华华华华

Author/ ID: Dept: IT 云计算产品线 Version: V1.5 (20140101)

  • Upload
    clarke

  • View
    172

  • Download
    0

Embed Size (px)

DESCRIPTION

华为 FusionSphere 云操作系统. Author/ ID: Dept: IT 云计算产品线 Version: V1.5 (20140101). 使用前请删除此页. Filing and Renew Record. 使用前请删除此页. Content. 1. IT 趋势与挑战. 2. 华为对云计算发展的理解. 3. 华为云平台的独特价值. 4. 商业实践. IT 越来越重要,不只是支撑而代表了企业核心竞争力. 由维修 \ 服务中心向创新中心转变. 业务越多,设备越多. BYOD. 手机 x 人数. 办公终端. PC 机 x 人数. - PowerPoint PPT Presentation

Citation preview

Page 1: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

Author/ ID: Dept: IT 云计算产品线Version: V1.5 (20140101)

华为 FusionSphere 云操作系统

Page 2: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

Author / IDZhangjianhua, Sunwanqi, Malinyu, Liujun, Yechuan, Pengqian, Hejiangtao, Zhangdazhen, Ximingxian

Department IT 云计算产品线Group Email Address

Co-author / ID

Approver / ID

Release Data 2014.1.1

使用前请删除此页

Page 3: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

Filing and Renew RecordProductName FusionSphere Product

Version No. Ver. 3.1 及后续版本

Content

Purpose 中高层客户交流

Method 运营商趋势介绍的胶片放在了最后,若与运营商交流,用运营商趋势胶片替换第一部分内容

Renew Record 使用前请删除此页

Page 4: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

4

Content

华为云平台的独特价值

IT 趋势与挑战

商业实践

1234

华为对云计算发展的理解

Page 5: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

5

IT 越来越重要,不只是支撑而代表了企业核心竞争力

Page 6: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

6

业务越多,设备越多

科学计算 大型机

1970 年代 1980 年代科学计算 大型机生产调度 小型机财务管理 PC 机

1990 年代 2000 年代生产核心 大型机

调度管理 小型机财务管理 小型机

办公终端 PC 机 x 人数

科学计算 大型机

客户管理 X86 服务器

2010 年代生产核心 大型机

调度管理 小型机财务管理 小型机

办公终端 PC 机 x 人数

科学计算 X86 集群

客户管理 X86 服务器

ERP 小型机

HR 管理 X86 服务器企业网站 X86 服务器

决策分析 小型机

生产核心 小型机、 x86 集群

调度管理 x86 服务器、小型机财务 / 交易 x86 服务器、小型机

办公终端 PC 机 x 人数

科学计算 X86 集群

社会化营销 X86 服务器

ERP X86 集群、小型机

HR 管理 X86 服务器B2B , B2C X86 集群

大数据分析 X86 集群、小型机

BYOD 手机 x 人数

Page 7: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

7

新形势下企业 IT 将何去何从

大数据分析

生产调度系统社会化营销物流系统

分支机构

ERP

业务的发展需要企业 IT 更加灵活、高效,这就要求系统的:

实施运维趋于简单化 基础设施的平台化 业务呈现服务化

云计算成为自然选择

Page 8: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

8

Content

华为云平台的独特价值

IT 趋势与挑战

商业实践

1234

华为对云计算发展的理解

Page 9: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

9

华为对云计算发展阶段的理解

Private Public

Hybrid Cloud

私有云 多数据中心整合 混合云虚拟化计算虚拟化存储虚拟化网络和安全虚拟化

自动化管理资源弹性调度基于大集群的HA , DRS

多数据中心整合多级备份容灾SDN 网络虚拟化

OpenStack/AWS 双引擎硬件 / 虚拟化资源池管理软件定义数据中心

Page 10: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

10

虚拟化:硬件资源软件化

10 PB3~5x IOPS

计算资源虚拟化

网络 / 安全资源虚拟化

存储资源虚拟化

• 计算虚拟化要确保系统极高的可靠性• 虚拟化软件对物理资源的消耗要降到最低,把更多的资源留给应用

• 存储虚拟化要提供比 SAN 更高的读写性能• 大数据助推海量存储需求,要大幅降低存储设备投资额

• 网络虚拟化要为高密度虚拟机环境消除网络 I/O瓶颈,降低 CPU 消耗• 安全虚拟化要在系统层面提升虚拟机的安全等级,提供物理安全设备的功能

ESXi 5.1 ESXi 4.1 KVM6.1 UVP3.0

3.3 3.6 4.4 4.6

单位 CPU 虚拟化能力( SPECvirt/CINT rates )

Page 11: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

11

私有云:自动化降低管理复杂度

虚拟机资源弹性伸缩

集群资源弹性调度

资源复用

资源池资源管理

• 资源复用:应用资源弹性伸缩、分时复用、应用间共享资源

• 资源池管理:资源池份额管理、优先级管理、 VIP 应用资源优先

• DPM :能源管理策略,迁移虚拟机,关闭多余的物理机,提升能源效率

• DRS :自动迁移虚拟机,负载均衡策略保证计算性能

• 存储 DRS :自动迁移存储,确保 I/O性能

Page 12: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

12

多数据中心整合:以业务视角定义基础设施,简化 IT 管理研发体系 供应链体系

财经体系FusionManager

• 组建逻辑 DC : VDC 跨地域组建,物理数据中心各资源组成统一的逻辑数据中心,实现各资源跨地域调度

• 无差异资源管理:实现物理和虚拟资源统一管理,提高资源利用率,保护 IT 投资• 全局业务管理:业务全生命周期管理,以业务视角调度整体基础设施• 多点容灾:建立跨站点的容灾备份系统,确保业务的连续性

Page 13: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

13

混合云:让 IT 真正成为一种服务公有云

FusionManager

混合云

• 统一管理企业在公有云和私有云的资源• 实现业务资源在公有云与私有云之间流动• 通过混合云实现最优的资源配置• 在混合云中实施灾备管理

Page 14: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

14

IT 需要走向简单化• 降低 IT 运维开销• 实现敏捷 IT 交付

• IT 更加关注业务• 实现业务自动化

IT 将走向平台化• 资源池模式,物理数量少而效率

高,线性扩展•简单、自动化、虚拟化的管理• 基于开放标准的设备能够全面协作•架构可以根据业务目标而快速有效

的驱动

IT 需要走向服务化• 业务部门以内部结算的方式消费 IT• IT 部门由服务向业务运营转变• IT 数据发挥二次价值,被企业内外

部消费• IT 部门由成本中心向利润中心转变

精简 IT 敏捷商道

云平台带来 IT 资源的整合,并使得 IT 变的更加简单,从而让客户的业务更加灵活,转身更加敏捷

Page 15: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

15

Content

华为云平台的独特价值

IT 趋势与挑战

商业实践

1234

华为对云计算发展的理解

Page 16: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

16

华为对于云平台的追求和理解简单化 平台化 服务化

高效 稳定

完整

灵活的业务调整标准化资源管理

基于 QoS 的资源管理

基于开放的架构多业务支持

基于业务的 SLA可计量的服务单一的硬件 统一管理

资源弹性伸缩

资源共享

统一维护统一平台

稳定的业务体验统一的容灾备份 随时随地的接入

Page 17: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

17

产品的可靠性设计是业务稳定运作的坚实基础 稳定可靠 性能领先 完整方案

业务稳定连线、系统可靠运行是 CIO们对云平台最关注的问题!

网络路径全冗余• 核心层、汇聚层、接入层和虚拟网络层都支持冗余,完全避免了单点故障

管理节点双机•所有管理节点双机运行,确保无软件单点故障

平面通信相互独立•单个平面的故障不影响其他平面继续工作

管理VM

用户 用户

SAN 存储

用户 用户

虚拟交换管理平面存储平面

业务平面

管理VM

行业应用

客户价值云计算平台介于业务操作系统和硬件之间,云平台的稳定将直接影响服务器上承载的所有业务甚至整体数据中心的稳定

电信行业的 CRM 系统需要严格的可靠性保证,达到 6个 9 ,华为云平台支撑着河南电信等多个客户核心业务,中外运所有 IT 系统含关键业务已稳定运行超过 2 年,无任何中断

Page 18: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

18

精细化故障预防系统降低业务意外停机的风险 稳定可靠 性能领先 完整方案

系统在运行过程可能出现故障隐患,该如何预防?

系统运行记录仪• 全面记录虚拟化平台和虚拟机的运行状态

精细化探针•探针程序检测节点或者虚拟机的异常信息

故障预防工具•报告系统健康状态,预先发现系统隐患提前排除

FusionSphere

…….

VRM

行业应用

客户价值通过系统运行自动分析可以提前排除因业务系统本身软件的异常,减少系统故障带来的业务损失

在某公有云运营商中,通过华为的系统运行分析发现其客户某个业务对于系统内存需要持续不断但少量的增加,持续 三个月系统内存需求一直在增加,判断业务软件有内存泄漏情况,运营商通过分析告知其客户,并最终解决最终客户的业务软件问题,帮助客户获得客户满意

Page 19: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

19

故障恢复系统将保障业务自动快速恢复 稳定可靠 性能领先 完整方案

系统在运行过程可能出现故障不可怕,可怕的是故障不能自动恢复。

独有虚拟化层故障检测• 配合华为服务器快速检测hypervisor故障,自动复位服务器恢复业务。

高效的虚拟机 HA• 为大集群优化的 HA 机制,业界最优性能,支持128主机 HA 集群

� 服务器 A

OSAPP OSAPPX� 服务器 B

OSAPP OSAPP

� 服务器 C � HA 预留资源

OSAPP

OSAPP

OSAPP OSAPP OSAPP

FusionCompute

App

X

App

App

行业应用

客户价值大幅提升故障恢复速度、降低业务中断时间、保障业务连续性 ; HA 集群规模大,利用率高

石油行业的业务对于 VM 的资源需求非常大,如果按照友商每 HA 集群 32 台服务器计算,某石油的云计算平台所需要的服务器将比使用华为云计算平台需要的服务器增加15%,华为 128 台服务器的 HA 集群减少碎片资源的同时增加系统 HA 的成功的可能

Page 20: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

20

系统升级不停机是提高业务可用性的关键 稳定可靠 性能领先 完整方案

系统出现故障,该怎么修复?

独创双分区技术• 独创双分区技术,确保升级不影响现有业务• 双分区备份,更高可靠性

创新的升级补丁工具•向导式升级补丁工具,提升维护效率• 一键式回退,快速恢复到升级前状态

行业应用某股票交易系统,业务繁忙,同时虚拟化平台采用服务器利旧的方式建设, 1 年后服务出现磁道坏损,但因为华为独有的核心文件双区技术,业务没有出现任何故障

客户价值虚拟化平台的核心文件所在磁盘读写次数较多,核心文件存在主备双区,并避免因磁盘的坏损导致的虚拟化平台的故障主分区 备份区

服务器本地存储

若数据损坏,由备分区接管业务

x

Page 21: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

21

极端灾难情况下的容灾恢复机制 稳定可靠 性能领先 完整方案

出现灾难如何应对与恢复 ?

管理数据备份• 提供管理节点配置数据和业务数据定期本地和异地备份。

城域双活容灾• 配套使用华为 VIS6600T 产品实现 100 公里的数据中心双活容灾。

大二层互联

VIS 集群

VMVMVMVMVMVM站点 A

VMVMVMVMVMVM站点 B

FusionCompute FuisonCompute

管理节点(主 )

实时同步FTP

每日备份管理节点( 备 )

行业应用

客户价值管理节点可靠性达到 6个 9;并通过城域间双活方案建设两地三中心容灾系统,系统可靠性增强。

北非某公司,通过华为城域双活容灾特性建设两地三中心,系统故障从原有 3个 9变成了 6个 9 ,极大解决了数据中心因城市停电而导致的业务中断

Page 22: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

22

http://www.spec.org/virt_sc2010/results/specvirt_sc2010_perf.html

单位 CPU 虚拟化能力( SPECvirt/CINT rates )

业界最佳的虚拟化性能 稳定可靠 性能领先 完整方案

厂商 Tile上限 得分华为 48 4687

Redhat 47 4603

VMware 39 3824

SPECvirt : 华为 VS. VMware VS. Redhat

VM VM VM VM VM VM

虚拟平台与硬件Blue = Disk IOGreen = Network IO

Tile1 Tile2Tile3 Tile N

…OS OS OS OS OS OSInfra

Web

IMAP

APP

DB

Idle

Huawei FusionSphere 性能测试结果 Tile总数: 48

Overall Score Performance得分: 4687Overall Score QoS : 99.75%

3.3 3.6 3.9 4.4 4.6

Page 23: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

23

计算虚拟化性能优化 稳定可靠 性能领先 完整方案

NUMA• 虚拟机 CPU 和内存自动分配在相同node ,主机 node 间的 CPU 资源进行负载均衡;

• 虚拟机内部呈现物理 NUMA结构,客户业务应用可以感知 NUMA 分布情况并合理分配资源

如何有效挖掘服务器 CPU 和内存性能潜力? 如何在虚拟化环境上发挥 NUMA 能力?

CPU 睿频•根据 CPU 负载情况自动调整主频,在能耗正常范围内最大化 CPU处理性能

透明内存大页• 内存以大页( 2MB)分配,减少虚拟机内存访问时页表中地址转换,虚拟机不感知

行业应用

客户价值客户在虚拟化环境上可以充分发挥硬件的计算性能,使其虚拟机业务获得最大化的计算体验

巨型虚拟机项目结合 NUMA技术可以带来 20%-60% 的计算性能提升,充分发挥多核的处理效率

Page 24: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

24

存储虚拟化性能优化 稳定可靠 性能领先 完整方案

如何改造存储 IO路径以达到裸设备能力? 如何掌握性能和数据可靠性最佳平衡点?

RDM裸设备映射• 虚拟机直接访问裸 Lun ,支持透传 SCSI信令,支撑Oracle RAC 等集群数据库业务正常运行 行业应用

客户价值

IO 路径深度优化•扩大 IO 环和 IO路径队列深度,避免并发量大时 IO阻塞• 优化前后端 IO授权映射锁处理流程,减少锁竞争开销

DSWare• 分布式高并发存储,提升 IO 性能• 多份拷贝跨节点冗余,提升数据安全性和恢复速度

针对不同存储设备,提供性能最优的存储方案,使客户在虚拟机上的业务接近甚至超越物理 Lun 的能力

Server

Volume1

Server

Volume2

Server

Volume3

DSWare

VM

Client Client Client

VM VM VM VM VM海事大学等研究机构需要大量“小块”数据的引用和计算,只有通过分布式存储将传统串行读取数据方式改成并行读取, I/O 能力提供 42%,有效支撑了海洋和气候研究

Page 25: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

25

网络虚拟化性能优化 稳定可靠 性能领先 完整方案

VMDq• 全称虚拟机设备队列,网卡提供多个收发队列作为虚拟机虚拟网卡,从而把软件虚拟交换卸载到硬件完成,极大提升 IO处理效率

客户价值

虚拟网络加速• 基于 VMDq 实现硬件二层交换,并提供多种二层安全能力• 支持虚拟机热迁移、 HA 等特性•带来最佳的网络性能体验

开启 VMDq 能力后: 主机 CPU 开销降低 40%

网络 IO处理能力提升 3倍 网络带宽提升至 10GE

服务器对外连线从 6条减少为 2条

如何获得虚拟网卡高带宽低时延能力? 如何减少虚拟交换对系统资源产生的开销?

标准 PCI插槽 2*10GE 刀片服务器扣卡 2*10GE

Page 26: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

26

稳定可靠 性能领先 完整方案数据库虚拟化性能优化

Oracle 性能测试数据整体平均值对比虚拟机不同配置场景 Huawei

TPMVMware

TPM 数据差距8U8G单台虚拟机(无多路径) 179474 175580 +2.20

%

8U8G两台虚拟机并发 109710 111447 -1.56%

8U16G单台虚拟机(无多路径) 198404 185858 +6.75

%

8U16G单台虚拟机 177765 175580 +1.24%

8U16G两台虚拟机并发 128302 117520 +9.17%

IO请求优化

IO 调度优化

多核优化

华为虚拟化关键技术根据 Oracle DB 读写性能自动扩展虚拟机处理的 IO 请求大小,减少 50% 的请求合并工作量

SMP 多核虚拟机技术与多数据库实例的整合优化

优化虚拟化 IO 调度算法降低 IO并发处理时延,提升虚拟机 IO处理能力

Oracle DB 性能测试对比 : 华为 VS. VMware

Page 27: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

27

深入理解硬件

对云平台完整方案的关注将是项目成功的关键

完整的方案

深入理解应用

FusionSphere不仅仅是虚拟化,而是完整交付方案

稳定可靠 性能领先 完整方案

怎么保障业务的性能与可靠性?

如何保证业务到云的平滑迁移?如何兼容现有业务软件?如何减少迁移过程对业务的影响?

出了问题怎么办?业务与运维流程如何转换?分散系统到集中系统如何统一管理?

是否会被绑架?与其他系统如何对接?如何进行业务资源的分配和调整管理?

实施

维护

设计

Page 28: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

28

对于场景的深入理解将提升虚拟化的价值稳定可靠 性能领先 完整方案

怎么保障业务的性能,可靠性如何保障?

多层次容灾备份方案,应对不同的成本可靠性需求 通过 RDM + HBA 技术,深度优化数据库

不同的应用场景有不同的安全策略,私有云和公有云面对的安全策略 不同

行业应用

客户价值 在开放方案基础上,引入华为独特的理解和思考,提升性能,提升可靠性,降低工程及维护难度。

某 1000万级人口城市各委办局业务托管到一个云平台中,业务丰富,各业务系统容灾要求不同,必须一套软件实现不同层次的备份和容灾基础设施

数据应用

站点双站点全局负载均衡与故障迁移

应用负载均衡冗余系统、复制、集群

管理安全数据保护

网络、供电设备、机房环境恢复慢成本低

恢复快成本高

Page 29: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

29

开放性是虚拟化最重要的推动器 稳定可靠 性能领先 完整方案

行业应用

客户价值华为和自己的设备绑定这样紧,我们使用华为的方案是否会被绑架?与现有网管系统、安全系统等如何对接?异构及业务软件兼容性如何? 开放方案避免厂商绑定,便于被集成。

浙江移动:管理 FusionSphere ,虚拟化vSphere ,服务器 HP ,存储 IBM印度 Airtel :运营系统 HP ,管理FusionSphere ,服务器 / 存储 /防火墙 / 交换机 华为, F5 LB。

异构硬件x86 服务器, IPSAN ,交换机

异构软件vSphere, Xen Server , KVM

被集成开放接口:, API , SDK , SNMP , AAA

开放生态HP OpenView, CA Cloud Suite, 康福 Simpana

Page 30: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

30

从基础设施到网络环境的全方位方案设计 稳定可靠 性能领先 完整方案

如何进行业务资源的分配和调整管理?现有网络架构和带宽如何配合?如何实现集中管理?如何实现流程转变?性能采集:•进行业务性能采集,计算与设计资源分配策略

工程勘测•考察云化后对机房、供电、组网设计的影响

云化环境• 机房服务器高密集成、需考虑散热问题与供电问题、 VM 跨数据中心迁移,需要考虑外部网络带宽问题,高性能计算需考虑服务器间高速互连问题。 I/O问题在高密虚拟机场景,将变得更突出。

行业应用

客户价值 在系统中预制专家系统,并通过华为贴身设计在成本、效益、效率等方面获得平衡

某石油桌面云项目,华为设备替代原友商设备,通过华为专家系统的运行,使得最终用户的满意度提升 30%组织流程:

• IT 业务部门重组,设计 IaaS 运营流程

Page 31: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

31

从实际出发保障云平台方案实施 稳定可靠 性能领先 完整方案

如何保证业务到云的平滑迁移?如何减少业务迁移过程对业务的影响?

用户并发数

数据访问量1

2

3

4

业务迁移策略

行业应用

客户价值 非云向云切换通过华为全球已经超过 50万虚拟机运行的基础通过、所有过程全部工程化,工程实施效率提升 30%以上,业务平滑过渡

某石油项目,友商 1 年完成了 300个虚拟机迁移,主要是前期没有设计,导致要做大量测试,而华为接手后半年完成超过 2000个虚拟机的迁移

1

2

3

4

并发低数据少的业务,例如:资产管理系统并发高数据少的业务,例如:考勤系统并发低数据多的业务,例如:软件共享平台并发高数据多的业务,例如:Email 系统

Page 32: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

32

以客户为中心的全方位维护 稳定可靠 性能领先 完整方案

我们是否能自己维护好,出了问题怎么办?

行业应用

客户价值当虚拟化平台的技术和功能趋同后,成品能力取决于长期的战略投资和服务能力

十八大保障(为召开十八大,华为派技术人员进行现场保障)

功能标准化

IO直通化硬件

软件

20052000’s 2014……

半虚拟化全虚拟化

裸金属架构分布式文件系统

VT-X

VT-D

EPT

NPT

VMDQ

SR-IOV

芯片虚拟化

分布式虚拟交换机 GPU虚拟化

内存复用

负载均衡 QOS

HA/FT

虚拟防火墙

存储热迁移

。。。

虚拟化技术方向趋同背景下,比拼的主要是服务!

Page 33: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

33

华为 FusionSphere融合架构

充分利用 OpenStack 生态链构建统一 ICT架构 构建软件定义存储和软件定义网络,提供的完备的数据中心虚拟化能力 FusionManager 提供业务逻辑组建、业务呈现和监控以及自动化

虚拟化引擎

Web Portal自动化管理及统一监控

FusionManager

计算节点管理封装

Nova Neutron Cinder

计算虚拟化

libvirt

SDN SDS网络虚拟化 存储虚拟化

分布式交换机

SDNController 存储虚拟化

DSware

Heat电信能力扩展

Plug In

存储接入

OpenStack 华为扩展 Ext

Page 34: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

34

FusionSphere :云之路更好的选择

性能最佳

功能完备

资源 Hyper-V 3.0 Citrix 6.0 KVM 3.1 VMware 5.1

FusionSphere 3.10

最大逻辑核数 320 160 160 160 160物理内存 4TB 1TB 2TB 2TB 2T每虚拟机虚拟 CPU 数 64 16 64 64 64每虚拟机最大内存 1TB 128GB 1T 1TB 1T每站点激活虚拟机数 40000 20000 40000 30000 80000最大节点数 64 16 64 32 128高可靠( HA ) Y Y Y Y Y容错( FT ) NO NO NO Y YQOS Y Y Y Y Y存储瘦分配 Y Y Y Y Y

存储热迁移 Y NO Y Y Y存储 DRS NO NO NO Y Y智能缓存Intellicache

NO Y NO Y Y

虚拟交换机 vSwitch Y Y Y Y YSR-IOV Y NO NO Y Y

Page 35: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

35

华为云平台版本情况分类 特性

基础版(试用场景)

标准版(虚拟化)

高级版(私有云)

铂金版(多数据中

心)钻石版(混合云 )

虚拟化虚拟计算、存储、网络、安全 √ √ √ √ √GPU 虚拟化 √ √ √虚拟化防病毒 √ √ √

云基础服务SDS 软件定义存储 √ √ √OpenStack √ √ √云主机服务(弹性 IP 、镜像管理) √ √云主机 VPC 服务、负载均衡服务   √ √

云管理 硬件、运维管理、自动化资源发放、 VDC √ √ √应用监控 √

性能管理 性能 / 容量的监控、分析、预测、优化 √ √ √SDK 云计算 SDK √ √

灾备 数据备份 √ √ √ √异地容灾   √ √

公有云 运营 √计费网关 √

Page 36: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

36

华为云平台路标规划

虚拟化将是未来一切 IT 的核心,云平台是华为公司的长期战略!

R3C00/R3C10 R5C00 R5C10/R6

DSware FusionCube专用链接克隆、镜像、瘦分配存储读缓存

DSware 通用化高性能存储重删读写缓存Storage Hypervisor/ 存储卸载

GPU 虚拟化支持 OpenStack阵列容灾

计算性能优化 / 虚拟网络性能优化Openstack 全架构支持主机容灾

虚拟网络 VSAVxLAN

SDN架构Overlay 网络方式跨 DC 虚拟网络解决方案

电信级可靠性加强应用程序层级控制 HA 自动化双活容灾软硬协同统一 SDN架构跨数据中心 SDN高级虚拟网络服务通用化分布式存储(重删、近端缓存加速)通用存储高级优化、功能卸载

R3C00 2013.7 R3C10 2014.1 R5C00 2014.10 R5C10 2015.3 R6C00 2015.10

Page 37: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

37

Content

华为云平台的独特价值

IT 趋势与挑战

商业实践

1234

华为对云计算发展的理解

Page 39: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

39

虚拟化:金税工程建立节约高效的 IT 基础架构• 物理服务器的资源利用率从 20%提高到 65%以上,有效减少了服务器数量及能耗。• 整体方案设计,满足未来 5~10 年的业务发展需求。

Page 40: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

40

私有云:国家电网资源整合构建硬件资源池• 非计划性服务中断时间缩短 60% ,提高信息系统可靠性。• 采用管理软件分布式部署实现总部对省网公司资源池的集中管控。

Page 41: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

41

• IT 资源的利用率,由 20% 提升到 70%。 • 新业务的上线时间,从 25 周缩短到 1 周。 • 支持统一运维,成本大幅下降,人员效率提升 16倍。

中国外运部署虚拟化提升 IT 价值

Page 42: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

42

虚拟化:全业务“媒体云”助力新华社打造现代传播体系• 集群软件级联,一朵云超过 1000个 CPU• 华为 FusionSphere 大规模运用在要求 5个“ 9” 的环境。• 运维效率提升 10倍,助力打造全球传播新格局。

Page 43: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

43

私有云: CNTV 快速响应网络新媒体发展• 整合 CPU 数量 200+ ,实现资源弹性伸缩。• 针对不同视频类型在不同时段访问压力的差异,实现资源的时分复用和共享。

Page 44: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

44

多数据中心整合:上海联通探索公有云服务模式• 国内真正意义上的第一个混合云建设方案,实现私有云资源和公有云资源分时服用。• 对外提供云计算服务,探索公有云业务新模式。

Page 45: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

45

多数据中心整合: Vodafone

• 整合全球 28个数据中心,分布式管理

Page 46: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

46

多数据中心整合:四川联通分布式云数据中心实现业务转型• 统一管理大服务平台云、 SME 公有云等多朵混合云,节约 IT 资源 40%。• 云主机、云存储和集团 CRM 系统等 200+ 云应用上线时间提升 70%。

Page 47: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

47

混合云:浙江移动打造开放式、多租户、统一的云计算平台• 新业务上线时间从平均 20天缩短为 3天,提速 85%。• 业务故障恢复时间从平均 1 小时缩短为小于 5 分钟,减少

91%。

Page 48: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

48

灾备:欧洲 BME

• RPO约等于 0, RTO 以分钟计算• 实现软硬件统一管理,自动化运维

Page 49: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

49

Gartner虚拟化时钟象限成员

云基础设施产品创新奖Frost & Sullivan 2013

1万华为人在努力满足您的 IT 需求

No.1SPECvirt 虚拟化基准测试性能业界最佳

最佳展示奖InterOP 2013 提名

DCD蓝图奖中国第一届数据中心产业

10万全球最大规模桌面云

华为云计算投入和回报

Page 50: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

Copyright©2012 Huawei Technologies Co., Ltd. All Rights Reserved.The information in this document may contain predictive statements including, without limitation, statements regarding the future financial and operating results, future product portfolio, new technology, etc. There are a number of factors that could cause actual results and developments to differ materially from those expressed or implied in the predictive statements. Therefore, such information is provided for reference purpose only and constitutes neither an offer nor an acceptance. Huawei may change the information at any time without notice.

HUAWEI ENTERPRISE ICT SOLUTIONS A BETTER WAY

Page 51: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

51

过去 10年创新与改变

只有变化是唯一不变的!收音机 38 年电视机 13 年iPod 3 年疯狂的小鸟 0.5 年

Page 52: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

53

企业云计算发展趋势( 更 High 的趋势 )

文档资料对外部客户使用前请删除该页

对运营商行业客户介绍时,删除企业云趋势这部分全部内容

Page 53: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

54

过去 10年创新与改变10年前还不存在当今最热门 TOP-10 的职业 ..10年前我们还很难想象微信是什么…

变化是唯一不变的 !!!

Connected World改变中的工作和生活

Page 54: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

55

封闭与守旧

Page 55: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

56

新形势下企业 IT 将何去何从

智能交通

智能调度智能医疗智能物流

智能制造

ERP

业务的发展需要企业 IT 更加灵活、高效,这就要求系统的实施、运维趋于简单化,并通过基础设施的平台化,让向更为灵活高效的服务化发展。

云计算自然成为选择

Page 56: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

57

电信云计算发展趋势文档资料对外部客户使用前请删除该页

对非运营商行业客户介绍时,删除电信云这部分全部内容

Page 57: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

58

运营商 - “ 云”化趋势推动 IT 、 CT 架构融合

数据中心集中化 IT 基础设施资源池化 业务云化 ICT架构融合

电信设备 IT 化 / NFV

内部 IT 业务云化

CT 业务云化

IT in CLOUDCT in IT

对外 IT 服务云化云平台 / OpenStack

Page 58: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

59

网络功能虚拟化( NFV )公共 IP服务 专用 IP 服务

企业网络

核心路由器

NID

路由器

运营商侧

用户侧数据平面 控制平面

公共 IP服务

企业网络

NID

运营商侧

用户侧

虚机路由器控制 / 管理

专用 IP服务

OpenFlow 交换机

现今:网络设备与应用相互分离

Web 服务器Web 服务器Web 服务器分布交换机

负载均衡防火墙路由器

耗电: 40A

全冗余部署

未来 -NFV :各项功能虚拟化

耗电: 20A

开放交换负载均衡防火墙路由器

Web WebWeb Web

可扩展架构

刀片服务器集群与虚拟化软件

• 一个昂贵的专业设备被通用硬件和高级软件替代• 软件控制平面从专用设备硬件中剥离,被转移到了更优化的位置• 数据平面的控制被从专有设备上提取出来,并且标准化,使得网络和应用的革新无需网络设备硬件升级• 网络资源的配置(组网、带宽、 QoS 、安全策略等)将变得非常弹性、灵活和高效

Page 59: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

60

运营商 IT 基础设施发展趋势构筑统一管理的资源池动机:实现 IT 组织和流程向扁平高效转型电信网络业务云化动机:电信业务软硬件解耦,降成本经分系统的 x86 化动机:改小机到 x86 ,降低每T 数据处理成本,增强对非结构化数据处理能力对外提供云服务动机:已有 Hosting 服务的自然延续;或 IT转型的一部分,包括桌面, IaaS ,位置服务等

1

2

3

4

BSS/OSS/VAS

MSS/LTE/EPC

路由器 / 交换机

SaaS

DaaS

IaaS

办公前端( PC)办公后台系统经营分析系统

应用系统

电信业务系统 对外云服务系统 IT 支撑系统

基础设施

统一的 IT 资源管理平台IaaS 资源池

专有硬件平台(电信网络业务)X86 硬件( IT 支撑系统 / 公有云)

小机(经营分析系统)

4

32

1

Page 60: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

61

Content

华为云平台的独特价值

IT 趋势与挑战

商业实践

1234

华为对云计算发展的理解

Page 61: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

62

华为对于云平台的追求和理解简单化 平台化 服务化

高效 稳定

完整

灵活的业务调整标准化资源管理

基于 QoS 的资源管理

基于开放的架构多业务支持

基于业务的 SLA可计量的服务单一的硬件 统一管理

资源弹性伸缩

资源共享

统一维护统一平台

稳定的业务体验统一的容灾备份 随时随地的接入

Page 62: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

63

产品的可靠性设计是业务稳定运作的坚实基础 稳定可靠 性能领先 完整方案

业务稳定连线、系统可靠运行是 CIO们对云平台最关注的问题!

网络路径全冗余 管理节点双机平面通信相互独立

管理虚拟机

用户虚拟机

SAN 存储

虚拟交换

管理平面

存储平面

业务平面管理虚拟机

用户虚拟机

用户虚拟机

用户虚拟机

Page 63: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

64

精细化故障预防系统降低业务意外停机的风险 稳定可靠 性能领先 完整方案

系统在运行过程可能出现故障隐患,该如何预防?

系统运行记录仪 精细化探针故障预防工具

FusionSphere

…….

VRM

Page 64: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

65

故障恢复系统将保障业务自动快速恢复 稳定可靠 性能领先 完整方案

系统在运行过程可能出现故障不可怕,可怕的是故障不能自动恢复。

独有虚拟化层故障检测高效的虚拟机 HA

FusionSphere Hypervisor

App

X

App App

� 服务器 A

OSAPP

OSAPP

� 服务器 B

OSAPP

OSAPP

� 服务器 C � HA 预留资源

OSAPP

OSAPP

OSAPP

OSAPP

OSAPP

X

Page 65: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

66

系统升级不停机是提高业务可用性的关键 稳定可靠 性能领先 完整方案

系统出现故障,该怎么修复?

独创双分区技术 创新的升级补丁工具

主分区 备份区

服务器本地存储

若数据损坏,由备分区接管业务

x

Page 66: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

67

极端灾难情况下的容灾恢复机制 稳定可靠 性能领先 完整方案

出现灾难如何应对与恢复 ?

管理数据备份 城域双活容灾

大二层互联

VIS 集群

VM VM VM VM VM VM

站点 A

VM VM VM VM VM VM

站点 B

FusionCompute FuisonCompute

管理节点(主

)

实时同步

FTP

每日备份管理节点( 备 )

Page 67: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

68

http://www.spec.org/virt_sc2010/results/specvirt_sc2010_perf.html

单位 CPU 虚拟化能力( SPECvirt/CINT rates )

业界最佳的虚拟化性能 稳定可靠 性能领先 完整方案

厂商 Tile上限 得分华为 48 4687

Redhat 47 4603

VMware 39 3824

SPECvirt : 华为 VS. VMware VS. Redhat

VM VM VM VM VM VM

虚拟平台与硬件Blue = Disk IOGreen = Network IO

Tile1 Tile2Tile3 Tile N

…OS OS OS OS OS OSInfra

Web

IMAP

APP

DB

Idle

Huawei FusionSphere 性能测试结果 Tile总数: 48

Overall Score Performance得分: 4687Overall Score QoS : 99.75%

3.3 3.6 3.9 4.4 4.6

Page 68: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

69

NUMA 与透明内存大页( HTP )技术

计算虚拟化性能优化 稳定可靠 性能领先 完整方案

如何有效挖掘服务器 CPU 和内存性能潜力? 如何在虚拟化环境上发挥 NUMA 能力?

CPU 睿频

前代产品未采用睿频

Intel酷睿 i7/i5 (采用睿频)单线程负载 轻度线程化负载 高度线程化负载

Page 69: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

70

存储虚拟化性能优化 稳定可靠 性能领先 完整方案

如何改造存储 IO路径以达到裸设备能力? 如何掌握性能和数据可靠性最佳平衡点?

RDM裸设备映射 DSWare

Server

Volume1

Server

Volume2

Server

Volume3

DSWare

VM

Client Client Client

VM VM VM VM VM

Page 70: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

71

网络虚拟化性能优化 稳定可靠 性能领先 完整方案

VMDq 虚拟网络加速

如何获得虚拟网卡高带宽低时延能力? 如何减少虚拟交换对系统资源产生的开销?

标准 PCI插槽 2*10GE 刀片服务器扣卡 2*10GE

Page 71: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

72

稳定可靠 性能领先 完整方案数据库虚拟化性能优化

Oracle 性能测试数据整体平均值对比虚拟机不同配置场景 Huawei

TPMVMware

TPM 数据差距8U8G单台虚拟机(无多路径) 179474 175580 +2.20

%

8U8G两台虚拟机并发 109710 111447 -1.56%

8U16G单台虚拟机(无多路径) 198404 185858 +6.75

%

8U16G单台虚拟机 177765 175580 +1.24%

8U16G两台虚拟机并发 128302 117520 +9.17%

IO请求优化

IO 调度优化

多核优化

华为虚拟化关键技术根据 Oracle DB 读写性能自动扩展虚拟机处理的 IO 请求大小,减少 50% 的请求合并工作量

SMP 多核虚拟机技术与多数据库实例的整合优化

优化虚拟化 IO 调度算法降低 IO并发处理时延,提升虚拟机 IO处理能力

Oracle DB 性能测试对比 : 华为 VS. VMware

Page 72: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

73

深入理解硬件

对云平台完整方案的关注将是项目成功的关键

完整的方案

深入理解应用

FusionSphere不仅仅是虚拟化,而是完整交付方案

稳定可靠 性能领先 完整方案

怎么保障业务的性能与可靠性?

如何保证业务到云的平滑迁移?如何兼容现有业务软件?如何减少迁移过程对业务的影响?

出了问题怎么办?业务与运维流程如何转换?分散系统到集中系统如何统一管理?

是否会被绑架?与其他系统如何对接?如何进行业务资源的分配和调整管理?

实施

维护

设计

Page 73: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

74

对于场景的深入理解将提升虚拟化的价值

怎么保障业务的性能,可靠性如何保障?

多层次容灾备份方案,应对不同的成本可靠性需求

性能:通过 RDM + HBA技术,深度优化数据库

稳定可靠 性能领先 完整方案

安全:不同的应用场景有不同的安全策略,私有云和公有云面对的安全策略 不同

基础设施数据

应用站点

双站点全局负载均衡与故障迁移应用负载均衡冗余系统、复制、集群

管理安全数据保护网络、供电设备、机房环境

恢复慢成本低

恢复快成本高

Page 74: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

75

开放性是虚拟化最重要的推动器华为和自己的设备绑定这样紧,我们使用华为的方案是否会被绑架?与现有网管系统、安全系统等如何对接?异构及业务软件兼容性如何?

稳定可靠 性能领先 完整方案

异构软硬件

开放接口被集成

开放生态

AAA

Page 75: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

76

性能采集

c

IOPS

MBPS8:53

14:2016:50

11:10

从基础设施到网络环境的全方位方案设计

如何进行业务资源的分配和调整管理?现有网络架构和带宽如何配合?如何实现集中管理?如何实现流程转变?

稳定可靠 性能领先 完整方案

专项设计

云网络设计方案

QoS 设计报告…

云备份容灾方案

云安全设计报告

生产环境

IP SAN/FC SAN

S2000/S5000

S2000/S5000

容灾中心 WAN

方案描述通过存储阵列远程镜像数据容灾方案特点 生产阵列必须支持复制 复制方式单一

总体方案云化环境评估报告

工程勘测

c

组织与流程设计

Page 76: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

77

从实际出发保障云平台方案实施

如何保证业务到云的平滑迁移? 如何减少业务迁移过程对业务的影响?

稳定可靠 性能领先 完整方案

用户并发数

数据访问量1

2

3

4

业务迁移策略 1

2

3

4

并发低数据少的业务,例如:资产管理系统

并发高数据少的业务,例如:考勤系统

并发低数据多的业务,例如:软件共享平台

并发高数据多的业务,例如: Email 系统

Page 77: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

78

以客户为中心的全方位维护 稳定可靠 性能领先 完整方案

功能标准化

IO直通化硬件

软件

2005

2000’s 2014……

半虚拟化全虚拟化 裸金属架构

分布式文件系统

VT-XVT-D

EPTNPT

VMDQSR-IOV

芯片虚拟化

分布式虚拟交换机 GPU虚拟化

内存复用

负载均衡 QOS

HA/FT

虚拟防火墙 存储热迁移

。。。

虚拟化技术方向趋同背景下,比拼的

主要是服务!

Page 78: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

79

华为 FusionSphere融合架构

充分利用 OpenStack 生态链构建统一 ICT架构 构建软件定义存储和软件定义网络,提供的完备的数据中心虚拟化能力 FusionManager 提供业务逻辑组建、业务呈现和监控以及自动化

虚拟化引擎

Web Portal自动化管理及统一监控

FusionManager

计算节点管理封装

Nova Neutron Cinder

计算虚拟化

libvirt

SDN SDS网络虚拟化 存储虚拟化

分布式交换机

SDNController 存储虚拟化

DSware

Heat电信能力扩展

Plug In

存储接入

OpenStack 华为扩展 Ext

Page 79: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

80

FusionSphere :云之路更好的选择

性能最佳

功能完备

资源 Hyper-V 3.0 Citrix 6.0 KVM 3.1 VMware 5.1

FusionSphere 3.10

最大逻辑核数 320 160 160 160 160物理内存 4TB 1TB 2TB 2TB 2T每虚拟机虚拟 CPU 数 64 16 64 64 64每虚拟机最大内存 1TB 128GB 1T 1TB 1T每站点激活虚拟机数 40000 20000 40000 30000 80000最大节点数 64 16 64 32 128高可靠( HA ) Y Y Y Y Y容错( FT ) NO NO NO Y YQOS Y Y Y Y Y存储瘦分配 Y Y Y Y Y

存储热迁移 Y NO Y Y Y存储 DRS NO NO NO Y Y智能缓存Intellicache

NO Y NO Y Y

虚拟交换机 vSwitch Y Y Y Y YSR-IOV Y NO NO Y Y

Page 80: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

81

华为云平台版本情况分类 特性

基础版(试用场景)

标准版(虚拟化)

高级版(私有云)

铂金版(多数据中

心)钻石版(混合云 )

虚拟化虚拟计算、存储、网络、安全 √ √ √ √ √GPU 虚拟化 √ √ √虚拟化防病毒 √ √ √

云基础服务SDS 软件定义存储 √ √ √OpenStack √ √ √云主机服务(弹性 IP 、镜像管理) √ √云主机 VPC 服务、负载均衡服务   √ √

云管理 硬件、运维管理、自动化资源发放、 VDC √ √ √应用监控 √

性能管理 性能 / 容量的监控、分析、预测、优化 √ √ √SDK 云计算 SDK √ √

灾备 数据备份 √ √ √ √异地容灾   √ √

公有云 运营 √计费网关 √

Page 81: Author/ ID:   Dept: IT 云计算产品线 Version: V1.5 (20140101)

82

华为云平台路标规划

虚拟化将是未来一切 IT 的核心,云平台是华为公司的长期战略!

R3C00/R3C10 R5C00 R5C10/R6

DSware FusionCube专用链接克隆、镜像、瘦分配存储读缓存

DSware 通用化高性能存储重删读写缓存Storage Hypervisor/ 存储卸载

GPU 虚拟化支持 OpenStack阵列容灾

计算性能优化 / 虚拟网络性能优化Openstack 全架构支持主机容灾

虚拟网络 VSAVxLAN

SDN架构Overlay 网络方式跨 DC 虚拟网络解决方案

电信级可靠性加强应用程序层级控制 HA 自动化双活容灾软硬协同统一 SDN架构跨数据中心 SDN高级虚拟网络服务通用化分布式存储(重删、近端缓存加速)通用存储高级优化、功能卸载

R3C00 2013.7 R3C10 2014.1 R5C00 2014.10 R5C10 2015.3 R6C00 2015.10