电信行业数据库云平台案例分享 - Oracle€¦ · • 中国电信广研院Exadata 测试汇报内容. Exadata 是一个革命性的技术性能、、容量和价值上的巨大跳跃容量和价值上的巨大跳跃

<在此处插入图片在此处插入图片在此处插入图片在此处插入图片>

电信行业数据库云平台案例分享电信行业数据库云平台案例分享电信行业数据库云平台案例分享电信行业数据库云平台案例分享包彤高级技术咨询经理[email protected]

• 革命性技术

• 客户案例

• 中国电信广研院Exadata测试汇报

内容内容内容内容

Exadata是一个革命性的技术是一个革命性的技术是一个革命性的技术是一个革命性的技术性能性能性能性能、、、、容量和价值上的巨大跳跃容量和价值上的巨大跳跃容量和价值上的巨大跳跃容量和价值上的巨大跳跃

� 使数据库性能提高10倍

� 减少10倍的存储使用

� 整合了平台、数据库、电源、制冷和管理

� 现有应用无需变更

� 保护和利用现有技术人员、技能和Oracle使用许可的投资

� 消除系统集成和调优的反复试验

�

�

�

�

�

�

� 消除系统集成和调优的反复试验

“Exadata is the fastest growing product in Oracle’s history”

Larry Ellison, Oracle CEO

“Exadata is the fastest growing product in Oracle’s history”

Larry Ellison, Oracle CEO

�

© 2011 Oracle Corporation – Oracle Confidential – 3 –

电信行业电信行业电信行业电信行业 – 创新提高竞争力创新提高竞争力创新提高竞争力创新提高竞争力

• 创造新的和更多有价值的服务

• 以最低的成本交付这些服务

• 从数据中了解更多的信息- 最有价值的客户, 客户流失, 语音质量, 覆盖质量, 客户使用模式, 灵活的价格

• 取胜的关键点是推翻已存在的市场

• IT是用来革命的关键工具- 一个电信运营商有15000个Oracle数据库实例

- 几百PB的存储(50% OLTP, 50% DW)


革命性的计算技术革命性的计算技术革命性的计算技术革命性的计算技术

• 数据库和数据仓库已经高速- 智能存储

- 闪存• 数据库和数据仓库已经高速增长了10年

• 许多技术正在变革整个行业

- 闪存

- 列式压缩

- InfiniBand 网络

- 透明的数据加密和解密

- 完整的故障保护

- 实时的分析


• 成熟的成熟的成熟的成熟的Oracle 数据库软件数据库软件数据库软件数据库软件• Partitioning (8i)

• 超大表的性能和管理

• 13 年的成熟技术

• Real Application Clusters (RAC) (9i)

• 数据库网格性能与高可用性ASM

Real Application Clusters

继承了继承了继承了继承了Oracle高可用性高可用性高可用性高可用性的技术优势的技术优势的技术优势的技术优势

• 10 years; > 15,000 用户

• Automatic Storage Manager (ASM) (10g)

• 卷管理 & 存储网格可靠性

• 6 years; > 6000 用户

• Exadata Storage Server Software (11g)

• 智能存储网格

高可用存储池

Exadata数据库智能存储


Oracle 最高可用性解决方案最高可用性解决方案最高可用性解决方案最高可用性解决方案（（（（MAA)最佳的数据保护和高可用性最佳的数据保护和高可用性最佳的数据保护和高可用性最佳的数据保护和高可用性

Data Guard

Data Guard SYNC / ASYNC

Standby SitePrimary Site

PrimaryDatabase

Active Standby

Database

Data Guard Broker

Enterprise Manager Grid Control


全面的数据安全全面的数据安全全面的数据安全全面的数据安全

• Oracle Advanced Security

• Oracle Identity Management

• Oracle Database Vault & Label Security

• Oracle Audit Vault & Total Recall• Oracle Audit Vault & Total Recall

• Oracle Database Firewall

• Oracle Configuration Management

• Oracle Data Masking

DataDataData


Exadata 实现实现实现实现数据数据数据数据库库库库的整合的整合的整合的整合建立一个建立一个建立一个建立一个 “Database-as-a-Service” 平台平台平台平台

- 大内存大内存大内存大内存– 多个数据库可以被整合

– 在一个节点上的多个小数据库

– 采用RAC的跨多节点的大数据库

- 极限性能极限性能极限性能极限性能– OLTP, DW, 数据挖掘, 批处理, 报表, 数据加载, 数据备– OLTP, DW, 数据挖掘, 批处理, 报表, 数据加载, 数据备

份, 管理文件

– 加密, 数据压缩

- 工作负载隔离工作负载隔离工作负载隔离工作负载隔离– 服务水平管理（SLAs 和 QoS)

– CPU 和 I/O 资源管理

– 实例分割

降低了数据中心的成本，提高了系统利用率，实现应用集成

降低了数据中心的成本，提高了系统利用率，实现应用集成


Exadata for SAPCertification announced June 10, 2011


Oracle和SAP已宣布，Oracle Exalogic与Exadata认证SAP。使SAP客户能整合ERP应用和BW应用到企业私有云平台上，提供最佳性能、可用性和可扩展性。

Exadata 为SAP系统提供最佳性能

Oracle作为业内的领导者作为业内的领导者作为业内的领导者作为业内的领导者

• 与一个业内的领导者成为合作伙伴是非常重

要的

• Oracle的竞争者跟随着Oracle的技术方向

- Oracle在2008年发布Exadata第一版, Exadata第

二版在2009年发布, 2010年发布X2-2和X2-8版本

- EMC Buys Greenplum – July 2010- EMC Buys Greenplum – July 2010

- IBM Buys Netezza – Sept 2010

- HP Buys Vertica – Feb 2011

- Teradata Buys AsterData – March 2011

• EMC, IBM和HP需要几年的时间才能达到

2008年Exadata的水平


• 革命性技术

• 客户案例



在大型日本电信公司在大型日本电信公司在大型日本电信公司在大型日本电信公司3台台台台Exadata取代取代取代取代36台台台台 Teradata

3 Exadata 机架

150% moredata capacity

• 获得8倍的性能提升

• 7小时处理十亿条CDRs话单(原来需要25个小时)

• 只需1/10的能耗

• 节省超过一半的数据库运行维护成本12:1 成本

36 Teradata 机架

Twice the operational cost of Exadata

12:1advantage DBA


某省移动某省移动某省移动某省移动OSS系统现状和问题系统现状和问题系统现状和问题系统现状和问题

类别类别类别类别系统名称系统名称系统名称系统名称

专业网管类话务网管（亿阳）、数据网管（亿阳）、传输网管（亿阳）、综合告警（亿阳）、综合监控（亿阳）、信令检测CS/PS（中创）

信息管理类地理信息系统（亿阳）、信息发布平台、集中运维平台（泰岳）、EMOS（泰岳）

综合类综合分析系统（诺西）

综合告警

集中运行维护平台话务网管

信息发布平台综合分析

EMOS

•专业网管无法面向全业务形成关联的业务监控视图，无法形成端到端的业务质量分析。

•独立的系统和分散的数据，无法实现数据的共享，充分发挥数据的价值。

•专业网管数据开放性不足，数据组织方式不同，造成数据的共享使用困难。

•来自信令监测、业务拨测、EMOS 、BOSS 等系统的数据无法进行综合利用。

•多系统数据存在冗余，给使用和维护都带来额外的工作量。

•功能相似、风格不同的各专业网管系统无法适应集中管理的要求。© 2011 Oracle Corporation – Oracle Confidential – 15 –

某省移动网管某省移动网管某省移动网管某省移动网管IT规划演进路线规划演进路线规划演进路线规划演进路线

服务器服务器

网络设备网络设备

应用应用11 应用应用22 应用应用33

系统软件系统软件（数据库、（数据库、中间件）中间件）

服务器池服务器池

网络池网络池


系统软件系统软件（数据库、（数据库、中间件）中间件）


系统通用软系统通用软件资源池件资源池

网管系统基础架构规划演进路线

存储备份池存储备份池

第一阶段第一阶段————集中存储备份集中存储备份

存储备份池存储备份池

第二阶段第二阶段————集中集中计算平台计算平台

基础资源池基础资源池

第三阶段第三阶段————动态基础架构动态基础架构

2006-2009年年年年：：：：建立存储备份资源池建立存储备份资源池建立存储备份资源池建立存储备份资源池，，，，网管网管网管网管系统存储备份资源统一采购系统存储备份资源统一采购系统存储备份资源统一采购系统存储备份资源统一采购、、、、统一部署统一部署统一部署统一部署、、、、统一分配统一分配统一分配统一分配。。。。

2010-2011年年年年：：：：建立服务器和数据库资源池建立服务器和数据库资源池建立服务器和数据库资源池建立服务器和数据库资源池，，，，各网管系统服务器各网管系统服务器各网管系统服务器各网管系统服务器、、、、数据数据数据数据库资源统一采购库资源统一采购库资源统一采购库资源统一采购、、、、统一部署统一部署统一部署统一部署、、、、统一分配统一分配统一分配统一分配。。。。

2012年年年年-2013年年年年：：：：建立网络建立网络建立网络建立网络、、、、存储备份存储备份存储备份存储备份、、、、主机主机主机主机、、、、数据库数据库数据库数据库、、、、中间件的共享资中间件的共享资中间件的共享资中间件的共享资源池源池源池源池，，，，实现硬件和通用软件实现硬件和通用软件实现硬件和通用软件实现硬件和通用软件资源的集中管理和自动化调资源的集中管理和自动化调资源的集中管理和自动化调资源的集中管理和自动化调配配配配。。。。


某省移动某省移动某省移动某省移动OSS系统数据库整合目标架构系统数据库整合目标架构系统数据库整合目标架构系统数据库整合目标架构

OSS在线事务库

OSS数据仓库

OSS统一采集库 DB Server层

共享Exadata所有存储资源智能存储层

OSS在线事务库：整合OSS域所有OLTP类系统的数据库（如话务网管，EMOS等），

不包含统一采集平台部分；

OSS数据仓库：整合OSS域所有OLAP类系统（如综合分析，信令监测等）数据库；

OSS统一采集库：按照总部综合采集规划，试点建设统一集中采集平台；


分阶段实施分阶段实施分阶段实施分阶段实施• 经过对移动某省OSS系统现状的分析、梳理，按阶段实施基本

思路，能够确保项目规模可控、易协调，并能在过程中积累经

验帮助用户更顺畅的实施后续阶段：

- 阶段1：在6月30日前按照原数据设计整合到Half Rack的Exadata上1、网络客服支撑系统（已上线）

2、网络运行维护系统（已上线）

3、网络运行分析系统 (包括2套系统已上线）

4、网优监控系统4、网优监控系统

5、信令（PS/CS/信令监测） (包括2套系统已上线）

6、话务网管（当前），历史库数据迁移完成

7、EMOS (已上线）

- 阶段2：在2011年底前逐步将剩余的系统迁移上线1. 基站动环监测

2. 地理信息系统

- 阶段3：新购Exadata 为集中系统实现可查询的容灾备份

- 目前共上线11套系统


下一步灾备规划下一步灾备规划下一步灾备规划下一步灾备规划

• 另外配置一套Exadata Quarter Rack为集中系统实现可查询的远程容灾

RAC

ASM

SecureBackup

专业网管

管理信息系统

信令监测

• 冗余硬件– Servers, Storage, Network

• 数据库级HA– 保证主机最大性能的容灾

• 完整实时的远程查询完整实时的远程查询完整实时的远程查询完整实时的远程查询

Active Dataguard

Flashback

Online Redefinition

信令监测

综合分析


某省移动某省移动某省移动某省移动Exadata架构图架构图架构图架构图

BOSS外围系统整合

节点2(DM0102)节点1(DM0101)

DM0101 DM0102

Exadata为1/4配，选用高容量2T硬盘

Quarter Rack

四分之一配

DM0101 DM0102

目前上线系统

SP薪酬结算系统

数据稽查系统

报表系统（该系统为CRM系统的子系统）

CRM历史库


上线前后的性能对比上线前后的性能对比上线前后的性能对比上线前后的性能对比

薪酬结算系统薪酬结算系统薪酬结算系统薪酬结算系统原有生产系统为Sun E25K（28颗cpu）服务器，EMC DMX4阵列

原来的系统原来的系统原来的系统原来的系统 Exadata系统系统系统系统结果比较结果比较结果比较结果比较

月结处理运行2小时多 20分钟性能提高6倍

压缩效果原数据2560GB 压缩后320GB 压缩达到8倍

报表系统报表系统报表系统报表系统（营帐系统的子系统）

该生产系统主机为Sun E25K（32颗cpu）服务器，EMC DMX4阵列


报表生成运行2.5小时 30分钟性能提高5倍

前台查询平均用时0.48秒平均用时0.08秒性能提高6倍

压缩效果原数据6720GB 压缩后560GB 压缩达到10－14倍平均12倍


上线前后的性能对比上线前后的性能对比上线前后的性能对比上线前后的性能对比

CRM的历史库的历史库的历史库的历史库原数据库为Ora该生产系统主机为Sun E25K（32颗cpu）服务器，EMC DMX4阵列


报表生成运行2.5小时 30分钟性能提高5倍

前台查询平均用时0.48秒平均用时0.08秒性能提高6倍

压缩效果原数据2045GB 压缩后184GB 压缩达到10－14倍平均12倍


某省移动经分系统对比测试某省移动经分系统对比测试某省移动经分系统对比测试某省移动经分系统对比测试现有系统硬件：

• 2台Sun E25K

• 每节点28 CPU / 224 GB内存

网络：

• Public网络为2块1GB的网卡绑定

• Private(Interconnect)网络为4块1GB的网卡绑定

存储：

• EMC DMX-4/DMX-3/CX4-960，IBM 4800

• 总容量大概120TB

测试系统测试基于Oracle Exadata 四分之一配置：

• 2个数据库服务器

• 2个四核 Intel® Xeon E5540处理器 (2.53 GHz)

• 每节点72 GB内存

• 每节点带有512MB电池支援写缓存的磁盘控制器HBA

• 4个146 GB SAS 10,000RPM硬盘

• 双端口QDR InfiniBand Host Channel Adapter

• 4个内置千兆位以太网接口

• 2个36端口QDR (40 Gb/秒)InfiniBand交换机• 总容量大概120TB

• 每节点16块4GB的HBA卡

软件：

• Oracle DBEE 10.2.0.4

• RAC

• 经分应用

期望：

• 当前应用性能：主要的关键报表大概需要6-7小时生成

• 用户期望：2小时以内生成报表

• 2个36端口QDR (40 Gb/秒)InfiniBand交换机

• 3个Sun Oracle Exadata Storage Server，带有36个600 GB SAS 15,000RPM硬盘，包含1.1 TB Exadata Smart Flash Cache

软件：

• Oracle数据库11gR2

• 经分SQL语句与数据，大概180GB左右，29亿条记录


某省移动某省移动某省移动某省移动经分系统对比测试经分系统对比测试经分系统对比测试经分系统对比测试• 硬件配置：

- 2台Sun E25K，每节点28 CPU / 224 GB内存

- EMC DMX-4/DMX-3/CX4-960，IBM 4800

- 总容量大概120TB，每节点16块4GB的HBA卡

• 软件：

- 当前应用性能当前应用性能当前应用性能当前应用性能：：：：主要的关键报表大概需要主要的关键报表大概需要主要的关键报表大概需要主要的关键报表大概需要6-7小时生成小时生成小时生成小时生成

- 用户期望用户期望用户期望用户期望：：：：2小时以内生成报表小时以内生成报表小时以内生成报表小时以内生成报表

• 本次测试主要基于经分系统中一个29亿条记录的表，和相关典型的真实生产应用在Exadata中的测试完成。• 本次测试主要基于经分系统中一个29亿条记录的表，和相关典型的真实生产应用在Exadata中的测试完成。

• 通过在Exadata 1/4配置上完成的结果可以看到

- Exadata混合列压缩（EHCC）平均压缩比可达将近将近将近将近8倍倍倍倍，最低压缩比也在4倍以上倍以上倍以上倍以上。

- ¼配置IO吞吐可达4.5GB/s，而flash cache的IO吞吐可达10.8GB/s。

- 真实的应用程序在1/4配置中的运行时间为6分钟分钟分钟分钟，而在生产环境中需要17小时小时小时小时，性能提高提高提高提高168倍倍倍倍。而

优化后性能还可再提高20%。

- 基于复杂查询（星形）的执行时间基本在2分分分分40秒秒秒秒左右完成，而在生产环境中相似、且数据量较小

的查询需要30分钟分钟分钟分钟以上，性能提高12倍以上倍以上倍以上倍以上。


• 革命性技术

• 客户案例



• 测试产品：Oracle Exadata数据库一体机

• 测试场景：选用中国电信EDA技术能力评测规范中EDW

入网测试的测试场景、测试数据、测试步骤和评测标准

- 测试数据量约为4TB，明细账单数据54亿条，语音话单数据90亿

测试概述测试概述测试概述测试概述

条

• 测试范围包括数据装载，查询性能，数据压缩，高可用性

，可扩展性，可管理性等6大类共23项测试

• 测试地点：中国电信股份有限公司广东研究院


CellNodeCellNodeCellNodeCellNode CPU(%)CPU(%)CPU(%)CPU(%)MemoryMemoryMemoryMemoryFree(MB)Free(MB)Free(MB)Free(MB)

ReadReadReadReadMB/sMB/sMB/sMB/s

WriteWriteWriteWriteMB/sMB/sMB/sMB/s

Reads/sReads/sReads/sReads/sWrites/Writes/Writes/Writes/ssss

DiskDiskDiskDiskQueue/diskQueue/diskQueue/diskQueue/disk

DiskDiskDiskDiskUtilUtilUtilUtil%/disk%/disk%/disk%/disk

dm01cel01 69.00 8159.57 1824.02 0.25 49350.00 19.50 1867801.50 1867801.50

dm01cel02 74.50 8047.78 1809.70 0.26 46813.50 22.00 1853137.50 1853137.50

dm01cel03 69.50 8091.67 1807.70 0.35 53483.50 25.00 1851085.00 1851085.00

dm01cel04 69.50 8008.71 1843.79 0.23 50540.50 19.00 1888046.00 1888046.00

Oracle Exadata IO吞吐量吞吐量吞吐量吞吐量全表扫描全表扫描全表扫描全表扫描-单任务单任务单任务单任务

• Oracle Exadata 1/2机架配置磁盘IO吞吐率可达12.74GB/s，而Flash Cache的IO吞吐率可达37.5GB/s。

dm01cel04 69.50 8008.71 1843.79 0.23 50540.50 19.00 1888046.00 1888046.00

dm01cel05 69.50 8023.52 1806.78 0.18 49448.50 17.50 1850145.50 1850145.50

dm01cel06 69.50 7650.26 1821.89 0.10 54802.00 7.00 1865616.00 1865616.00

dm01cel07 71.50 8117.54 1832.74 0.15 48404.00 11.00 1876726.00 1876726.00

Average 70.43 8014.15 1820.95 0.22 50406.00 17.29 1864651.07 1864651.07


• 通过在Oracle Exadata Database Machine X2-2 1/2机架配

置上完成的测试结果可以证明，Oracle Exadata在大数据

量下的性能、可用性、扩展性及可管理性等，完全可以满

足中国电信的需求。

测试结论测试结论测试结论测试结论

• 本次测试的结果既可以作为中国电信集团及省分公司

ODS/EDW系统选型的依据，又可以作为中国电信集团及

省分公司其他系统入网选型的参考。


Documents

电信行业数据库云平台案例分享 - Oracle€¦ · • 中国电信广研院Exadata 测试汇报 内容. Exadata 是一个革命性的技术 性能、、容量和价值上的巨大跳跃容量和价值上的巨大跳跃

电信行业数据库云平台案例分享 - Oracle€¦ · • 中国电信广研院Exadata 测试汇报内容. Exadata 是一个革命性的技术性能、、容量和价值上的巨大跳跃容量和价值上的巨大跳跃