Upload
others
View
0
Download
0
Embed Size (px)
Citation preview
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
云为什么成为今天的焦点
Oracle Confidential – Internal/Restricted/Highly Restricted 2
信息量
移动应用增长85%
到2018 SaaS花费达到 @ 18% CAGR
未来5年采用PaaS @ 22 % CAGR
成人使用社交媒体
到2018公有云增长 @ 22.8% CAGR
大数据增长
$27B
$53B
90%
90%
$127B
>800%
全球云开销 (in Billions)
2014 2018
高速数据增长和广泛应用的社交,移动和全球业务模式导致IT云脚步迅速增加。
56.6
127
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
你的困境:企业数据库平台面临的问题
Oracle Confidential – Internal/Restricted/Highly Restricted 3
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
Oracle的解决之道--构建数据云平台
Oracle Confidential – Internal/Restricted/Highly Restricted 4
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
全面的部署选择 部署在任何地方
Oracle Confidential – Internal/Restricted/Highly Restricted 5
私有云 Oracle公有云
任意地点部署
相同 技术
相同 标准
相同 产品
私有本地部署和Oracle云之间 透明地移动工作负载
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
私有数据库云可能的解决之道—虚拟化?
• 虚拟机能够有效地减少服务器的数量
• 但是虚拟机却实际上增加了软件的负担
– 仍然有上百套数据库及OS系统需要维护、备份、补丁、升级、监控和优化
– 性能损耗、功能受限,管理和优化部署在虚拟机上的数据库的性能甚至更加困难
– 无法有效节约软件License,虚拟化增加了VM层软件的额外管理工作量
• 不同标准的系统之间信息共享困难,编码转换工作量大、实效性低,信息孤岛仍然存在
Oracle Confidential – Internal/Restricted/Highly Restricted 6
虚拟机增加了软件的数量
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
面向云计算和大数据的新一代数据库架构
Oracle Confidential – Internal/Restricted/Highly Restricted 7
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
面向云计算和大数据的新一代数据库架构
Oracle Confidential – Internal/Restricted/Highly Restricted 8
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
企业采用大数据面临的挑战
全数据管理
关注新数据,融合全数据,深入的洞察
力创造更大价值
Hadoop/NoSQL需要与现有数据架构
相融合,避免形成另一个“烟囱”架构
开发和分析
快速响应业务的需求,加快上线,支持
业务创新和提高竞争力
Hadoop/NoSQL等开源技术开发困难,
IT人员需要新的技能和经验积累
安全 遵从
法律法规遵从的要求;避免数据泄漏,
防止负面事件响应企业形象,
Hadoop/NoSQL等开源技术需要遵从
企业IT的合规、审计和安全要求
管理和运维
更关注在端到端的业务流程和模型,IT
人员总量相对控制,不会大幅度扩张
大型Hadoop/NoSQL集群的建设、管
理维护的难度和复杂性很高
业务部门 IT部门
9
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
统一的数据资源池
Oracle大数据解决方案 端到端的解决方案加快上市时间和降低风险
• 单项先进和集成化 • 加速上线获得回报 • 简化架构和管理 • 单一客户服务支持
数据源 获取 组织 分析 决策 行动
Oracle Database
Oracle Industry Models
Oracle Advanced Analytics
Oracle Spatial & Graph
大数据一体机
Hadoop商业版
NoSQL DB
Oracle R
关系型数据库
内存选项/多租户
高级分析
地理和图形选件
Exadata
Big Data Connectors
OD
I / OG
G
Oracle Big Data Discovery
BIG DATA SQL
ADG/OGG(灾备)SECURITY(安全)OEM(管理)EDQ(数据质量)
Exalytics
BIEE/DV
流数据 Stream Explorer/
Coherence 大数据应用
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
Oracle提供实时/批量大数据收集工具
Flume/Kafka Hive on MR, Tez, Spark
Logs
OLTP DB
SQOOP
OGG
Pig on MR, Tez, Spark
ODI
SQOOP
Any DW
OGG
Spark
Oozie
OEDQ OEMM
Data Validation & Cleansing
Metadata Mgmt & Lineage
API/File
Hive/HCat, HDFS,HBase
Hive/HCat, HDFS,HBase
NoSQL
Flume/Kafka
Load to Oracle
Oracle DB Big Data SQL
批量数据收集(ODI)
• 下一代E-LT技术,装载速度比普通工具快10倍以上
• 支持超过200种不同的数据源和目标数据库,支持Hadoop平台
• 和其他工具相比总体拥有成本更低
• 对Oracle数据库提供先进性能
实时数据同步(OGG)
• 更快的数据同步和复制工具
• 无停机,保证事物可靠性
• 支持多种数据源和目标
• 灵活的1对1/1对多/多对1配置
• 更小化影响数据源
HDFS (Files)
HBase (NoSQL)
Hive / Hive Streaming (SQL)
Flume & Storm (Streaming)
Kafka (MPP Pub/Sub)
Spark Streaming (Machine Learning)
Capture Database Transactions and Deliver to Big Data in Real-Time
Cap
ture
Trai
l
Ro
ute
De
live
r
Pu
mp
GoldenGate JMS JMS
11
Oracle DB
获取
组织
分析
决策
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
• 灵活的数据模型 – 键值,Avro配置,RDF图,类Table
– 读取/插入/更新/删除
• 扩展性 – 水平扩展、劢态的数据分区与分发
– 通过智能驱劢进行优化的数据访问
• 高可用性 – 一个或者多个数据副本
– 快速的主节点切换,没有单点故障
– 通过不同地点的数据副本实现灾备
• 透明的负载均衡 – 数据可以从主节点或者数据副本节点读取
• 适用性广泛 – 可配置的事务支持,持久化和一致性策略
Oracle NoSQL 数据库 分布式的、高可扩展性的键-值数据库
分片 0
复制节点
(主) 复制节点(副本)
复制节点(副本)
分片 N
复制节点
(主) 复制节点(副本)
复制节点(副本)
…
分区
哈希函数
键空间
SN1 SN2 SN3
获取
组织
分析
决策
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
Hadoop的先进支撑平台
Big Data Appliance X6-2
Starter Full
Multi-Rack
•软硬一体化集成设计,规避开源自建高风险 •全栈调优、先进实践、性能卓越 •完整的非结构化数据存储/计算/分析/挖掘/管理的平台 •开箱即用,快速上线部署,缩短项目周期 •全线商业支持,简化后期维护 •与数据库生态系统极佳融合 •企业级的安全管控 •方便的水平扩展,适应长远发展 •绿色环保,高密度存储,占地面积小
• 集成的软件: – Oracle Linux和Oracle Java VM – Cloudera商业化Hadoop版本及选件 – Cloudera Manager – Oracle R distribution – Oracle NoSQL 数据库
• 硬件: – 18台Sun PC服务器,每台
• 2C*22核 E5 2699 V3,总792核 • 8*32 =256GB内存,总4608GB内存 • 12块 8TB SAS盘,总1728 TB存储容量
– 内置40Gb InfiniBand交换机 – 用于管理的万兆交换机
– 初始化配置6节点,可按需扩展, – 到18个机架不需要外购网络设备
获取
组织
分析
决策
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
集成:强强联手,卓越性能,市场认可
14
简化 融合
安全 集成
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
Oracle Big Data SQL实现跨平台统一数据访问
• 统一查询数据:跨不同平台:Oracle数据库,Hadoop 和NoSQL DB
•保护现有投资:不需要任何修改就可以直接运行Oracle SQL查询
• 卓越性能:Hadoop和NoSQL上的智能扫描通过解析和智能地过滤各自节点数据,存储索引快速定位数据,这些都有助于大幅度提高性能
• 适用广泛:支持用户自建的系统和Oracle集成化设备;支持目前主流领先的Hadoop版本
• 安全管控:Oracle数据库安全特性扩展到新技术平台,控制对敏感数据的访问
• 功能丰富:提供从Oracle数据库复制数据到Hadoop的工具:Copy to Hadoop;以及通过Hadoop可以直接访问Oracle数据库中的数据的工具Oracle Table Access for Hadoop and Spark
{MapReduce} {APIs} SQL
Oracle Big Data SQL 3.0
获取
组织
分析
决策
Cloudera 5.5及更高 Hortonworks 2.3及更高 Database 12C
BDA Exadata
X86集群(Linux OL6,RHEL6)
或
15
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
Oracle为企业提供丰富的大数据分析工具 合理的成本投入获得更好业务受益
传统分析
解决方案
数小时、数天或
数周
数据提取
数据准备和
转换
数据挖掘
模型构建
数据挖掘
模型“计分”
数据准备
以及转换
数据导入
模型“计分”
嵌入式数据准备
数据准备
模型构建
Oracle 数据挖掘
和探索
数秒、数分钟
或数小时
基于机器学习的数据挖掘(OAA)
基于人员经验的数据探索(BDD)
利用数学算法,从数据特征和已有结果中推演数据模型和进行预测,提供图形化界面和企业级R语言支持,满足不同分析人员需求
•实现对于全数据的挖掘和探索 •利用服务器并行处理能力和内存计算能力,高性能 •直接访问Hadoop或者Oracle数据库中数据 •所见即所得 •图形化,简单易用,快速实现
节省
共享 探索 转换 浏览 发现
获取
组织
分析
决策
17
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
Big Data Discovery:Hadoop的可视化和探索工具
不需要进行建模即可以交互式访问和探索
18
发现 浏览 转化 探索 共享
上传数据,对数据集摘要进行概要查看 对数据集各个字段分布进行浏览
支持基于web方式对数据集的字段进行处理和转化 建立项目,对数据集从不同角度探索和发现
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
Oracle高级分析支持企业深度挖掘分析
满足不同角色需求,合理的成本投入带来数据收益更大化
客户特征分组 客户流失预测
客户价值分组
产品购买关联
客户购买预测
趋势预测分析
Oracle R Enterprise
• 十分流行的统计分析编程语言与环境,广泛的统计与高级分析函数
• 但开源有诸多不足,Oracle做了企业级优化
• 与Oracle数据库集成以获得扩展性,可直接访问Oracle数据库内数据,利用Oracle数据库服务器的并行处理能力
• 分析结果直接展示在BI工具 • 可使用Hadoop数据和并行能力
Oracle Data Mining
• 完整的库内数据挖掘解决方案 • 自动化数据库内的知识发现过程 • 15个内置的核心数据挖掘算法 • 全新的图形化界面和流程实现 • 不需要编程,通过拖曳和配置即可利用数据挖掘,实现预测分析
• 可利用Oracle数据库和Exadata强大的处理能力
• 利用内存计算获得极速性能 • 与OBIEE完美集成
R
获取
组织
分析
决策
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
OBIEE
Oracle Database Enterprise Edition
Oracle Advanced Analytics:统一数据挖掘和分析 满足不同角色需求,合理的成本投入带来数据收益更大化
Oracle Advanced Analytics - Database Option 数据库内挖掘+企业版 R语言
可扩展、分布式、并行、库内机器学习
SQL Developer/ Oracle Data Miner
Applications
R Client
数据与业务分析师 R 程序员 业务分析师、决策者 应用用户 用户
平台 Hadoop
ORAAH 并行
分布式 算法 X86服务器
R
20
Big Data SQL
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
Oracle 完整的大数据展现平台
•交互式仪表盘,即席查询, 通过ROLAP工具进行数据钻取
查询,报告和分析
•随时随地对数据洞察的能力 移动商务智能
•提供战略地图、绩效树、绩效轮多种KPI监控
平衡积分卡与战略管理
•多维度的联多维度工具, what-if 分析, 情景预设, 规划
多维度的联机分析技术
•大容量,完美像素的布局和印刷 产品报告
•数据混搭及全新的图形化信息探索工具 可视化分析
OBISE
BI Publisher
ODV
BI Mobile Oracle BI Suite
Foundation Edition
Oracle Data Visualization
Essbase
OSSM
获取
组织
分析
决策
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
Exadata 企业应用/数据仓库
统一的数据资源池
Big Data Appliance 分布式大数据平台
新型数据 业务数据
15TB / hour 10x Faster
Oracle解决方案支持构建企业级全数据池
助力数据获取和组织,集成和管理
Oracle Big Data Connectors
商业化Hadoop
Oracle R
Oracle NoSQL DB
Oracle数据库
内存选项/多租户
高级分析
地理和图形选件
Oracle Big Data SQL
OGG ODI
OGG ODI
X86 服务器
X86 服务器
X86 服务器
X86 服务器
X86 服务器
X86 服务器
简化 融合
安全 集成
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
统一SQL访问全数据。丰富的SQL语法支持,高性能数据访问,重复利用已有工具和技能,快速开发和上线,加快分析成果转化,提高竞争力。
结构化和非结构化数据统一安全管控。帮助企业构建统一的数据安全体系。防止数据泄漏,增强访问审计。保证数据安全,降低风险。
工程化系统开箱即用,简化架构和管理。生态系统完善,提供一系列商业化成熟工具支持,提供企业级特性支持,总体拥有成本低。
企业全数据管理平台。支持结合结构化和非结构化数据,进行探索,分析和挖掘。预测更准确,洞察更深入。更好支持业务,增加收入。
简化 融合
安全 集成
Oracle企业级大数据解决方案的价值
23
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
Oracle 数据库云 — 服务概述
Oracle Exadata 服务 性能和可用性更高的数据库平台
主要用例:业务关键应用和高密度数据库整合
Oracle 数据库备份服务 通过按需扩容消除存储硬件计划
透明的管理、冗余性和高可用性
主要用例:企业级数据安全保护和隐私
Oracle 数据库即服务 功能齐备的专用单节点/集群(RAC)数据库
主要用例:开发、测试和部署新的和现有的企业应用
Oracle 多租户(模式)服务 全托管数据库模式即服务
通过 APEX、SQL Developer、Java 云服务和 RESTful Web 服务实现全面应用开发
主要用例:开发和部署部门应用
100% 兼容内部部署应用
完全自动化或托管式备份、补丁安装和工具
易于移动位置或创建混合云
只需点击几下鼠标即可进行供应
所有 Oracle 数据库服务
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
一键式 补丁安装
备份/恢复 以及 HA 和 DR
供应简单
所有语言 高级安全性 本地和远程管理
数据库即服务 — 自动化的云工具
BP 12.1.0.2.1
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
更快的上线和投入使用,相同的技术,支持根据需要进行迁移
Oracle大数据相关云服务
• 专用的 – 专有的实例交付持续化高性能
– 相互不会干扰
• 有弹性的 – 从小开始,根据需要扩展
• 安全的 – 扩展Oracle数据库安全到Hadoop和NoSQL
• 全面的
– 包括:集成工具,准备工具,数据存储和组织,R,地理和图形选件,大数据连接器等
Big Data Cloud Big Data
Preparation Cloud Big Data
Discovery Cloud
Store, Manage & Query Prepare & Enrich Discover & Analyze
SQL
GoldenGate Cloud Data Integration
Cloud DV & BI Cloud
ETL
26
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
对公有云迟疑不前的原因
27
以接近零迟延与后端主机、数据库、ERPs等等连接。
专用的基础设施提供较低的延迟。
反应延迟
符合法规,法律和隐私要求
敏感数据放在本地
自定义安全标准
数据主权
对业务核心系统的100%绝对控制
自己单独使用
防火墙、负载均衡、硬件、VPN等等
极高的 SLAs
控制
在本地运行云的所有功能
根据业务需求选择公有云和本地服务
贯穿于公有云和本地服务的共同经验
选择
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
Customer Data Center
Firewall
Oracle Cloud Machine:在你的防火墙之后
CLOUD at CUSTOMER Public Cloud
Oracle Exadata Cloud Machine
2HCY16
Oracle Big Data Cloud Machine
2HCY16
Oracle Cloud Machine
Hardware
• Server
• Storage
• Network
IaaS
• Compute
• Block Storage
• Object Storage
• Virtual Network
PaaS (Option)
• Database
• Java
• Integration
• …
• ...
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
公有云在客户数据中心的延伸
Oracle IaaS
Oracle PaaS
标准的硬件配置 •服务器
•内置存储
•高速网络设备
标准的硬件配置
•弹性计算服务
•块存储与对象存储
•网络服务
Oracle IaaS
•数据库云服务(DBCS)
•中间件云服务(JCS)
•集成云服务(ICS)
Oracle PaaS
工程化系统 组成
服务能力
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |
Oracle大数据在全球成功案例(部分)
Copyright © 2014 Oracle and/or its affiliates. All rights reserved. | Oracle Confidential – Internal/Restricted/Highly Restricted 31