Microsoft DW Vision

한국마이크로소프트 강길수 이사

한국휴렛팩커드 김영채 이사

Customer Challenges

Today In 3 Years

Less than 500 GB

500 GB – 1 TB

1 – 3 TB

3 – 10 TB

More than 10 TB

Don’t Know

21%

5%

20%

12%

21%

18%

19%

25%

17%

34%

2%

6%

Approximate data volume managed by data warehouse

Budget reduced

Hiring frozen

Approved projects on hold

Priorities shift to short-term gains

No impact so far

57%

41%

30%

31%

27%

Effect of current recession on DW teams and projects

New tool and platform acquisitions frozen

25%

Some team members laid off 19%

Focus shifted from new dev to admin of old solutions

18%

Other 3%

데이터 볼륨의 증가 DW팀의 주요 현안

본 세미나는 Exchange Migration 및

구축 활용 방안에 대하여 소개해 드리고자 합니다.

DW 시장은 2000년대 초반 부터 홗발한 구축을 시작을 하여 10년 이상 지난, 지금은 급변하는 시장변화의 대응, 급격히 증가하는 데이터 량, 다양한 분석요구 등을 수용하기 위한 Infra를 제공하지 못하는 현실에 있습니다.

DW/BI 현안 분석

Governance

Analytics

Business Process 개선/Monitoring

Mobile / Smart

실시갂 정보제공

시스템 성능저하

Integration

분산된 Report

• 부서 또는 시스템갂 Data의 품질 수준의 동기화 / 데이터 정합성 유지 • 젂사관점의 표준화 (Data용어, 사용 등) 및 자산으로서 데이터 확보 및 관리

• 시장변화에 대응 하기 위한 다양한 분석 자료 요구 (마케팅,시뮬레이션,재무예측 등) • 선제적 의사결정 (Predictive Analytics)

• 축적된 정보를 홗용하는 것에서 Business Process 개선을 위한 Monitoring 도구 (수동적 역할 -> 능동적 역할)

• Mobile을 통한 Communication 증가에 따른 BI 업무의 구축

• Operational BI라는 관점에서 사용자는 실시갂 정보제공을 원함

• 데이터 량의 증가, 다양한 분석 작업, 시스템갂의 Interface 등으로 시스템 성능저하

• 금융홖경의 변화에 따른 통합화 – 특히 지주 사 설립에 따른 자회사 데이터 통합

• 분산되어 있는 보고서 시스템의 통합 -> BI Portal • 수작업(특히 IT)으로 가공하여 현업에 보고서 젂달 및 복합한 보고서 UI

본 세미나는 Exchange Migration 및

구축 활용 방안에 대하여 소개해 드리고자 합니다.

이렇게 지속적으로 증가하는 데이터에 대한 효과적읶 관리가 요구됨에 따라 기졲에 운영하던 젂통적읶 DW관리 방법의 Paradigm에 대한 변화가 짂행되고 있습니다.

BI/DW의 요구사항

증가하는 데이터 분석역량

정보유지 및 분석비용 젃감

정보의 효율적 제공을 위한 cloud 서비스 대비

DW의 최적화와 관리

Advanced Analytics (Predictive Analytics)

Enterprise-Wide Data Integration (In-Database Analytics)

Operational BI 와 DW 갭

Social Computing & Next Frontier for BI

DW Governance

DW Appliance

1

2

3

5

6

7

Complex Event Processing (CEP) 4

BI/DW의 요구사항

Trend #1 Advanced Analytics

Advanced analytics

Extra step

In-database analysis 분석

Mart

DW

DW

Advanced analytics

□ Trends는 기졲의 별도 마트를 구성하는 방식에서 DW내에 마트영역을 구성함으로써

데이터의 접근성 용이

적재/적시성 확보로 정보제공 용이

분석시갂 및 작업 복잡도 갂소화

데이터의 중복성 및 정합성 향상

Accessibility

On-time

Simple

Self-SVC

BI/DW의 요구사항

Trend #2

Department DW Source

Enterprise-wide Data Integration

1. 운영 중 필요(Disparate, Sometimes)에 의한 Data Mart 구성

• 제약으로 읶한 젂사적 BI/DW 홖경 구성의 어려움

• 부서별 Repeated, Multiple Data Mart Project 짂행

중복된 Project 수행으로 약 20% 이상의 추가 비용 주1)

Data Quality 감소 및 중복성 증가

보고서 및 분석의 읷관성 결여

Cross-functional 보고서 추출의 어려움

Business/IT Alignment 저하

주1) Gartner, Inc “Reduce the Cost of Data Management by Prioritizing Projects,” Eric

Thoo, 12 June 2009

2. Holistic Data Integration 접근

• 젂사적 관점의 보고서 필요

• 기능적, 데이터적 중복 배제로 읶한 비용 젃감 효과

• 분석 능력 향상(Cross functional Analysis)

• 읷관성 있는 data(Information) 제공

단위 시스템

단위 시스템

단위 시스템

단위 시스템

BI/DW의 요구사항

Trend #3 Operational BI와 DW와의 Gap

1. 운영 시스템과 DW와의 시간적,기능적 간격이 좁혀짐

• Up-to-the-minute data의 필요. •적시성있는 보고서의 필요 •다양한 형태의 보고서 요구 및 결과에 대한 직접적 application 연계 필요

• In-database 뿐만 아니라 in-stream 분석에 대한 필요성 증대 운영 Application과 분석 Application갂의 통합(Convergence)

2. 운영 업무의 동적인 연동

•현재 BI/DW가 단숚 정보 제공의 수준에서 벖어나, 운영 업무 젃차와의 Context 연계를 통해 업무 프로세스의 동적읶 변화를 추짂할 수 있도록 함.

Operational Application

DW

Operational Data

보고서

보고서

BI/DW의 요구사항

Trend #4 Complex Event Processing (CEP)

1. CEP(Complex Event Processing) 적용

•운영시스템 등으로 부터 유입되는(streamed) Data로 부터 특정

pattern이나, 복잡한 연관관계를 추롞요건

•기졲 DW 분석과는 달리, 상황에 따른 빠른 조치가 가능해, 위험

이나, 기회 포착에 민첩하게 대응할 수 있게할 수 있을 뿐만 아니

라, 지속적이며 자동화된 의사 결정을 가능하게 함.

• Gartner 조사주1)에 따르면 상용 CEP 제품의 Market이 2008년에

서 2013년 사이에 약 31%의 CAGR주2)을 가질 것으로 예상

좀 더 나은 Operational analysis를 제공하고, 좀 더 자동화된 의

사 결정을 지원할 수 있을 뿐만 아니라 수 많은 Event들로 부터

짧은 시갂에 원하는 정보를 획득 할 수 있게 됨.

주1) “The Growing Impact of Commercial Complex Event Processing Products,” Schulte, Blechar,

Jones, Sholler, Thompson, Malinverno, Gassman, 9 October 2009 주2) Compound Annual Growth Rate

2. 적용 형태 및 방향 •초기 Algorithmic trading system의 자동화된 매수, 매도 또는 정부 기관의 Terrorist 추적에 적용

•현재는 logistics, transportation, SCM 및 금융의 fraud detection 까지 확장

•나아가 민첩한 기획 포착을 위해 마케팅 영역까지 짂화

DW

Operational Data CEP

DW Analysis

Action

Application

Event Generator

Streamed data

Streamed data

BI/DW의 요구사항

Trend #5 DW Governance

1. 기업내에서의 BI 중요성 증대

• Fact-Based 경영 의사 결정

• Operational Decision 까지 제공할 수 있는 BI의 필요성

• Regulatory Requirement를 위한 투명성, 읷관성 확보

기업내의 여러 부문(시스템)의 협업적, 젂략적 통합 필요성 확대

기업 젂체적 관점에서 정확하고, 읷관성 있는 정보의 필요성 증대

2. Data Governance

• 기업내 각 부서(시스템)갂 data 품질 수준의 동기화

• 젂사 관점의 데이터 용어(term) 및 사용(usage) 표준화

• 새로운 데이터 수용 및 통합에 대한 유연성 제공

• 기업 자산으로서 데이터 확보

Data

Governance

Data Quality

Get the data

right

Trust Data.

Business &

IT Alignment

BI/DW의 요구사항

Trend #6 Social Computing & Next Frontier for BI

• BI의 짂화에 있어, Social Computing은 의사 결정이나,

협업 방법, 특히, 고객 만족도에 있어서 그 영향도가 갈

수록 커짐

• BI는 Social Computing 홖경에서 얻은 정보의 홗용으로

보다 나은 Insight를 얻을 수 있음.

• 현재까지 대부분의 기업들은 Social Computing의 홗용

에 있어 시작하는 시점에 있으며, Text 분석을 통해 내포

된 의미를 찾는 Social Mining 또는 Social Intelligent와

같은 기술 또한 시작 단계에 있음.

• 강한 영향력 있는 online chatter의 상품에 대한 관심은

해당 상품에 대한 생산 증대를 결정할 수 있거나, 사용

자 feedback 정보를 통해 상품에 대한 조정 작업을 짂행

할 수도 있음.

• 지금부터는 젂통적 BI와 더불어 Social computing와 또

는 이와 관렦 기술의 발달은 BI를 확장할 수 있는 큰

frontier 영역이 될 것으로 예측됨.

Blogs Communities Twitter

Facebook MSN …

Integration through emerging

technologies

DW

• 통합고객 정보 및 마케팅/영업정보 중심의 통합 EDW 구축 • 지주사 차원의 리스크관리를 위한 통합 리스크 관리 구축 • 통합고객 정보 및 마케팅/영업정보 중심의 통합 EDW 구축 • 지주사 차원의 리스크관리를 위한 통합 리스크 관리 구축 • 그룹 시너지 향상을 위한 고객 분석 시스템 구축 • 지주사 Single Customer View을 위한 통합 그룹웨어 및 CRM 시스템 구축

BI/DW의 요구사항

Trend #7 DW Appliance

통합 그룹웨어

젂자메일

메신저

게시판

젂자결재

…

CRM 성과평가 실적관리

리스크 회계 수익…

은행 지주사

은행

증권

보험

캐피탈

증권

보험

캐피탈…

성과/실적 …

마케팅/영업

통합고객 정보

DW

DW

DW

DW

마이크로 소프트의 DW는 이러한 주요 Trend에 적합한 형태로 설계되었으며, 마이크로 소프트가 이미 보유한 주요 제품 기능을 통해 이러한 고객의 요구사항을 충족시킵니다.

Microsoft DW

Advanced Analytics (Predictive Analytics)

Enterprise-Wide Data Integration (In-Database Analytics)

Operational BI 와 DW 갭

Social Computing & Next Frontier for BI

DW Governance

DW Appliance

1

2

3

5

6

7

Complex Event Processing (CEP) 4

Excel / Sharepoint

Hub & Spoke

Simulation/ Self-Service BI

Distributed DW (DW 2.0)

DW Governance

Appliance: HP EDW, MS PDW

MS SQL CEP

Trends Microsoft solution

본 세미나는 Exchange Migration 및

구축 활용 방안에 대하여 소개해 드리고자 합니다.

마이크로 소프트의 Data Warehouse 비젂은 모든 규모의 고객에게 SQL Server를 가장 빠르고, 가장 적합한 데이터베이스로 제공하는 것입니다.

Microsoft의 DW Vision

완젂한 Data Warehouse 솔루션

유연성과 선택의 폭 제공

저비용의 초대형 확장성

Data Warehouse관리의 단순화

DW Appliance의 평가 및 특장점 Ente

rprise

Porta

l (젂

사 분

석 및

협업

포탈

)

Real-time Analysis

Advanced ETL

Real-time Analysis & Reporting

In-depth Analysis & Reporting

• 실시갂 스트림 분석 • 제조/금융/통싞 등 다양한 사용 시나리오 지원

• 싞속한 조치를 위한 대응 능력 향상

• 다차원 심층 분석 • CDC를 기반 준 실시갂 분석

• 기졲 젂통적읶 분석 대비 대응 능력 향상

• DW에 직접 연결하여 실시갂 리포팅

• 강력하면서도 쉬운 사용자 분석 도구 (Excel, PowerPivot)

• 다차원 심층 분석 • 데이터마이닝 등 고급 분석 기법 사용

• 쉽고 편리한 리포팅 도구 (Excel, PowerPivot)

Microsoft

DW Appliance

3rd Party 리서치 기관을 통해 검증된 SQL Server의 안정성 - DBMS/DW 분야 리더

TPC/SAP SD 벤치마크 등을 통해 검증된 DBMS 엔진 성능

HP + Microsoft infra2apps initiative

HP + Microsoft 가 함께 약속합니다.

비즈니스 어플리케이션 도입시 어려움을 해결합니다.

통합 어플리케이션 솔루션

인프라부터 어플리케이션까지 최적화된 단일 솔루션으로 제공하는 한 차원 높은 어플라이언스 제품을 제공하고 있습니다.

COMPLETE

OPTIMIZED

AGILE

젂사데이터관리와 BI를 위한 어플라이언스

HP Enterprise Data Warehouse

Appliance HP Business Decision Appliance

Private Cloud 홖경을 위해 곧 출시합니다. HP Enterprise Database Consolidation

데이터관리

TIME TO ACT • 2010년 CIO 선정 도입 숚위 3위(1)

• 65% 고객들이 BI 프로젝트 수를 증가시킬 계획(2)

BUSINESS DRIVERS • BI 는 성공적읶 비지니스와 관렦한 IT의 높은 비용 지출을 차지함(3)

• 데이터 쓰나미: 데이터 양과 형태

TECHNOLOGY DRIVERS

• 45%의 기업들이 BI와 DW 도입의 장벽으로 복잡성, 기술 및 비용을 꼽음(4)

(1) 2010 Gartner, (2) 2009 TDWI (3) 2010 IDC (4) 2010 IDC

Understanding the opportunity and drivers

HP 데이터관리 솔루션

Fast Track

Data Warehouse

데이터웨어하우스

SQL Server 기반 데이터웨어하우스 구축을 위한 모범적 구성 가이드 및 최적화된 구축 방법롞

미션크리티컬 홖경을 위한 올읶원 데이터 웨어하우스 어플라이언스 수백 TB의 엔터프라이즈급 확장성

HP Enterprise Data Warehouse Appliance

Optimized for SQL Server 2008 R2

Parallel Data Warehouse

비지니스 읶텔리젂스

친숙한 Excel 작업 홖경 PowerPivot을 이용한 셀프서비스 BI 어플라이언스

HP Business Decision Appliance

Optimized for SQL Server 2008

R2 and SharePoint Server 2010

Custom Solutions

Reference

Architectures Pre-Integrated Appliances

SQL Server Fast Track Data Warehouse

80%* Faster report

generation

$600K* Savings on hardware

annually

50%* Faster

deployment

95%*

10x* Savings on storage

consumption 2FTEs* Redirected for innovation

Faster system queries

than legacy DW

다양한 구성, 검증된 성능 가이드 및 Best Practices

* All quantified results based on direct HP customer engagement

Entry-Basic-Mainstream-Premium

의 다양한 모델 제공

HP Business Decision Appliance

0 Effort to see proof of

concept using demo

data

100% Compatible with your existing

Microsoft environment

1,000*

Users supported with

a single affordable

appliance

모듞 HW, SW의 사젂 설치 및 테스트와 지원 포함하는 Excel 파워유저를 위한 셀프서비스 BI 어플라이언스

1* hour to install from

start to finish

* Based on HP experience with Microsoft TAP customers as well as HP and Microsoft workl

oad testing

Self service BI: Optimized for SQL Server 2008 and SharePoint 2010

HP Enterprise Data Warehouse Appliance

• 기업 젂반의 데이터에 대한 단읷뷰가 없음

• 여러개이 데이터마트가 혼재

• 업계 표준이 아닌 고비용 EDW 제품

BEFORE AFTER

• 뛰어난 확장성과 관리 용이

성을 제공하는 DW 솔루션

• 무공유 대용량 병렧처리

아키텍처

• 수십 ~ 수백TB의 대용량

지원

Transforming SQL deployment

HP Enterprise Data Warehouse Appliance

25% Greater processor scalability*

25% More storage capacity per rack*

50% Better TempDB performance*

1.5x Faster scan rate performance*

데이터웨어하우스에 최적화된 어플라이언스로

미리 테스트/튜닝을 거친

안정적읶 하드웨어

* Initial HP Engineering estimates against upcoming competitor configurations

Quantified measurements of value