Qstar for Active Archiving Overview

Qstar for Active ArchivingOverview

㈜ 블루베리

정책 기반 데이터 마이그래이션 ( 계층적 스토리지 ), 스토리지 리소스 관리 , 데이터 통계 분석 및 Simulation, 데이터 무결성 검사 , Search

Securing the future of your Data!

Qstar 는 폭발적으로 증가하는 데이터를 효과적으로 관리 할 수 있읍니다 .

Industries Medical Financial Services Telecoms Manufacturing Construction Broadcast & Publication Legal Education Government etc.

Qstar Market and Apps

Applications Patient images Accounting records Transaction information Quality control data Design drawings Digital photographs Audio and video emails & attachments Public documents Cultural records etc.


데이터의 시간 가치 Active Data : 일정기간 이내에 create, modify, access 된 데이터 . Static Data : 일정 기간 동안 사용 되지 않은 데이터 .

1. Data 재사용 빈도와 시간 가치 .

Active Data Static Data

Key Point — Backup 이 필요한 데이터와 Archive 가 필요한 데이터를 구분 Backup is only Database(Database 를 제외한 백업 대체 가능 ).


Growth rates( 성장율 )

Cost of Storage( 스토리지 비용 )

Cost of Backup( 백업 비용 )

Retention times( 보관 기간 )

Cost of Power( 전력 비용 )

( 데이터 보존 기간에 따른 비용 증가 )

2. 데이타 보존 기간과 비용 데이타 보존 기간과 비용

( 데이터 보존 기간 )

10yearsOthers

Forever


3-1. 아카이빙 vs 백업 비교백업 소프트웨어 아카이빙 솔루션

파일 서버

1G1G 1G

1G 1G 1G

10G10G 10G

파일 용량 : 36GB

Before 백업

파일 서버

1G1G 1G

1G 1G 1G

10G10G 10G

파일 용량 : 36GB

Before 아카이빙백업서버

표준 백업 제안 ( 백업 4set) - 주 1 회 풀백업 - 일간 인크리멘탈 백업

파일 서버

1G1G 1G

1G 1G 1G

10G10G 10G

백업서버

전체 용량 : 180GB로컬 스토리지 사용량 감소 없음 - 여유 공간 확보 : 수동 파일 삭제 - 필요 할 때 복원 사용 해야 함 .백업 오버헤드 발생

파일 용량 : 36GB 파일 용량 : 약 144GB

After 백업

아카이빙서버

볼륨 복제 - 데이터 안전성 - 미디어 카피 기능 .3 개월 동안 사용하지않은 데이터를 아카이빙

파일 서버

2K2K 2K

2K 2K 2K

2K2K 2K

백업서버

전체 용량 : 72GB로컬 스토리지 사용량 감소 - 여유 공간 확보 : 자동 파일 아카이빙 (STUB) - 필요 할 때 자동 CALL-Back.백업 오버헤드 감소

파일용량 : 18KB 파일 용량 : 약 72GB

After 아카이빙Bal-ance

http://h20341.www2.hp.com/integrity/cache/342370-0-0-0-121.html





응용 프로그램의 기본 성격과 목제에 맞게 사용 백업

보험적인 성격이 강한 솔루션 , 복구를 위한 도구 시스템 오류 및 사용자 오류 시 사용하는 도구 복구를 목적으로 하는 단기간의 데이터 보존

아카이빙 데이터 장기 보존 및 법적 규정 준수를 위한 도구 , 보존을 위한 도구 비즈니스 운영 전략 (Business operation strategy) 파일 접근 (Access purposes) 을 위해 장기간의 데이터를 보존

Archiving 과 Backup 은균형되게 구축 (Balanced Environment) 될 때

상호 보완적이 됩니다 .

3-2. 아카이빙 vs 백업 비교


4. 아카이빙과 계층적 스토리지

Highest Cost( 고비용 )6 개월 보관FC 디스크 드라이브

Lowest Cost( 최저비용 )영구 보관테이프 라이브러리

Low Cost( 저비용 )18 개월 보관 SATA 드라이브 디스크

아카이빙 (Archiving) 관리자의 도움 없이 모든 데이터에 항상 접근 할 수 있어야 합니다 . ( 정책에 의해서 모든 데이터는 자동적으로 계층적 스토리지 사이에서 이동 되어야 함 ) Apps 호환성을 제공 ( 개방형 인터페이스 사용 ) 데이터 안정성을 보장 ( 미디어 , 볼륨 , 장비 복제 등 )

계층적 스토리지 (Tiered Storage)

정책 기반 마이그레이션 - 파일 타입 , 사이즈 ,소유주 등에 따른 서로 다른 정책 적용재사용 빈도가 낮은 파일을 이동
















Qstar 의 Hybrid 계층적 스토리지 (Tiered Storage)

Cache


스토리지 최적화

5. 데이터 분류에 따른 스토리지 최적화

1 차스토리지 Active

Static 80%20%

Backup

데이터 이관 – 5 년( 하드웨어 변경 주기 ) 백업 오버헤드

( 데이터 관리 전략 필요 )

검색 ? 정책 ?(10 년 보관 후 자동 삭제 )

Before Archiving

Active Static

Backup

데이터 접근 시자동 Call back 서비스

After Archiving

2KB STUBFILES

1 차스토리지

2 차스토리지

백업 오버헤드 감소장애 시 신속한 복구 가능관리자 업무 감소Always Data Online전사적 데이터 관리 전략 확립

Disk

Tape

DVDBlue-Ray

etc

개방형 인터페이스

Key Point — Always Data Online( 항상 자동으로 데이터 접근이 가능한 상태 ) 데이터 장기 보존 위 / 변조 방지


6-1-1. Qstar 3-2-1 전략

3 모든 데이터를 3 개의 복사본 생성 최적화된 IT 자원 비용 절감 백업 요소 감소 ( 제거 )

2 2 개 이상의 서로 다른 미디어 사용 신속한 데이터 접근 안전한 데이터 관리 아카이브 탄력성

1오프 - 사이트에 제거 가능한 미디어의 1 개의 복사본 적은 전력 소모 규제 준수를 위한 기반 안전하고 검증된 재난 복구

경제성

고성능

안전성

Copy of RecordFast Access Active Redundancy

Optical / TapeRAID & Optical / Tape

Secondary SitePrimary Data Center

3-2-1 아카이브의 장점1. 스토리지 자원의 최적화 - 용량 (Volume) 감소 - 데이터 용도에 적합한 장비 사용 등2. 법적 규제 준수3. 백업 & DR 오버헤드 제어4. TCO 감소 ( 전력 소모 , 유지 관리 등 )5. 데이터 안정성과 신뢰성 증가 (Optic 미디어 사용으로 EMP 대비 )

3-2-1 Archiving 전략


6-1-2. 아카이빙의 장점 스토리지 리소스 최적화 규정 준수을 위한 최고의 솔루션 Backup & DR 오버헤드 제어 TCO 절감과 System Refresh Cycles 연장 데이터 안정성 증가 전력 소모량 감소


6-2 가상화 환경에서의 아카이빙 QNM 을 통한 효과적인 데이터 관리

가상화 서버(Vmware/XenServer/XEN)

Data

App

OS

Data

App

OS

Data

App

OS

Data

App

OS

Data

App

OS

증가하는 DataBackup S/WVCB(Snapshot)Thin ProvisioningEtc

+ α

QNM(Qstar Network Migrator) 기능1. 정책 - Copy, delete, move, migration - 스케줄링 - 그룹 정책 설정 지원2. DBMS 사용 - PostgreSQL 기본 제공 , 상용 데이타베이스 연동 가능 . - 데이터 이관 성능 향상 및 데이터 검색 / 복구에 사용3. 다양한 스토리지 지원 - Local Disk, RAID, NAS, Tape, Optic, WORM, OSM 등4. 통계 분석 - 효과적인 정책 수립 / 수정 , 리포트 기능 .5. 데이터 무결성 검사 기능 .

효과적인 스토리지 & 데이터 관리 - QNM 을 통해 메인 스토리지의 데이타량 감소 - 1 차 , 2 차 스토리지를 통합한 가상 디스크 제공 ( 무한대의 용량 제공 )

Active

Static

Active

Static

1 차스토리지 1 차스토리지2 차스토리지

가상 디스크


6-3-1. Qstar on the LAN(with agent)

NAS가상화전자문서시스템 그룹웨어 영상 편집시스템

WindowsClient

Backup Server

1 차 Storage

Backup Server

1ST 스토리지 (Migration)백업 효과 - 생성된 데이터는 매일 ( 즉시 ) Copy. - 30 일 동안 미상용 데이터는 migration. (stub 파일을 이용 , 데이터 call-back 서비스 ) - 10 년 경과된 데이터는 자동 삭제

2ST 스토리지 (HSM or OSM)1 차 스토리지 fail 시 복구 데이터 복구 (stub, data)데이터 용도에 따라 스토리지 선택 사용 .개방형 인터페이스 (CIFS, NTFS 등 )모든 H/W 지원 (RAID, NAS, Tape, Optic, WORM 등 )

Backup Server

1 차 Storage

Stub

Migration

RAID/NAS

HSM(Tape/DVD/BD-RE 등 )

DataDirector(HSM 기능 포함 )

Volume-Pri-mary

Volume-Slave

Replicator(HSM 기능 포함 )

RAID

Tape

Blue-Ray

OSM(Cluster 포함 )

Storage server

Tape

Blue-Ray

동기화

동기화

동기화

개방형아키텍쳐

1 차 스토리지 용량 감소백업 용량 감소

Auto Call-back

DirectAccess

마이그레이션 경로자동 리콜 경로직접 엑세스 경로

LAN

FC



















6-3-2. Qstar on the SAN(No agent)

NAS가상화전자문서시스템 그룹웨어 영상 편집시스템

WindowsClient

1ST 스토리지 (Migration)백업 효과 - 생성된 데이터는 매일 ( 즉시 ) Copy. - 30 일 동안 미상용 데이터는 migration. (stub 파일을 이용 , 데이터 call-back 서비스 ) - 10 년 경과된 데이터는 자동 삭제

2ST 스토리지 (HSM or OSM)1 차 스토리지 fail 시 복구 데이터 복구 (stub, data)데이터 용도에 따라 스토리지 선택 사용 .개방형 인터페이스 (CIFS, NTFS 등 )모든 H/W 지원 (RAID, NAS, Tape, Optic, WORM 등 )

RAID/NAS



Volume-Pri-mary

Volume-Slave


RAID

Tape

Blue-Ray


Storage server

Tape

Blue-Ray

동기화

동기화

동기화

2 차 스토리지( 아카이브 스토리지 )

SAN Switch

ERP VolumeGroupware Vol-

umeVoD Volume

1 차 스토리지(FC/SAS RAID)

RAIDLibrary/Jukebox


FC

FC

QNM정책 서버


LAN

FC


6-4. NAS 환경에서의 아카이빙

전자문서시스템 그룹웨어 영상 편집시스템

WindowsClient

RAID/NAS



Volume-Pri-mary

Volume-Slave


RAID

Tape

Blue-Ray


Storage server

Tape

Blue-Ray

동기화

동기화

동기화


Switch

QNM정책 서버

NAS(EMC/NetApp/Splentec NAS)

CIFS/NFS

NAS 아카이빙 지원 EMC, NetApp and Splentec NAS 지원 NAS 의 고정데이타를 정책에 따라 마이그레이션

백업 윈도우 감소 NAS 의 물리적 사용량 감소 무한대의 가상 디스크 제공


7-1. QNM(Qstar Network Migrator)

정책 베이스 데이터 migrator 파일 서버 , 윈도우 클라이언트 , NAS, WORM 등 정책 – Copy, delete, move, migrtion Triggers – Time, Size, 확장자 등 파일 버저닝 등 지원 통계 보고서 Multi-Mirror( 옵션 )

NAS가상화Unix Linux OSX WindowsClient

정책실행

Auto Call-back

기존 환경 변경 불필요 . SAN, Network 지원

스케줄러 제공 계층적 스토리지 전략 지원 검색 데이터 무결성 검사 기능 지원 모든 OS 지원

FC

SAN Switch

ERP VolumeGroupware Vol-

umeVoD Volume

1 차 스토리지(FC/SAS RAID)

RAIDLibrary/Jukebox


FC

FC

RAID/NAS


QNM

Mirror 1

Mirror 2


동기화


7-2. HSM(SDJ/STJ)

엔터프라이즈 아카이브 플렛폼 (Enterprise Archive Platform) 계층적 스토리지 정책 기반 파일 아카이빙

스케줄 , Agetime, HPC, 수동 등 지원 H/W

Tape, Optic disk, RAID, NAS, WORM 등 데이터 안정성과 성능 .

이중 데이타베이스 구조 Transaction logging

QSTAR 통합 볼륨 (QSTAR INTEGRAL VOLUME)

LibraryCache 1

F:/

미디어 셋G:/

Cache 2

Copy Disk/Tape 기능

CIFS / NFS

Jukebox

가상 디스크

Volume Size( 무한대 확장 가능 )

Offline media

Off-line 트래킹 라이브러리 최대 용량 이상으로 데이터셋 확장 가능

다양한 미디어 혼용 가능 엑세스 권한 관리 Archive 미디어 복사 기능

자동 / 수동 복사 및 스케줄링 . 데이터 비교 기능 제공 .

API 지원

H:/RAID / HDD

SDJ(Simulate Disk Jukebox)(LTO, BD, UDO, DVD, AIT SAIT 등 )




7-3. HSM 리플리케이터 (Replicator)

멀티 레벨 시스템과 재난 방지 (Multiple level system & Disaster Provention)

Up to 4 replicas Mix of disk, tape, optical, CAS or Cloud

Dynamic failover & LoadBalancing Hot Standby & Auto-hot Sync

Archived data 의 안정성과 성능 보장 . QStar HSM 의 기능 제공 완전 자동 재난 방지 솔루션 ( 데이터 , 미디어 , 시스템 및 사이트 장애 보호 )

Primary Replica Set Secondary Replica Set Offsite Replica SetPrimary Centera /HDS HCP Replica /

RAID / NAS

Tape Library /Jukebox

ISCSC or FC Device

Offline

복제( 동기화 )

복제( 동기화 )



7-4. HSM DataDirector

엔터프라이즈 아카이브 플렛폼 (Enterprise Archive Platform) 실시간 미러링 Qstar HSM 의 모든 기능 포함 Hot-Standby 자동 리싱크 부하 분산 (Load Balancing) 자동 fail-over API 기반 솔루션 통합 가능

DDR 1 하나의 장치 (Library) 에서 볼륨 복제 및 동기화

DDR2 하나의 서버에 접속된 2 개의 장치간 복제 복제 및 동기화

DDR3 2 개의 서버에 접속된 장치 간 복제 및 동기화

Library A

볼륨 A볼륨 A’

Library A

볼륨 A 볼륨 B’

Library B

볼륨 B 볼륨 CLibrary

A

볼륨 A 볼륨 B’

Library B

볼륨 B’

HA

볼륨 C

192.168.0.251 192.168.0.252서버 1 서버 2

복제( 동기화 )

Ac-tive

Standby

Library C

Library D

볼륨 A’ 볼륨 B

볼륨 B

192.168.0.253

볼륨 E

서버 3

Ac-tive

DDR 1 DDR 2 DDR 3


7-5. OSM(Object Storage Manager) 의 특징과 장점

TCP/IP

Partition 2

O1O2O3O4O5

O1O2O3O4O5

Storage Unit 2Storage Unit 1

Node 1

O1

O3O5O1 O2

O2

O3

O4

O5

O4

Partition 1

Storage Unit 4Storage Unit 3

Node 2

O1

O3O5O1 O2

O2

O3

O4

O5

O4Storage Unit 6Storage Unit 5

Node 3

O1

O3O5O1 O2

O2

O3

O4

O5

O4

Multi-vendor H/W 사용과 데이터 안정성 보장 다양한 하드웨어 ( 이기종 포함 ) 혼합 사용 . Self-managing / Self Healing 기능을 제공하는

Object-based 스토리지 솔루션 정책에 의한 자종 데이터 복제 장비 증설 ( 교체 ) 시 자동 용량 증가 성능 향상을 위해 메타 서버 추가 가능 .

Compliance 에 대한 기초를 제공 CIFS/NFS/HTTP 지원 Load balancing 무한대 용량 확장 가능

Self healing - 장비 내의 레이드 장애 시 타 장비로 데이터를 자동 복제

Self Manager - 5 년이 지난 장비 페기 시 새 장비로 데이터 자동 복제 .

마스터 노드 페일 시 , 노드 중에서 자동 선출


8-1. Project 1

RAID

QNMApp 서버의 파일을 migration 정책에 따라 Volume1 에 이관 .서버별로 정책 실행 (Volume 혹은 Folder)App Server 에서 파일 요청 시 파일 자동 call-back 서비스 .

HSM(DDR3)정책 / 스케쥴에 따라 파일 아카이빙Volume1 을 Site 2 로 미러 (Primary)Site2 의 Volume2 를 미러 (Slave)

Qstar’s Cache2TB

Site 1

Node 1, ActivedWindows Server

Primary

Node 2, PassiveWindows Server

Slave

Disc1000Blue-RayJukbox connect via SCSI

RAID

QNMApp 서버의 파일을 migration 정책에 따라 Volume1 에 이관 .서버별로 정책 실행 (Volume 혹은 Folder)App Server 에서 파일 요청 시 파일 자동 call-back 서비스 .

HSM(DDR3)정책 / 스케쥴에 따라 파일 아카이빙Site1 의 Volume1 을 미러 (Slave)Volume2 를 Site2 로 미러 (Primary)

Qstar’s Cache2TB

Site 2

Node 3, ActivedWindows Server

Disc1000Blue-RayJukbox connect via SCSI

Vol-Primary 1

Vol-Mirror 2

Vol-Mirror 1

Vol-Primary 2

Qstar HSM(DDR3)Real-time Mirroring

Load BalancingFail over

OSXUnix Linux Windows UnixApplication Server




8-2. Project 2

Applicatin & User Tier

OSXUnix Linux Windows UnixApplication Server

Windows VistaWindows 7 Linux Max OSX Windows XPUser WorkStation

1st Tier Qstar QNMScheduled Data Migra-

tion

2st Tier Qstar HSMData LifecycleManagement

On Tape Library

Offline Media& Redundant

Copies

Qstar QNM Agent

HD JBOD

Qstar HSM

LAN

FC






8-3. Project 3

SntrySTR6000

NAS(16Bay)

Server A( 서초동 )

Server B( 혜화동 )

Server C( 공항동 )

Server D( 잠실 )

QNMAgent

QNMAgent

QNMAgent

QNMAgent

Set 1

Set 2

Set 3

Set 4

Jukebox 1Disc3000

Jukebox 2Disc1000

Qstar SDJ JB( 가상주크박스 )SntrySTR 6000 + QSS JBOD 6-13

Additional feature : vlcopy on full or incre-mental to real BD Media(JB1 or JB2)

WAN

DR Site

Windows Storage Server 2008Qstar DDR3 Software

Qstar Volune Set(Cache + BD Media)

Primary Sets

Mirror Sets

Qstar DDR3Real-time Mirroring

Load BalancingFail over

서울 본사

부산 지사

SntrySTR6000Migration 정책 관리Target Storage 제공DR 기능




Blueberry Makes IT Sim-ple!

수고 하셨읍니다 .

Documents

Qstar for Active Archiving Overview