54
Storage: Grundlagen & Markteinblick Florian Hettenbach Florian Hettenbach Florian Hettenbach Florian Hettenbach [email protected] http://tkurl.de/fhxi +49 8551 9150 210 +49 151 1528 777 9

Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

  • Upload
    others

  • View
    1

  • Download
    0

Embed Size (px)

Citation preview

Page 1: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

Storage: Grundlagen &Markteinblick

Florian HettenbachFlorian HettenbachFlorian HettenbachFlorian Hettenbach [email protected]://tkurl.de/fhxi

+49 8551 9150 210+49 151 1528 777 9

Page 2: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

Grundlagen

3

Page 3: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

4

Speicher-System(e)

Page 4: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

5

Definitionen

_Block (512byte – X MB)_Speicherbereich mit fester Größe

_Datei_Ansammlung von belegten Blöcke

_Volume / LUN _Logischer, blockbasierter „Bereich“

_Raid_Ein Mechanismus, der zur Erhöhung der

AusfallsicherheitAusfallsicherheitAusfallsicherheitAusfallsicherheit dient – Kein Backup

Page 5: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

6

Speicherklassen

RAM

SSD

HDD

Page 6: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

7

Page 7: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

8

Page 8: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

9

Pufferspeicher / Cache

SpeicherPuffer

Page 9: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

10

Sync-/Asynchrone Schreib-Operationen

Speicher-

Software

Applikation

S

Data

Data

Ok

Speicher-

Software

Applikation

Data

Data

Ok

Data

Synchron Asynchron

Page 10: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

11

Schichtmodell

HDDs

NTFS ext3 UFS Datei Systeme

Volume Manager (LVM)

Raid 5 Raid 5 Raid Controller /

Speichersoftware

Page 11: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

Front-End Ports

Back-End Ports

Controller: CPU, RAM, BBU

Disks

Netzteil12

Page 12: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

Architekturen

13

Page 13: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

14

DAS

_Direct Attached Storage

SAS

?JBOD / Disk Array

RaidCtrl

Page 14: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

15

NAS

_Network Attached Storage

Share / Netzlaufwerke

NAS-System

Page 15: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

16

SAN_Storage Area Network

Page 16: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

17

SAN

NAS

Page 17: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

18

Object-Storage

_Objekte mit …

_Daten

_Meta-Daten

_Globaler Identifier

_+Direkt programmierbare Schnittstellen

Page 18: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

Protokolle

19

Page 19: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

NAS - Freigabeprotokolle

SMB

_Aktuelle Version 3.0.2

_Ideal in Kombination mit Hyper-V als Hypervisor

_Properitärer Standard

NFS

_Ursprünglich von Sun entwickelt

_Version 3 verbreitet –aktuelle Version 4.1

_Wird von VMware als Storage-Protokoll empfohlen

20

Page 20: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

_Klassisches SAN Protokoll

_Transferraten bis zu 16 Gigabit/s

_Zoning beachten!

_Sehr geringe Latenzen

21

SAN - FibreChannel

Page 21: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

22

Ethernet & SAN ���� iSCSI

Ziel: Vorteil von blockbasierten SAN-Zugriff im Netzwerk bereitstellen

_Verpacken der SCSI Pakete in Ethernet-Frames

_Keine besondere Hardware mehr notwendig

_Verbindung zwischen_Initiator

_Target

_Authentifizierung über CHAP

IP Header

TCP Header

iSCSIHeader

SCSI Kommandos und Daten

Page 22: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

23

10 GbE über SFP+ oder RJ45

Page 23: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

24

Zusammenfassung

Topologie DAS SAN LAN Objekt

KonnektivitätKonnektivitätKonnektivitätKonnektivität SCSI FC-Technik Ethernet Ethernet

SystemeSystemeSystemeSysteme JBODs, Disk-Array

„SAN-Systeme“

NAS-Systeme Objekt-Speicher

ZugriffsartZugriffsartZugriffsartZugriffsart Blockbasiert Blockbasiert Dateibasiert HTTP RestfulAPIs

ProtokolleProtokolleProtokolleProtokolle SAS FibreChannel, SAS

NFS, CIFS/SMB S3, Swift

iSCSI

Page 24: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

Hochverfügbarkeit

25

Page 25: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

26

Page 26: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

27

Replikation / Spiegelung

_Quelle zu Ziel

_Möglichkeiten:_Synchron

_Asynchron

Page 27: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

28

Deduplizierung

Sofort

Später

Page 28: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

Markteinblick

29

Page 29: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

375x80 IOPS

30.000 IOPS30

Page 30: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

1500 km/h

31

4 km/h

Page 31: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

€/GB

€/IO

80 IOPS

30.000 IOPS32

Page 32: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

Storage-Konzepte

33

Page 33: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

HA-Storage

SoftwareSoftware

LUNLUNLUNLUN LUNLUN

34

Page 34: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

JBOD

Head + JBOD

JBOD

JBOD

SoftwareSoftware

35

Page 35: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

Objekt-Speicher

36

Page 36: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

Hersteller & Produkte

37

Page 37: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

_NAS-Storage

_Alle „Netzwerk“-Protokolle_NFS, SMB, AFP, iSCSI

_All-in-One Gerät: kann auch als „Server“ dienen

_Sehr einfach gehaltene Oberfläche

Page 38: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash
Page 39: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

E-Serie

_Block-Storage (iSCSI, SAS, FC)

_2,5“ und 3,5“ Dual Controller

_„Gut & Günstig“

_Auf bis zu 1,2 PB skalierbar

Page 40: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

41

FAS-Serie

_Unified Ethernet Storage _NFS, SMB, iSCSI

_Raid-DP (6) Pooling

_Deduplizierung

_Enge Applikations-Integration

Page 41: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

NexentaStor

_Unified Storage_NFS, SMB, iSCSI, FC

_OpenStorage_Kein Vendor-Lockin

_ZFS Dateisystem

_Komprimierung, Snapshots, Deduplizierung

_Neu: NexentaEdge – ZFS Objekt-Speicher

Page 42: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

43

Ceph

Page 43: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

44

Afa‘s – All Flash Arrays_XtremIO, Tegile,

PureStorage, SanDisk

_Meist blockbasierter Zugriff (FC / iSCSI)

_Höchste Performance und Ansprüche an Packungsdichte

Page 44: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

45

SanDisk Infiniflash

Bereitstellung über Block oder Ceph

8TB Flashkarten

Page 45: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

46

Archivierung

_HGST Active Archive

_S3 Schnittstelle

_4,7 PB in einem Rack

_15 9‘s „Daten-Haltbarkeit“

Page 46: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

Software Defined Storage

47

Page 47: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

Trends & Ausblick

48

Page 48: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

49

NAS + Virtualisierung

Page 49: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

50

Mehr Speicher!

2 TB SAS SSD10 TB SMR HDD

Page 50: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

NAS / Ethernet ist die Zukunft

51

10 - 40 – 100 Gigabit/s

Page 51: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

52

Hyper-Convergence

Hyper-Konvergente Systeme

Konvergente Systeme

Virtualisierung

Software DefinedStorage

Software DefinedNetworking

Page 52: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

53

Marktentwicklung

All-in-One –Storage &

Virtualisierung

Open SDS = Commodity

HW+SW

Fertige Appliances

Page 53: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

55

�S

pe

zia

lisie

run

gsg

rad

NAS

AfA

Klein Mittel Groß

ObjektSpeicherHyper-

Convergence?

Archiv

Unternehmen

SDS + Standard HW?

Page 54: Storage: Grundlagen & Markteinblick€¦ · PureStorage, SanDisk _Meist blockbasierter Zugriff (FC / iSCSI) _Höchste Performance und Ansprüche an Packungsdichte. 45 SanDiskInfiniflash

http://tkurl.de/fhxi

http://tkurl.de/fhli

+49 8551 9150 [email protected]

56

?