13
Алексей Федосеев Центр компетенции Linux. IBM [email protected] Кластерные системы хранения. Решение SoFS

Fedoseev Sofs

Embed Size (px)

Citation preview

Page 1: Fedoseev Sofs

Алексей ФедосеевЦентр компетенции Linux. IBM

[email protected]

Кластерные системы хранения. Решение SoFS

Page 2: Fedoseev Sofs

Классические решения NAS

Классическоерешение

с островами NASРазработка

Бухгалтерия

Продажи

Производство

Page 3: Fedoseev Sofs

Проблемы NAS• Объем «неструктурированных данных» превосходит объем баз

данных предприятия, в то время как:

– Современные решения NAS плохо масштабируются горизонтально

– Закончилось место? Добавляется еще одна система хранения

– Нет единой системы администрирования

• Актуальным становится одновременный доступ к данным из разных приложений и ОС

• Миграция, резервное копирование и архивирование тем сложнее, чем больше отдельных NAS-систем

Page 4: Fedoseev Sofs

Кластерная система храненияКластерная система (SoFS) Классические системы NAS

Page 5: Fedoseev Sofs

Сетевые файловые системы

Локальная ФС● Без совместного доступа, приложения обращаются только к локальным файлам

● Разделение данных в рамках работы приложений

Сетевая ФС● Файлы разделяются между приложениями на сетевом сервере

● Связь обеспечивается через локальную сеть● Сервер ограничивает пропускную способность и снижает надежность системы

Page 6: Fedoseev Sofs

Распределенная файловая система GPFS

ФС параллельного доступа (напр., IBM GPFS)

● В GPFS файлы разделены между множеством дисков на множестве узлов хранения ● Независимые экземпляры GPFS запущены на узлах приложений● Все экземпляры GPFS имеют доступ ко всем дискам

Page 7: Fedoseev Sofs

Компоненты SoFS GPFS 3.2 – высокопроизводительная

кластерная файловая система IBM

CTDB – управление кластером и файловыми службами

Усовершенствованная версия Samba для экспорта данных по протоколам CIFS

RHEL5.1 – базовая ОС, обеспечивающая сервисы NFS, FTP и HTTP

Пакеты SoFS – обеспечивают административный интерфейс, модули для HTTP, средства ускорения доступа и прочее

Аппаратное обеспечение IBM

Page 8: Fedoseev Sofs

Жизненный цикл данных

• Индивидуальное управление емкостью

• Средняя утилизация <50%

• К 80% нет обращений за последние 6 месяцев

• Централизованное управление

• Средняя утилизация >80%

• Создание политики миграции

SoFSКлассические NAS

$$ $$ $$ $$

Page 9: Fedoseev Sofs

Репликация данных в SoFSОтдел А

SoFS

Отдел Б

Интернет

SoFS

Page 10: Fedoseev Sofs

Аппаратная конфигурация SoFS

4x1Gb I/O+1Gb GPFS +

1Gb CTDB / Mgt

Midplane

HS

21 B

lade

HS

21

Bla

de

HS

21 B

lade

HS

21 B

lade

HS

21

Bla

de

HS

21

Blad

eH

S21

Blad

e

HS

21 B

lad

e

HS

21

Blad

eH

S21

Blad

e

HS

21 B

lad

e

HS

21

Blad

eH

S2

1 B

lade

HS

21 B

lade

(Mg

t)

AM

M2

AM

M2

Ethernet Switch Module

Midplane

10GbE Uplink SwMd

FC Switch Module FC Switch Module

2x4Gb = 8Gb

4x2x10Gb= 80Gb

Clientnetwork

2x6x4Gb = 48Gb

Storage

Blad

eC

enter H

Ch

assis

Dedicated networks for GPFS and CTDB/mgt

Кластерные узлы:

– Лезвия IBM BladeCenter

– Серверы IBM System x

Системы хранения:

– Все системы DS от IBM System Storage

– Диски, ленты

Коммуникационное оборудование:

– 1GbE, 10GbE, Fibre Channel, Infiniband

Page 11: Fedoseev Sofs

Интерфейс администрирования SoFSУправление надежностью системы

Управление узлами системы

Управление файловыми службамиОтчеты по использованию кластера

Page 12: Fedoseev Sofs

Сервисная составляющая SoFS

Сервисы в решении SoFS

Консультации Архитектура решения Установка и настройка SoFS – базовая поддержка SoFS – премиум поддержка

Page 13: Fedoseev Sofs

Спасибо за вниманиеВопросы?

Алексей Федосеев

Центр компетенции Linux, IBM EE/A

[email protected]