close

Вход

Забыли?

вход по аккаунту

- Cisco Connect

код для вставкиСкачать
Software Defined Storage
EMC ViPR
© Copyright 2014 EMC Corporation. All rights reserved.
1
Рост данных меняет подход к хранению
Емкость хранилищ растет на 53% ежегодно
• Чрезмерная сложность
–
Большое количество разных
технологий защиты данных,
протоколов, средств управления
• Отсутствие экономической
гибкости
–
Высокие накладные расходы в
распределенных архитектурах,
необходимость удешевления
аппаратной платформы
• Отсутствие облачных технологий
–
Стандартная архитектура, отсутствие
самообслуживания
Source: IDC EMC Digital Universe Study 2014
© Copyright 2014 EMC Corporation. All rights reserved.
2
Сегодняшние инфраструктуры хранения
BLOCK
© Copyright 2014 EMC Corporation. All rights reserved.
FILE
FILE
BLOCK
FILE
OBJECT
HDFS
3
Современные приложения меняют подход к
хранению
• Слишком сложная архитектура
– Блокировки, репликация, высокая
доступность, распределенная
архитектура
• Сложность работы с Web и при
наличии межсетевых экранов
– Сложность доступа в распределённых
сетях
• Сложность разработки
– Различное оборудование и технологии
для различных типов данных
© Copyright 2014 EMC Corporation. All rights reserved.
4
И становится только хуже …
НОВЫЕ ПЛАТФОРМЫ И
МЕТОДЫ
© Copyright 2014 EMC Corporation. All rights reserved.
ОТСУТСТВИЕ
САМООБСЛУЖИВАНИЯ
МАССИВНЫЙ РОСТ
ДАННЫХ
5
Как это исправить?
Стоимость
© Copyright 2014 EMC Corporation. All rights reserved.
Выбор
Облака
6
Программно-ориентированный означает
наличие коммодити компонент
Программно-ориентированное
хранилище
Платформа
из коммодити компонент
© Copyright 2014 EMC Corporation. All rights reserved.
7
Преимущество стандартных платформ
Экономическая гибкость
• Использование стандартизированных и
открытых технологий
• Проприетарные компоненты дают
меньшую экономическую гибкость
• Стандартные компоненты дают большую
экономическую эффективность при
использовании специализированного ПО
© Copyright 2014 EMC Corporation. All rights reserved.
8
EMC ViPR: Software-Defined Storage
ViPR
Controller
Provisioning
Self-Service
Automation
Reporting
ViPR
Services
EMC
Non-EMC
Protect Current Investments
© Copyright 2014 EMC Corporation. All rights reserved.
Array Support
via OpenStack
Commodity Hardware
ECS Appliances
9
Гибкое, отказоустойчивое,
экономически эффективное хранилище
на основе стандартных компонент
© Copyright 2014 EMC Corporation. All rights reserved.
10
Хранилище на основе стандартной
платформы
ViPR
Services
BLOCK
STORAGE
HDFS
STORAGE
OBJECT
STORAGE
Коммодити
платформа
© Copyright 2014 EMC Corporation. All rights reserved.
11
Облачная платформа хранения «из коробки»
• Меньшая стоимость относительно публичного облака
• Комбинирование эффективности хранения и
доступности данных
• Упрощение разработки приложений – доступность по
принципу active-active read/write из любой точки
• Отсутствие единой точки отказа увеличивает
продуктивность и доступность
• Универсальный стандартизированный доступ
позволяет отказаться от ETL процессов
• Множество методов доступа для разных приложений
© Copyright 2014 EMC Corporation. All rights reserved.
12
Распределенное управление данными
Защита от локальных и глобальных сбоев, active-active read/write
• Сбои оборудования и всего ЦОД
– Disk, Node, Rack, Data Center
• Ребилд без перегрузок на
каналах связи
Site 2
Site 1
• Снижение нагрузки и затрат
Site 3
© Copyright 2014 EMC Corporation. All rights reserved.
13
Потери емкости на защиту данных
Оптимизация доступа, защиты и эффективности
3,00
2,67
2,50
2,00
2,00
Overhead
1,50
1,77
1,67
1,60
1,55
1,52
1,33
1,00
0,50
0,00
1
2
3
4
5
6
7
8
# of Data Centers
© Copyright 2014 EMC Corporation. All rights reserved.
14
Единая платформа для всех типов доступа
Совместимость с стандартными API
HDFS
• Различные интерфейсы доступа делают
ненужным ETL
– Object, HDFS , File (Future)
• HDFS совместимость с Cloudera, Hortonworks,
Pivotal etc.
• Поддержка S3, Swift, Atmos и Centera CAS API
• Расширения API
– Byte-Range updates, Atomic appends, Rich
ACLs etc.
© Copyright 2014 EMC Corporation. All rights reserved.
15
Стандартные компоненты как платформа
…
VIRTUAL ARRAY
Commodity
Commodity
© Copyright 2014 EMC Corporation. All rights reserved.
Commodity
• Поддержка серверов
сторонних
производителей и DAS
• Управление
оборудованием как
кластерной системой
• Полный цикл управления
сторонним оборудованием
16
Области применения ViPR Services
• Облачные архивы
• Контент-репозитории
• Распределенные отказоустойчивые
платформы для больших данных и
распределенных вычислений
• Платформа хранения для мобильных и веб
приложений
• Гибридные облака хранения
© Copyright 2014 EMC Corporation. All rights reserved.
17
ViPR Block (На основе ScaleIO)
Software-Defined Storage – ViPR Block
 ViPR Block на основе Scale IO
 Управление аналогичное ViPR
Services
 Создание виртуальных пулов
хранение различных уровней
 Расширяемость до тысяч узлов
© Copyright 2014 EMC Corporation. All rights reserved.
18
Масштабируемая объединенная архитектура
• Платформа хранения данных на
основе стандартных компонент
– ПО для создания SAN из локальных
носителей серверов
– СХД и вычислительные ресурсы на
единой платформе
– Поддержка любых серверов и
носителей: HDDs, SSDs, & PCIe flash
cards
– Поддержка физических и виртуальных
серверов
© Copyright 2014 EMC Corporation. All rights reserved.
19
Трансформация имеющихся ресурсов
• Объединение СХД и вычислительных
ресурсов
• Масштабируемость – архитектура из
тысяч серверов
• Гибкость – добавление/удаление
серверов/емкости «на лету»
• Производительность –
множественная параллелизация
операций
© Copyright 2014 EMC Corporation. All rights reserved.
20
Пример производительности 10 x SSD’s без
ScaleIO…
8k IOPS
1 TB
8k IOPS
1 TB
8k IOPS
1 TB
8k IOPS
1 TB
8k IOPS
1 TB
8k IOPS
1 TB
8k IOPS
1 TB
8k IOPS
1 TB
8k IOPS
1 TB
8k IOPS
1 TB
• 8k IOPS каждого сервера
• 1TB емкости каждого сервера
• Отсутствие защиты данных при недоступности диска или
сервера
© Copyright 2014 EMC Corporation. All rights reserved.
21
Пример производительности 10 x SSD’s
ScaleIO…
10k IOPS
1TB
10k IOPS
1TB
10k IOPS
1TB
10k IOPS
1TB
10k IOPS
1TB
10k IOPS
1TB
10k IOPS
1TB
10k IOPS
1TB
10k IOPS
1TB
10k IOPS
1TB
• 80,000 IOPS
• 10TB общей емкости
• Защита данных при недоступности компонент
© Copyright 2014 EMC Corporation. All rights reserved.
22
Расширенные возможности
Для Infrastructure as a Service
APP 1
APP 2
APP 3
Выделенные
домены
Пулы дисков
для тиринга
Ограничение
IOPS/Bandwidth
Для QoS
Безопасность
путем Data
Masking
Снэпшоты для
резервного
копирования
Контроль производительности, емкости, и размещения данных
© Copyright 2014 EMC Corporation. All rights reserved.
23
Преимущества
Server SAN
Программная, расширяемая,
объединенная архитектура
хранилища
Уменьшение TCO
Меньший OpEx
© Copyright 2014 EMC Corporation. All rights reserved.
Больше пространства
#EMCSCALEIO
Миграции данных
24
Преимущества
•
Встроенные носители
•
Отсутствие специализированных
компонент СХД
•
Экономия ресурсов
энергопотребления, охлаждения и
физического пространства
•
Отстутствие необходимости в
обновлении EOL оборудования
•
Низкие расходы на
администрирование
•
Линейные инвестиции с
возможностью прогнозирования
© Copyright 2014 EMC Corporation. All rights reserved.
25
Области применения ScaleIO
• Платформа для Test&Dev
• Виртуализация VDI/VSI
• Кластерные распределенные web
приложения
• Высокопроизводительные базы
данных для сред web приложений
и Scale-out сервисов
© Copyright 2014 EMC Corporation. All rights reserved.
26
ViPR
Enterprise & SPs
to 3rd Platform with Arrays
DIY 3rd Platform with Commodity
2nd
© Copyright 2014 EMC Corporation. All rights reserved.
ECS Appliance
3rd
Enterprise & SPs
Platform appliance
27
Конфигурации
 Стоечные конфигурации
– Unstructured for Object & HDFS
– Mixed Workload for Block, Object, HDFS
 Различная емкость для каждой
стойки
 Расширяемость до сотен петабайт
© Copyright 2014 EMC Corporation. All rights reserved.
28
Конфигурации
Unstructured (Object and HDFS)
RU
40
39
38
37
36
35
34
33
32
31
30
29
28
27
26
25
24
23
22
21
20
19
18
17
16
15
14
13
12
11
10
9
8
7
6
5
4
3
2
1
ECS SMALL
GbE
10 GbE
10 GbE
Empty
2u 4 node
Blank
Blank
Blank
Blank
15 Disk x 6TB
15 Disk x 6TB
15 Disk x 6TB
15 Disk x 6TB
Not Used
360TB
RU
40
39
38
37
36
35
34
33
32
31
30
29
28
27
26
25
24
23
22
21
20
19
18
17
16
15
14
13
12
11
10
9
8
7
6
5
4
3
2
1
ECS MEDIUM
GbE
10 GbE
10 GbE
Empty
2u 4 node
Blank
Blank
Blank
Blank
60 Disk x 6TB
60 Disk x 6TB
60 Disk x 6TB
60 Disk x 6TB
Not Used
1.4PB
© Copyright 2014 EMC Corporation. All rights reserved.
RU
40
39
38
37
36
35
34
33
32
31
30
29
28
27
26
25
24
23
22
21
20
19
18
17
16
15
14
13
12
11
10
9
8
7
6
5
4
3
2
1
ECS DENSE
GbE
10 GbE
10 GbE
2u 4 node
2u 4 node
60 Disk x 6TB
60 Disk x 6TB
60 Disk x 6TB
60 Disk x 6TB
60 Disk x 6TB
60 Disk x 6TB
60 Disk x 6TB
60 Disk x 6TB
Not Used
2.9PB
Mixed Workload (Object, HDFS, Block)
RU
40
39
38
37
36
35
34
33
32
31
30
29
28
27
26
25
24
23
22
21
20
19
18
17
16
15
14
13
12
11
10
9
8
7
6
5
4
3
2
1
ECS SMALL
GbE
10 GbE
10 GbE
2u 4 node
2u 4 node
30 Disk x 1TB
30 Disk x 1TB
30 Disk x 1TB
30 Disk x 1TB
15 Disk x 6TB
15 Disk x 6TB
15 Disk x 6TB
15 Disk x 6TB
Not Used
360TB Object
+ 120TB
RU
40
39
38
37
36
35
34
33
32
31
30
29
28
27
26
25
24
23
22
21
20
19
18
17
16
15
14
13
12
11
10
9
8
7
6
5
4
3
2
1
ECS MEDIUM
GbE
10 GbE
10 GbE
2u 4 node
2u 4 node
30 Disk x 1TB
30 Disk x 1TB
30 Disk x 1TB
30 Disk x 1TB
60 Disk x 6TB
60 Disk x 6TB
60 Disk x 6TB
60 Disk x 6TB
Not Used
1.4PB Object
+120TB
29
1/--страниц
Пожаловаться на содержимое документа