Для настройки и дальнейшего управления системами хранения дынных серии DS35xx от IBM используется программа DS storage manager, последнюю версию которой можно скачать с официального сайта, конечно, после регистрации. Есть версии программы для разных операционных систем, Linux, Windows, Mac, HPUX

Здесь же, не лишним будет скачать последние обновления прошивки контроллеров системы хранения. Иначе СХД может не увидеть дисков или HBA адаптеры в серверах или возникнут другие сопутствующие проблемы.

Я даю ссылки на актуальные версии DS storage manager и прошивку на момент написания статьи.

Не знаю почему, но у многих возникают проблемы с поиском и скачиванием на сайте IBM файлов для загрузки. Заходим на Ibm.com -> Support and Downloads -> Fixes, updates and drivers -> Quick find-> в строке поиска "DS3500 (DS3512, DS3524)" -> View DS3500 (DS3512,DS3524) downloads. Портал IBM не всегда корректно отрабатывает, поэтому если не получается, попробуйте другой браузер.

Прошивки на контроллер, выглядят так

Файлы для загрузки DS storage manager, так

После установки и запуска программы, предлагается выбрать метод нахождения СХД. Automatic сканирует сеть и ищет подключенную DS35xx, в Manual нужно вручную ввести IP адреса обоих контроллеров нашей СХД. Адреса интерфейсов управления, которые заданы по умолчанию, для удобства написаны на самой системе хранения под портами. Если в сети работает DHCP, то адреса будут получены автоматически.

Мы видим , что для отказоустойчивости в каждый контроллер встроены по два порта управления, но, обычно, для управления используются первые порты каждого контроллера.

Схема подключения

Перед началом настройки нужно представлять, что хотим получить в итоге, если понимания нет, то и начинать не стоит. Сделаем самую простую схему, подключим к системе хранения два сервера по схеме.

В каждом сервере два SAS HBA адаптера, для тех кто не знает, это просто карта PCI-E, с входом SAS. По два HBA установлено для отказоустойчивости, если один из контроллеров в СХД выйдет из строя, то работа будет продолжена через другой. По такой же логике система защищена от проблем с SAS кабелем или HBA адаптером в сервере.

Настройка. Логика.

У нас есть СХД, в ней диски. Сначала нам нужно из дисков собрать какой-нибудь RAID (array), потом на этом RAID создать логический том (LUN), затем презентовать этот том серверам (mapping), чтобы они его увидели и могли с ним работать. Вот такая логика.

Теперь по порядку. Я буду совершать все манипуляции в симуляторе, скачать который можно на официальном сайте хранилищ IBM. Интерфейс не один в один повторяет то, что вы увидите на реальной DS3524 или DS3512

1.. Мы ранее выбрали автоматический метод поиска системы хранения, система нашла и подключила ее, СХД отображается в консоли.

2.. Кликаем правой кнопкой по СХД, выбираем пункт Manage, чтобы начать настройку.

3.. В новом окне открывается мастер, но т.к. я хочу показать универсальную последовательность действий, закрываем его.

4.. В закладке Logical/Physical View видим нераспределенное дисковое пространство. В симуляционной СХД диски двух типов, мы настроим привычные SATA. Сначала создаем Array (RAID)

5.. Далее следуем за мастером, который будет помогать подсказками.

6.. Задаем ИМЯ нашему array

7.. Выбираем, какой именно RAID мы хотим получить. Не видим 10 RAID, чтобы его создать нужно выбрать RAID 1

8.. И тут же мастер объясняет, что если вы создаете RAID 1 из четырех и более дисков, то автоматически создастся 10 RAID (или 1+0, то же самое)

9.. Выбираем создание RAID из 38 дисков

10.. После создания, автоматически запускается мастер создания тома (LUN), его также можно запустить и из консоли, как в 4-ом шаге, только выбирать надо созданный ранее array.

11.. Нужно указать размер LUN, в моем случае 8 Tb (всего свободно 17,6 Tb), и придумать название для тома

12.. Важный момент, если мы знаем, какая ОС будет установлена в этот LUN то нужно указать ее. Для VMware тоже есть строчка, для XenServer выбирается Linux. А у меня в симуляторе почему-то этих строчек нет

13.. После создания Array и LUN мы их видим в консоли

14.. Теперь необходимо перейти на другую вкладку и дать доступ к этому LUN серверу. Видим, что по умолчанию создана группа Default Group и этой группе доступен LUN1. Нам достаточно добавить наш сервер (сначала один, затем другой) в это группу, чтобы они могли подключиться к LUN1.

15.. Кликаем правой кнопкой мыши по Default Group, Define -> Host

16.. У каждого нашего сервера есть по два SAS HBA, именно через них происходи подключение к СХД. Система хранения может идентифицировать сервер именно по HBA адаптерам, а точнее, по их уникальным «identifier».

Задаем имя хосту (у меня ESX1). Выбираем два «identifier», которые принадлежат серверу, который мы подключаем. Посмотреть, какие идентификаторы у сервера, можно подключившись к ESXi хосту напрямую через vSphere Client или через vCenter Server. Там в искать разделе «storage adapters».

Переносим два «identifier» из левой колонки в правую. Затем выбираем каждый «identifier» и жмем на кнопку Edit, чтобы добавить и к нему описание. Такая процедура придумана для того, чтобы не запутаться в большом количестве идентификаторов.

У меня в симуляторе, какие-то нули вместо уникальных «identifier», не обращайте внимания, у вас все будет как положено.

17.. Теперь выбираем операционную систему хоста, если VMware то выбираем VMware

18.. После этого в консоли вы увидите свой Host и из-за того что он находится в группе Default Group, ему будет доступен LUN1.

Заключение. Получилась длинная статья, на практике все происходит намного быстрее, достаточно пару раз прощелкать все действия и процесс подключения систем хранения от IBM больше не будет взывать проблем.

Чуть сложнее настраивается подключение по iSCSI. Советую выбирать или SAS или FC.

Комплектующие для систем хранения DS3524 и DS3512

Систему хранения DS35xx можно сразу купить в сборе, а можно собирать постепенно, как конструктор. Например, начинать можно не с двухконтроллерной системы, а с одноконтроллерной. Диски тоже можно докупить.

PN	Наименование	Стоимость, $
1746A4D	IBM System Storage DS3524 Dual Controller (up to 24x2.5" HDDs, 4x6Gb miniSAS host ports, 2x1GB cache, no daughter cards (up to 2), miniSAS port for EXP3500, pwr supplies, fans)	5 980
1746A2D	IBM System Storage DS3512 Dual Controller (up to 12x3.5" HDDs, 4x6Gb miniSAS host ports, 2x1GB cache, no daughter cards (up to 2), miniSAS port for EXP3500, pwr supplies, fans)	5 750
1746A4S	IBM System Storage DS3524 Single Controller (up to 24x2.5" HDDs, 2x6Gb miniSAS host ports, 1GB cache, no daughter card, miniSAS port for EXP3500, pwr supplies, fans)	3 972
1746A2S	IBM System Storage DS3512 Single Controller (up to 12x3.5" HDDs, 2x6Gb miniSAS host ports, 1GB cache, no daughter card, miniSAS port for EXP3500, pwr supples, fans)	3 646
1746A4E	IBM System Storage EXP3524 for DS3500 (up to 24x2.5" HDDs, single ESM (up to 2))	2 651
1746A2E	IBM System Storage EXP3512 for DS3500 (up to 12x3.5" HDDs, single ESM (up to 2))	2 243
68Y8479	IBM System Storage DS3500 Second Controller (2x6Gb miniSAS host ports, 1GB cache, no daughter card, miniSAS port for EXP3500)	2 674
69Y0245	Environmental Services Module for EXP3512 (1746A2E) and EXP3524 (1746A4E) (for upgrade Single I/O EXP unit to Dual I/O)	755

Ниже представлены диски 2.5" диски для системы хранения DS3524 и полки расширения EXP3524. Диск объемом 1Tb снят с производства, но его еще можно найти на складах.

PN	Наименование	Стоимость, $
49Y1836	300GB 10K hot plug 2.5" 6Gb SAS HDD for DS3524 (1746A4S, 1746A4D) and EXP3524 (1746A4E)	333
81Y9891	300GB 15K hot plug 2.5" 6Gb SAS HDD for DS3524 and EXP3524	1084
49Y1851	500GB 7.2K hot plug 2.5" 6Gb NL-SAS HDD for DS3524 (1746A4S, 1746A4D) and EXP3524 (1746A4E)	412
49Y1841	146GB 15K hot plug 2.5" 6Gb SAS HDD for DS3524 (1746A4S, 1746A4D) and EXP3524 (1746A4E)	422
81Y9872	1TB 7.2K hot plug 2.5" 6Gb NL-SAS HDD for DS3524 (1746A4S, 1746A4D) and EXP3524 (1746A4E)	508
49Y2048	600GB 10K hot plug 2.5" 6Gb SAS HDD for DS3524 (1746A4S, 1746A4D) and EXP3524 (1746A4E)	474
81Y9903	200GB hot plug 2.5" 6Gb SAS SSD for DS3524 and EXP3524	6543
81Y9907	400GB hot plug 2.5" 6Gb SAS SSD for DS3524 and EXP3524	14241

Ниже представлены диски 3.5" диски для системы хранения DS3512 и полки расширения EXP3512.

PN	Наименование	Стоимость, $
49Y1876	1TB 7.2K hot plug 3.5" 6Gb NL-SAS HDD for DS3512 (1746A2S, 1746A2D) and EXP3512 (1746A2E)	419
49Y1871	2TB 7.2K hot plug 3.5" 6Gb NL-SASHDD for DS3524 and EXP3524	688
81Y9886	3TB 7.2K hot plug 3.5" 6Gb NL-SAS HDD for DS3524 and EXP3524	816
49Y1856	300GB 15K hot plug 3.5" 6Gb SAS HDD for DS3512 (1746A2S, 1746A2D) and EXP3512 (1746A2E)	431
49Y1861	450GB 15K hot plug 3.5" 6Gb SAS HDD for DS3512 (1746A2S, 1746A2D) and EXP3512 (1746A2E)	503
49Y1866	600GB 15K hot plug 3.5" 6Gb SAS HDD for DS3512 (1746A2S, 1746A2D) and EXP3512 (1746A2E)	648

Остальные комплектующие, которые могут понадобиться для расширения возможностей систем хранения данных IBM DS35xx.

PN	Наименование	Стоимость, $
39R6531	IBM 3m SAS Cable	115
69Y2876	8Gb FC SW 2xSFPs for DS3500 FC Daughter Card (68Y8432)	231
46M0907	IBM 6Gb SAS HBA	320
68Y8431	SAS Daughter Card for IBM DS3500 Controller (2x6Gb miniSAS host ports)	937
68Y8434	2GB Cache Upgrade for DS3500 Controller (68Y8479)	956
68Y8433	iSCSI Daughter Card for IBM DS3500 Controller (4xRJ45 1Gb ports)	1321
68Y8432	FC Daughter Card for IBM DS3500 Controller (4x8Gb ports, 2xSFP included (add. pair 69Y2876))	1343
81Y9613	10Gb iSCSI 2 Port Daughter Card for IBM DS3500 Controller (2xRJ45 1/10Gb ports)	1803

Система хранения данных
DS3512 Express Dual Controller Storage System

Читаем обновленную статью про системы хранения IBM DS35xxТУТ

IBM System Storage DS3500 Express сочетает в себе лучший опыт разработки и новейшую технологию интерфейсов 6 Гбит/с. Благодаря простому, эффективному и гибкому подходу к хранению данных, DS3500 является экономически эффективным и полностью интегрированным дополнением к серверам System x, BladeCenter и Power Systems. Благодаря значительным улучшениям при доступной для большинства бюджетов цене, DS3500 обеспечивает отличное сочетание цены и производительности, функциональности, масштабируемости и удобства в использовании для системы хранения данных начального уровня.

DS3500 Express обеспечивает:

Масштабируемость до производительности и функциональности среднего класса при ценах начального уровня
Сокращение расходов на электроэнергию и влияния на окружающую среду
Простоту без ущерба для управляемости благодаря отличному сочетанию функциональности и удобства использования

Особенности

Системы с интерфейсами Serial Attached SCSI (SAS) 6 Гбит/с обеспечивают производительность и масштабируемость среднего класса при цене, характерной для решений начального уровня.
Консолидация данных для обеспечения доступности данных и эффективности.
Удобное и мощное ПО управления хранением данных создано с учетом накопленного опыта.
Защита инвестиций, недорогие решения для резервного копирования и восстановления с удаленным зеркалированием через Fibre Channel, совместимость с DS5000 и DS4000.
Поддержка различных интерфейсов позволяет создавать многоуровневые среды хранения данных с прямым подключением устройств (DAS) и сетями хранения данных (SAN), что сокращает общие расходы на оборудование и его эксплуатацию.
Full Disk Encryption (FDE) со средствами локального управления ключами обеспечивает постоянную защиту данных.Соответствие Network Equipment Building System (NEBS) и модели постоянного тока (DC).

Характеристики продукта

Системы нового поколения на основе SAS 6 Гбит/с обеспечивают производительность решений среднего класса при цене начального уровня
Консолидация данных обеспечивает доступность данных и повышает эффективность работы во всей организации
Низкое энергопотребление позволяет сокращать расходы как на данном этапе, так и в будущем
DS3500 соответствует спецификации NEBs для телекоммуникационной отрасли, требующей очень надежной работы и поддержки источников постоянного тока 48 В
Удобное и мощное ПО управления хранением данных создано с учетом накопленного опыта.
Защита инвестиций, недорогие решения для резервного копирования и восстановления с удаленным зеркалированием через порты Fibre Channel, совместимость с DS5000 и DS4000.
Поддержка различных интерфейсов позволяет создавать многоуровневые системы хранения данных с прямым подключением устройств (DAS) и сетями хранения данных, что сокращает общие расходы на оборудование и его эксплуатацию.
Постоянное обеспечение безопасности данных за счет локального управления ключами в функции полного шифрования дисков (FDE).
Сочетание различных жестких дисков и модулей расширения позволяет удовлетворить все требования к приложениям, размещению в стойках и энергопотреблению
Программное обеспечение DS Storage ManagerЛогические разделыFlashCopyVolume Copy
Удаленное зеркалирование через порты FC

Краткое описание аппаратных средств

Два активных контроллера с возможностью «горячей» замены
Три варианта интерфейсов – SAS, SCSI over IP (iSCSI)/SAS, FC/SAS
- 4 или 8 портов SAS 6 Гбит/с
- 8 портов FC 8 Гбит/с и 4 порта SAS 6 Гбит/с
- 8 портов iSCSI 1 Гбит/с и 4 порта SAS 6 Гбит/с
Два порта расширения для дисков SAS 6 Гбит/с
До 96 дисков - высокопроизводительных и вторичных дисков (nearline) SAS и SED SAS
Модули EXP3512 (2U, 12 3,5-дюймовых дисков) и EXP3524 (3U, 24 2,5-дюймовых дисков)
- Возможно сочетание различных модулей
1 ГБ кэш-памяти на контроллер с возможностью увеличения до 2 ГБ
- Возможность зеркалирования, резервирования батарей и сохранения в flash-памяти
Модуль питания/охлаждения, который содержит элементы питания и вспомогательные вентиляторы охлаждения
Все основные компоненты являются модулями CRU (заменяемыми пользователем) с возможностью «горячей» замены. К ним можно легко получить доступ и произвести удаление или замену.
Модели постоянного тока, доступные в корпусах для 24 2,5-дюймовых дисков (DS3524 и EXP2524)

Пример расчета стоимости данного СХД
для работы по пртоколу iSCSI

P/N	Наименование	Цена,$	Кол-во	Итого,$
1746A4D	IBM System Storage DS3524 Express Dual Controller Storage System	6 160	1	6 160
49Y1836	300GB 10,000 rpm 6Gb SAS 2.5 HDD	349	8	2 792
Стоимость СХД:				8 952

Система хранения данных IBM DS3524 Express Dual Controller Storage System

В серии IBM DS35xx на данный момент есть две системы хранения данных с отличным соотношением цена-качество:

IBM System storage DS3524 – совместима с 24-мя SAS дисками 2.5 дюйма (6Gb/s)

15k оборотов в минуту - 146Gb, 300Gb
10k оборотов в минуту - 300Gb, 600Gb, 900Gb

и SSD дисками 200Gb, 400Gb

IBM System storage DS3512 – совместима с 12-ю SAS дисками 3.5 дюйма (6Gb/s)

15k оборотов в минуту - 300Gb, 450Gb, 600Gb
7.2k оборотов в минуту - 1Tb, 2Tb, 3Tb

Чтобы выбрать между этими системами хранения, нужно задать себе два вопроса: Какие диски я буду туда вставлять? и Сколько дисков мне нужно туда вставить?

Что касается других характеристик систем хранения, то они совпадают полностью

-- Два контроллера для отказоустойчивости и распределения нагрузки. Во многих СХД, построенных на базе обычных серверов всего один контроллер, например, возьмите тот же Qnap или Iomega, в спецификациях на этом внимание не заостряется. Но надо понимать, что если контроллер выйдет из строя, то работа остановится. В DS35xx два контроллера, через которые вы получаете доступ к созданным разделам (LUN-ам). Все компоненты дублируются.

-- Возможность расширения в основную полку СХД помещается 12 или 24 диска, чтобы расширить вместимость, нужно будет подключить полку(и) расширения, причем к DS3524 можно подключить полку с 3.5 дюймовыми дисками и наоборот к DS3512 полку с дисками 2.5 дюйма. Полки расширения подключаются каскадом SAS кабелями. К головному устройству можно подсоединить еще 3 полки расширения.

-- Совместимость с популярными продуктами виртуализации, чтобы была техническая поддержка. Это очень важный момент, особенно в период настройки информационной системы в целом. Можно задавать вопросы и в службу поддержки IBM и в техподдержку VMware (например). Кстати, официально Citrix XenServer поддерживается не полностью, только FC версия DS35xx, но работает XenServer исправно и по всем остальным протоколам (SAS, iSCSI)

-- Поддержка протоколов. Изначально, когда покупается пустая двух контроллерная полка DS35xx в каждый контроллере встроены по два SAS порта. Их достаточно, чтобы начать работу. Если же требуется работать по оптическим каналам или по iSCSI (нужно выбрать что-то одно, и то и то не получится), докупаются карты расширения в оба контроллера. В каждой карте расширения 4 порта iSCSI или FC. SAS порты остаются в СХД все равно.

-- Техническая поддержка и гарантия на головное устройство 3 года, а на каждый диск от IBM, который вы вставляете в DS35xx распространяется ее гарантия. Некоторые администраторы по привычке планируют сразу взять дисков про запас, на случай аварии, но в этом большого смысла нет, т.к. после обращения в поддержку, вам оперативно присылают замену любой вышедшей из строя детали.

-- Простой интерфейс управления позволяет ее настраивать даже не специалисту. Главное понять логику подключения, которая описана в стать настройка DS3524.

-- Развитие, системы хранения постоянно модифицируют, выпуская новые и новые прошивки. В основном, разработчики держат курс на поддержку сред виртуализации и их функционала.

Пример расчета стоимости данного СХД

P/N	Наименование	Цена,$	Кол-во	Итого,$
1746A4D	IBM System Storage DS3524 Express Dual Controller Storage System	5200	1	5200
49Y1836	300GB 10,000 rpm 6Gb SAS 2.5 HDD	349	8	2792
Стоимость СХД:				7 972