Новая страница
HP D2700: схема дисковых массивов и назначение хранилищ
| Версия |
0.2 |
| Дата |
05.08.2026 |
| Статус |
Схема согласована |
| Проект |
Расширение памяти сервера |
1. Назначение документа
Документ фиксирует принятую физическую раскладку дисков в полке HP StorageWorks D2700, конфигурацию аппаратных RAID-массивов, назначение каждого массива и роль резервного диска.
В рамках этой статьи последовательно проектируется и настраивается файловое хранилище: SMB-шары, NFS-ресурсы, репозиторий образов Clonezilla, права доступа, ACL, квоты, теневые копии и локальное резервирование выбранных данных.
Массив RECOVERY и его назначение описываются здесь только для фиксации общей дисковой архитектуры. Установка, настройка и эксплуатация TFTP/PXE-сервера будут оформлены в отдельной статье Wiki.
Принятое решение: в D2700 создаются два массива RAID 50, один массив RAID 1 и один общий горячий резервный диск.
2. Состав оборудования
- Сервер: HP ProLiant DL380 G7.
- Гипервизор: Proxmox VE.
- Внешняя дисковая полка: HP StorageWorks D2700, 25 отсеков SFF.
- Внешний RAID-контроллер: HP Smart Array P411.
- Интерфейс подключения: внешний SAS, кабель Mini-SAS SFF-8088.
- Все диски, включаемые в массивы и резерв, должны быть SAS и определяться контроллером P411.
3. Физическая раскладка дисков по отсекам
| Отсеки |
Диски |
Роль |
Имя |
| 1–12 |
12 × 600 ГБ SAS 10K |
Основной RAID 50 |
MAIN-DATA |
| 13–14 |
2 × 146 ГБ SAS 15K |
Служебный RAID 1 |
RECOVERY |
| 15 |
1 × 600 ГБ SAS 10K |
Общий горячий резерв |
GLOBAL-SPARE |
| 16–25 |
10 × 500 ГБ SAS 7.2K |
Резервный RAID 50 |
CRITICAL-BACKUP |
3.1. Карта отсеков
HP D2700 — отсеки 01–25
01 600 GB MAIN-DATA
02 600 GB MAIN-DATA
03 600 GB MAIN-DATA
04 600 GB MAIN-DATA
05 600 GB MAIN-DATA
06 600 GB MAIN-DATA
07 600 GB MAIN-DATA
08 600 GB MAIN-DATA
09 600 GB MAIN-DATA
10 600 GB MAIN-DATA
11 600 GB MAIN-DATA
12 600 GB MAIN-DATA
13 146 GB RECOVERY
14 146 GB RECOVERY
15 600 GB GLOBAL-SPARE
16 500 GB CRITICAL-BACKUP
17 500 GB CRITICAL-BACKUP
18 500 GB CRITICAL-BACKUP
19 500 GB CRITICAL-BACKUP
20 500 GB CRITICAL-BACKUP
21 500 GB CRITICAL-BACKUP
22 500 GB CRITICAL-BACKUP
23 500 GB CRITICAL-BACKUP
24 500 GB CRITICAL-BACKUP
25 500 GB CRITICAL-BACKUP
4. Конфигурация массивов
4.1. Основной массив MAIN-DATA
| Отсеки |
1–12 |
| Состав |
12 × 600 ГБ SAS 10K |
| Уровень RAID |
RAID 50 |
| Группировка |
2 группы RAID 5 по 6 дисков |
| Расчётная полезная ёмкость |
6 ТБ, приблизительно 5,46 ТиБ |
| Назначение |
Основное файловое хранилище: рабочие документы, SMB/NFS-ресурсы, образы Clonezilla и другие активные данные. |
RAID 50 состоит из нескольких RAID 5-групп, объединённых полосованием. При двух группах массив выдерживает отказ одного диска в каждой группе, но потеря двух дисков в одной и той же группе до завершения rebuild приводит к потере всего логического диска.
4.2. Служебный массив RECOVERY
| Отсеки |
13–14 |
| Состав |
2 × 146 ГБ SAS 15K |
| Уровень RAID |
RAID 1 |
| Расчётная полезная ёмкость |
146 ГБ, приблизительно 136 ГиБ |
| Назначение |
Выделенное хранилище для будущего сервера восстановления: TFTP, PXE, Cisco IOS/IOS XE, ROMMON, конфигурации сетевого оборудования и служебные загрузочные файлы. |
Граница статьи: здесь фиксируются только назначение и место массива RECOVERY в общей архитектуре. Настройка TFTP/PXE, правила загрузки прошивок и процедура восстановления Cisco описываются в отдельной статье. Полноразмерные образы рабочих станций Clonezilla размещаются на MAIN-DATA.
4.3. Горячий резерв GLOBAL-SPARE
| Отсек |
15 |
| Диск |
600 ГБ SAS 10K |
| Роль |
Общий online spare для массивов MAIN-DATA, RECOVERY и CRITICAL-BACKUP. |
Один online spare может быть назначен нескольким массивам, подключённым к одному контроллеру. При отказе активного диска Smart Array автоматически задействует GLOBAL-SPARE и начинает восстановление данных без вмешательства администратора.
4.3.1. Что происходит после отказа диска
- Контроллер обнаруживает отказ физического диска в одном из массивов.
- Диск из отсека 15 активируется как временный участник пострадавшего массива.
- Контроллер восстанавливает на него недостающие данные по информации отказоустойчивости RAID. Для RAID 50 rebuild выполняется внутри соответствующей RAID 5-группы.
- После завершения rebuild массив снова получает полную дисковую отказоустойчивость, но отдельного свободного hot spare временно больше нет.
Штатное состояние:
массив + свободный GLOBAL-SPARE
Отказ диска:
массив в восстановлении → данные строятся на GLOBAL-SPARE
После первого rebuild:
массив снова отказоустойчив → GLOBAL-SPARE временно стал рабочим диском массива
4.3.2. Что происходит после установки нового диска в исходный отсек
После извлечения неисправного диска и установки совместимого исправного диска в его исходный отсек контроллер автоматически запускает обратное копирование (copy-back):
- Новый диск распознаётся Smart Array как замена отказавшего диска.
- Данные автоматически переносятся с активированного
GLOBAL-SPARE на новый диск.
- Новый диск становится штатным участником исходного массива.
- Диск в отсеке 15 освобождается от роли временного участника массива и снова получает статус доступного online spare.
После установки замены:
GLOBAL-SPARE
│
└── copy-back данных → новый диск в исходном отсеке
│
└── становится штатным членом массива
Отсек 15:
GLOBAL-SPARE снова доступен для всех назначенных массивов
Это не secure erase. После copy-back контроллер возвращает диск из отсека 15 в состояние свободного резерва и обновляет его служебную роль. Полное обнуление всех секторов spare-диска для этого не требуется; при следующем задействовании контроллер перезапишет необходимые области.
4.3.3. Требования к заменяющему диску
- Интерфейс — SAS.
- Ёмкость — не меньше ёмкости отказавшего диска.
- Диск должен поддерживаться контроллером и корректно определяться в D2700.
- Предпочтительно использовать диск той же модели, скорости и сектора.
- Если установить диск большего объёма, массив использует только объём, соответствующий исходному диску; излишек не увеличит массив автоматически.
Не прерывать rebuild или copy-back. Нельзя извлекать spare-диск, заменяющий диск, отключать полку или перезагружать оборудование без необходимости до завершения операции. Во время rebuild массив сильнее нагружен и имеет повышенный риск потери данных при дополнительном отказе в той же RAID-группе.
Контроль после замены: необходимо убедиться, что logical drive имеет статус OK, операция copy-back завершена, новый диск входит в массив, а отсек 15 снова отображается как доступный online spare.
4.4. Резервный массив CRITICAL-BACKUP
| Отсеки |
16–25 |
| Состав |
10 × 500 ГБ SAS 7.2K |
| Уровень RAID |
RAID 50 |
| Группировка |
2 группы RAID 5 по 5 дисков |
| Расчётная полезная ёмкость |
4 ТБ, приблизительно 3,64 ТиБ |
| Назначение |
Локальные копии выбранной критичной информации с основного массива. Массив не публикуется как обычная пользовательская шара. |
5. Логика использования массивов
MAIN-DATA
├── рабочие документы
├── SMB-шары
├── NFS-репозиторий
└── образы Clonezilla
│
└── копирование выбранных критичных данных
↓
CRITICAL-BACKUP
RECOVERY
└── зарезервирован под отдельный проект TFTP/PXE и восстановления Cisco
5.1. Основные правила
MAIN-DATA является основным рабочим хранилищем.
CRITICAL-BACKUP содержит только отобранные критичные копии.
CRITICAL-BACKUP не должен быть доступен пользователям для обычной записи.
RECOVERY зарезервирован под отдельный TFTP/PXE-сервис; его настройка выполняется по другой статье Wiki.
GLOBAL-SPARE не форматируется и не передаётся операционной системе.
- RAID защищает от отказа отдельных дисков, но не заменяет резервное копирование.
Не считать CRITICAL-BACKUP полноценной независимой резервной копией. Оба RAID-массива находятся в одной полке, подключены к одному контроллеру и зависят от одного сервера и общей инфраструктуры. Для действительно критичных данных в дальнейшем потребуется дополнительная копия вне D2700.
6. Имена объектов
| Объект |
Имя |
Статус |
| Основной RAID 50 |
MAIN-DATA |
Зафиксировано |
| Служебный RAID 1 |
RECOVERY |
Зафиксировано |
| Общий горячий резерв |
GLOBAL-SPARE |
Зафиксировано |
| Резервный RAID 50 |
CRITICAL-BACKUP |
Зафиксировано |
7. Контроль перед созданием массивов
- Проверить, что все 25 дисков определяются контроллером P411.
- Зафиксировать серийные номера, ёмкость, скорость вращения и номер отсека каждого диска.
- Проверить отсутствие статусов
Failed и Predictive Failure.
- Проверить состояние кэш-модуля и батареи/конденсатора P411.
- Создавать массивы только после проверки соответствия дисков карте отсеков.
- Назначить диск из отсека 15 общим online spare для всех трёх массивов.
- Сохранить отчёт конфигурации Smart Array после создания массивов.
8. Следующие разделы инструкции
- Установка P411 в DL380 G7 и подключение D2700.
- Первичный запуск и проверка состояния полки.
- Создание массивов в Smart Array.
- Проверка кэша, батареи/конденсатора и параметров rebuild.
- Передача логических дисков в виртуальные машины Proxmox.
- Архитектура виртуальной машины файлового сервера SMB/NFS.
- Файловые системы, точки монтирования, ACL, квоты и теневые копии.
- Репозиторий Clonezilla и политика хранения образов.
- Ссылка на отдельную статью по TFTP/PXE и восстановлению Cisco.
- Сетевые интерфейсы до и после модернизации.
- Мониторинг, проверка резервных копий и аварийное восстановление.
9. Справочные материалы