Бэкплейн Dell PowerEdge: когда менять ради NVMe

У PowerEdge R740xd стоят 24 одинаковых отсека 2,5 дюйма. В одной конфигурации сервер принимает 12 NVMe и 12 SAS/SATA, в другой — 24 NVMe через PCIe-коммутаторы. Снаружи разница почти не видна. Внутри это две разные схемы подключения.

Если Вы планируете дисковый апгрейд, сначала восстановите путь от накопителя до процессора. Тогда станет ясно, достаточно ли купить NVMe или в смету войдут бэкплейн, кабели, райзеры, платы расширения и монтажные работы.

Короткий вердикт: бэкплейн оставляют, когда Dell подтверждает нужный тип и число накопителей для точной модели, а в сервере уже стоят остальные узлы этой топологии. Если текущая схема рассчитана на SAS/SATA или меньшее число NVMe, покупка одних накопителей задачу не закроет.

Бэкплейн работает внутри конкретной схемы подключения #

Бэкплейн — плата за дисковой корзиной. Накопители входят в неё через фронтальные отсеки, а дальше сигнал идёт к PERC, PCIe-слотам и процессорам. Поэтому бэкплейн нельзя выбирать отдельно от контроллера, райзеров и кабелей.

NVMe до заказа комплекта переделки

В техническом руководстве Dell по R740 и R740xd передний бэкплейн указан как отдельный узел шасси. У R740xd также встречаются средний и задний бэкплейны: сзади можно установить два диска 3,5 дюйма либо четыре диска 2,5 дюйма. Запись «24 отсека спереди» не описывает всю дисковую часть сервера.

SAS и SATA в R740xd подключаются к CPU1 через встроенный PERC. NVMe работают через PCIe: напрямую от процессоров, через extender-карты либо через PCIe-коммутаторы. Совпадение форм-фактора диска с салазкой подтверждает только механическую установку.

Перед заказом полезно отдельно посчитать, какие накопители сервер действительно увидит. Фронт на 24 позиции ещё не обещает 24 рабочих NVMe.

Двенадцать и двадцать четыре NVMe требуют разного железа #

В схеме R740xd на 12 NVMe каждый накопитель получает прямое соединение PCIe x4 с одним из двух процессоров. Для передачи линий используются extender-карты, связанные со слотами 1, 4 и 8. Остальные 12 позиций работают с SAS/SATA через PERC.

Слот, занятый дисковым апгрейдом

Конфигурация на 24 NVMe устроена иначе. Накопители подключены через PCIe-коммутаторы: по 12 устройств на каждый процессор. Переход с 12 на 24 NVMe поэтому нельзя свести к замене дисков или одной платы за корзиной.

У этой схемы есть ещё одно условие: два процессора. Техническое руководство Dell указывает по 48 линий PCIe 3.0 на процессор у R740 и R740xd. Если сервер собран с одним CPU, линии и слоты второго процессора недоступны — даже при физически подходящем бэкплейне.

Распределение PCIe влияет и на выбор между дисковым и процессорным апгрейдом. В отдельном материале разобрано, когда NVMe ускоряют 1С, а когда деньги лучше направить на ядра.

Соседняя модель — не образец для переделки #

Схему R740xd нельзя переносить на другой PowerEdge по числу отсеков. Даже внутри одного поколения Dell разводит NVMe по-разному.

PowerEdge R440 поддерживает до четырёх NVMe. Первые два подключаются к CPU1 через PCIe-extender, ещё два — к CPU2 через мостовую плату в слоте ввода-вывода. Первые шесть SAS/SATA при этом идут через встроенный PERC.

У R640 конфигурация на восемь NVMe сохраняет два места для SAS/SATA. Эти восемь накопителей связаны с CPU2 напрямую, а два SAS/SATA подключены через mini-PERC к CPU1.

Чтобы получить десять NVMe в R640, последние два диска подключают к CPU1 через extender-карту в PCIe slot 1. Сервер теряет один слот расширения. Если там уже стоит сетевой адаптер или HBA, дисковый апгрейд потребует переделать остальную конфигурацию.

Отсюда рабочее правило: проверяйте не «поддерживает ли модель NVMe», а конкретную схему — число дисков, число процессоров, занятые слоты и требуемые карты. Официальный документ для этой проверки — NVMe and I/O Topologies for Dell EMC PowerEdge Servers, версия 1.4 от 22 апреля 2020 года.

Когда установленный бэкплейн можно оставить #

Оставляйте бэкплейн, если одновременно выполнены четыре условия:

руководство Dell для точной модели допускает нужный тип и число накопителей;
установленный бэкплейн относится к этой конфигурации;
в сервере есть нужные PERC, extender-карты или PCIe-коммутаторы;
хватает процессоров, линий PCIe и свободных слотов.

Например, установленный NVMe-бэкплейн ещё не означает, что R740xd готов принять 12 NVMe. Техническое руководство Dell отдельно требует определённые варианты PCIe-райзеров для поддержки NVMe SSD. В смете могут появиться райзер, несколько extender-карт и кабельный комплект.

Сам бэкплейн меняют, когда его интерфейс или топология не совпадают с целевой конфигурацией. Типичный случай — сервер с SAS/SATA-корзиной, который хотят переделать под NVMe. Другой вариант — переход с частичной NVMe-конфигурации на схему с PCIe-коммутаторами.

Не заказывайте плату только по фотографии разъёмов. Service Tag и перечень установленных компонентов дадут больше информации, чем внешний вид корзины.

Замена затрагивает половину передней части шасси #

Бэкплейн нельзя заменить через переднюю панель за пять минут. В официальном 3D-руководстве Dell для PowerEdge R760 процедура включает снятие крышки, монтажного каркаса, держателя дисков, воздушного кожуха, корпуса вентиляторов и модуля PERC.

Это влияет на бюджет даже без готового прайса. В заявке нужно считать не только плату, но и совместимые кабели, карты, крепёж, простой сервера и работу инженера. Если аппарат обслуживается по гарантии, самовольная сборка из деталей соседней конфигурации добавляет спор о совместимости.

Цены на такие комплекты зависят от поколения, состава и канала поставки в Россию, поэтому честную фиксированную сумму без коммерческих предложений назвать нельзя. Сравнивайте в рублях две полные сметы: дооснащение установленного сервера и готовую заводскую NVMe-конфигурацию. Отдельно внесите накопители и схему хранения — здесь поможет расчёт дисковой подсистемы и PERC.

Совместимое железо может работать медленнее из-за прошивки #

В серверах PowerEdge 16G аппаратная совместимость ещё не гарантирует ожидаемую скорость линии. Dell описала случай с коммутируемым бэкплейном 24 × 2,5 дюйма для NVMe в R760, R7615 и R7625.

Его аппаратная часть поддерживает PCIe Gen5 на линии между процессором и коммутатором. Прошивка бэкплейна 3.31 ошибочно сообщает BIOS предел Gen4. После обновления BIOS система учитывает этот предел и переводит входящую линию на Gen4.

Dell исправила сообщение о предельной скорости в прошивке 3.32. После её установки входящая линия снова работает как Gen5. Соединение от коммутатора к самим накопителям по конструкции остаётся Gen4 — это не ошибка.

Перед заменой исправного узла сверяйте BIOS и прошивку бэкплейна. Для R7615 и R7625 Dell связывает проявление с BIOS 1.6.6 и новее, для R760 — с BIOS 2.4.4 и новее. Эти номера относятся только к описанному Dell случаю и не переносятся на другие модели.

Что внести в заявку на апгрейд #

Не начинайте заявку со строки «бэкплейн на 24 NVMe». Сначала зафиксируйте исходную и целевую топологию:

запишите Service Tag, точную модель и число установленных процессоров;
определите передний, средний и задний бэкплейны;
найдите в документации Dell схему под нужное число NVMe;
сверьте PERC, райзеры, extender-карты, PCIe-коммутаторы и кабели;
проверьте занятые PCIe-слоты, BIOS и прошивку бэкплейна;
сравните в рублях полный комплект переделки с сервером в заводской NVMe-конфигурации.

Если Dell описывает нужную схему и большая часть узлов уже стоит, сохраняйте бэкплейн и докупайте недостающие компоненты. Если расходятся интерфейс или топология, закладывайте комплект переделки. Если нужной схемы нет в документации для точной модели и числа CPU, не собирайте её из деталей соседнего PowerEdge.