StorageReview.com

Обзор Supermicro SuperServer 2028U-TNR4T+

Предприятие  ◇  серверу

Сервер Supermicro SuperServer 2028U-TNR4T+ — это высокопроизводительный сервер, использующий шасси CSE-219UAC-R1K02 2U, в котором размещаются шасси SC219UAC(4)-R1K02 2U и двухпроцессорная подсистема X10DRU-i+. Как и другие серверы SuperServer, 2028U-TNR4T+ предлагает огромную гибкость для сценариев использования, связанных с интенсивными рабочими нагрузками приложений, благодаря наличию 8 портов SATA3 (6 Гбит/с), поддержке 24 портов SAS3 через дополнительные карты расширения и 4 слотам NVMe, что на два больше, чем у 1028U SuperServer. Недавно мы использовали 2028U-TNR4T+ для тестирования твердотельных накопителей Intel SSD DC P3700 , Memblaze PBlaze4 и Samsung XS1715 2.5″ NVMe, а также твердотельных накопителей Huwei ES3000, HGST SN100, Memblaze PBlaze и Intel P3608 HHHL AIC в форм-факторе NVMe.

Поддержка NVMe является огромным преимуществом 2028U-TNR4T+, поскольку все больше предприятий внедряют эту набирающую популярность технологию благодаря ее способности обеспечивать высокоскоростные соединения с низкой задержкой напрямую от процессора к NVMe SSD. Кроме того, она значительно повышает производительность, существенно снижая задержку устройств хранения, поскольку напрямую взаимодействует с PCI-E между процессором и NVMe SSD. 2028U-TNR4T+ оснащен 24 разъемами для памяти, поддерживающими до 768 ГБ энергонезависимой памяти DDR4 RDIMM или 1536 ГБ памяти LRDIMM DDR4. Как и большинство серверов Supermicro, 2028U-TNR4T+ использует контроллер SATA, интегрированный в чипсет, создавая десятипортовую подсистему SATA; шесть из которых поддерживаются Intel PCH, а остальные четыре — Intel SCU.

Мы сконфигурировали наш SuperServer 2028U-TNR4T+ с 768 ГБ оперативной памяти Crucial DDR4 (32 ГБ x 24) и двумя процессорами Intel E5-2697v3, используя HBA-адаптер Supermicro AOC-S3008L-L8i для подключения 24 отсеков SAS3, отказавшись от варианта конфигурации SATA. Мы также будем использовать 4 порта 10GBase-T через AOC-2URN4-i4XT. Для демонстрации производительности SuperServer мы будем использовать в качестве ориентира недавно рассмотренные NVMe SSD-накопители, упомянутые выше.

Технические характеристики Supermicro SuperServer 2028U-TNR4T+

  • Материнская плата: Super X10DRU-i+
  • CPU :
    • Процессоры Intel Xeon семейства E5-2600 v3 (с TDP до 160 Вт)
    • Двухсокетный R3 (LGA 2011)
  • Ядра / Кэш: до 18 ядер / до 45 МБ кэша
  • Системная шина: QPI до 9.6 ГТ/с
  • Системная память
    • Объем памяти:
      • 24 слота для модулей памяти DDR4 DIMM с 288 контактами
      • До 1.5 ТБ ECC LRDIMM, RDIMM
    • Тип памяти: 2133/1866/1600 МГц ECC DDR4 SDRAM 72-бит
    • Размеры модулей DIMM: 64 ГБ, 32 ГБ, 16 ГБ, 8 ГБ, 4 ГБ
    • Напряжение памяти: 1.2 В
    • Обнаружение ошибок: Исправляет однобитовые ошибки.
  • Бортовые устройства
    • Чипсет: Intel C612
    • SATA: SATA3 (6 Гбит/с) с RAID 0, 1, 5, 10
    • ИПМИ:
      • Поддержка интеллектуального интерфейса управления платформой v.2.0
      • IPMI 2.0 с виртуальными носителями через локальную сеть и поддержкой KVM-over-LAN
      • ASPEED AST2400 БМК
  • Для подключения к сети
    • 4 порта 10GBase-T через AOC-2URN4-i4XT
    • Intel X540 10GBase-T
    • 1x Realtek RTL8211E PHY (выделенный IPMI)
  • Графика: ASPEED AST2400 BMC
  • Вход / выход
    • SATA: 8 портов SATA3 (6 Гбит/с)
    • SAS: поддержка 24 портов SAS3 через дополнительные платы расширения.
    • NVMe: 4 порта NVMe
    • LAN:
      • 4 порта RJ45 10GBase-T LAN
      • 1 выделенный порт IPMI LAN RJ45
    • USB: 5 портов USB 3.0 (2 сзади, 2 на встроенном разъеме, 1 Type A)
    • Видео: 1x VGA-разъем
    • Последовательный порт / Разъем: 1x разъем для последовательного порта
    • DOM: 2 порта SuperDOM (диск на модуле).
  • Системный БИОС:
    • Тип BIOS: 128 МБ SPI Flash EEPROM с AMI BIOS
    • Возможности БИОС:
      • Подключи и работай (PnP)
      • APM 1.2
      • PCI 2.3
      • ACPI 1.0 / 2.0 / 3.0 / 4.0
      • Поддержка USB-клавиатуры
      • SMBIOS 2.7.1
      • УЕФИ 2.3.1
  • Управление:
    • Программного обеспечения:
      • СуперДоктор 5
      • Intel Node Manager 3.0
      • Смотреть собаку
      • НМИ
      • SMCBU и SMM
      • Дополнительный IPMI 1.5 / 2.0
  • Конфигурации питания:
    • Управление питанием ACPI
    • Режим включения для восстановления питания переменного тока
  • Шасси:
    • Форм-фактор: 2U для монтажа в стойку
    • Модель: CSE-219UAC-R1K02
  • Размеры и вес:
    • Ширина: 17.2 "(437mm)
    • Высота: 3.5 ″ (89mm)
    • Глубина: 27.76 дюймов (705.3 мм)
  • Вес
    • Вес нетто: 36 lbs (16.4 кг)
    • Вес брутто: 72 фунтов (32.7 кг)
  • Передняя панель
    • Кнопки:
      • Кнопка включения / выключения питания
      • Кнопка сброса системы
    • светодиоды:
      • Светодиод состояния питания
      • Светодиод активности жесткого диска
      • 2 светодиода, отображающие активность сети
      • Светодиодный индикатор системной информации (перегрев/UID)
  • Слоты расширения
    • PCI-Express: 6 слотов PCI-E 3.0 x8 (4 слота для жесткого диска, 10.5″ для жесткого диска, 1 слот для жесткого диска, 1 внутренний слот для жесткого диска)
  • Отсеки для приводов (с возможностью горячей замены):
    • 24 отсеков для 2.5-дюймовых жестких дисков с возможностью горячей замены.
    • По умолчанию имеется 8 портов SATA3 и 4 порта NVMe.
    • Дополнительно доступны 24 портов SAS3 через AOC.
  • Вентиляторы: 4 мощных 8-сантиметровых вентилятора с ШИМ-управлением.
  • Источник питания с цифровым управлением переключением:
    • Одноканальные резервные источники питания мощностью 0 Вт, уровня Titanium (96%)
    • Вход переменного тока:
      • 100-127 В, 50-60 Гц
      • 200-240 В, 50-60 Гц
    • + 12В:
      • Максимальный ток: 62.5 А, минимальный ток: 0 А (100–127 В переменного тока)
      • Максимальный ток: 83 А (200–240 В переменного тока) и минимальный ток: 0 А.
    • 12V SB:
      • Макс: 2.1А
      • Мин: 0 А

Дизайн и сборка

Сервер Supermicro SuperServer 2028U-TNR4T+ выполнен в форм-факторе 2U и имеет 24 отсека для 2.5-дюймовых SAS/SATA-накопителей с возможностью горячей замены; 8 портов SATA3 и 4 порта NVMe, а также опционально 24 порта SAS3 от AOC. Это, безусловно, надёжный сервер, способный выдержать любые нагрузки.

Панель управления расположена на передней панели сервера, на внешней кромке корпуса, где находятся кнопки питания и перезагрузки. Светодиоды панели управления также расположены на левой стороне корпуса, включая информационный светодиод, который оповещает оператора о различных состояниях, светодиоды NIC1 и NIC2, которые мигают, указывая на сетевую активность на GLAN2; светодиод питания, который показывает, когда питание подается на блоки питания системы; и светодиод HDD, который мигает, указывая на активность IDE-канала на жестком диске. Кроме того, каждый держатель диска имеет два светодиода состояния на передней панели.

На задней панели расположены различные слоты для карт расширения, включая слоты двойной ширины, полной высоты, полной длины и полной высоты, полной длины. Порты ввода/вывода включают 2 порта USB 3.0, выделенный порт IPMI LAN, COM-порт и порт VGA. Supermicro указывает, что существует несколько возможных сетевых конфигураций в зависимости от предустановленной карты расширения Ultra. Кроме того, на задней панели показаны два отдельных модуля питания для резервирования питания. Это позволяет продолжать работу без необходимости выключения сервера, пока ИТ-специалисты заменяют вышедший из строя модуль питания.

Чтобы снять крышку корпуса, достаточно ослабить один винт на задней стороне крышки, после чего она легко сдвинется. Компания Supermicro известна своей организованной компоновкой компонентов, и материнская плата SUPER X10DRU-i+ 2028U-TNR4T+ не является исключением. Справа расположены различные порты SATA, частично перекрытые кабелями NVMe, проложенными с этой стороны корпуса.

На серверной плате установлены два процессора Intel E5-2600v3 Series в разъемах LGA2011 (Socket R3), а также 24 разъема для памяти, поддерживающие до 768 ГБ памяти DDR4-1600/1333/1066/800 с регистровым ECC или 1536 ГБ памяти DDR4-2133/1866/1600/1333 с LRDIMM.

Анализ рабочей нагрузки приложения

Наши первые тесты включают оценку производительности MySQL OLTP с помощью SysBench и производительности Microsoft SQL Server OLTP с использованием смоделированной рабочей нагрузки TPC-C. Для наших приложений на каждом диске будут запущены 4 виртуальные машины с одинаковой конфигурацией.

В протоколе тестирования Microsoft SQL Server OLTP от StorageReview используется текущая версия бенчмарка C (TPC-C) Совета по производительности обработки транзакций (Transaction Processing Performance Council), представляющего собой онлайн-бенчмарк обработки транзакций, имитирующий действия, встречающиеся в сложных средах приложений. Бенчмарк TPC-C ближе, чем синтетические бенчмарки производительности, к оценке сильных и слабых мест инфраструктуры хранения данных в средах баз данных. Наш протокол SQL Server для этого обзора измеряет производительность и задержку транзакций при нагрузке в 15 000 виртуальных пользователей.

Оборудование для генерации нагрузки при тестировании SQL Server OLTP второго поколения

  • Виртуальные клиентские хосты Dell PowerEdge R730 VMware ESXi vSphere (2)
    • В кластере четыре процессора Intel E5-2690 v3 с частотой 124 ГГц (по два на узел, 2.6 ГГц, 12 ядер, 30 МБ кэш-памяти).
    • 512 ГБ ОЗУ (256 ГБ на узел, 16 ГБ x 16 DDR4, 128 ГБ на процессор)
    • Загрузка с SD-карты (Lexar 16 ГБ)
    • 2 адаптера Mellanox ConnectX-3 InfiniBand (vSwitch для vMotion и сети виртуальных машин)
    • 2 х Emulex 16GB двухпортовый FC HBA
    • 2 х Сетевая карта Emulex 10GbE с двумя портами
    • VMware ESXi vSphere 6.0 / Enterprise Plus 4-CPU
  • Виртуализированный SQL-хост Supermicro SuperServer 2028U-TNR4T+
    • Два процессора Intel E5-2699 v3 с частотой 83 ГГц (2.3 ГГц, 18 ядер, 45 МБ кэш-памяти).
    • 768 ГБ оперативной памяти (32 ГБ x 24 Crucial DDR4, 384 ГБ на каждый процессор)
    • VMware ESXi vSphere 6.0 / Enterprise Plus 2-CPU

Анализируя результаты работы SQL Server, можно отметить, что 2028U-TNR4T+ продемонстрировал наилучшие показатели с твердотельными накопителями Intel DC SSD P3700, показав суммарную производительность 3 157,341 транзакций в секунду, в то время как производительность отдельных виртуальных машин варьировалась от 3 157,469 до 3 157,143 транзакций в секунду. Накопитель Memblaze также показал отличные результаты, достигнув максимальной производительности в 3 157,235 транзакций в секунду и суммарной производительности в 3 157,112 транзакций в секунду. 

Анализ средних результатов задержки в ходе теста SQL Server с участием 15 000 пользователей показал, что SSD-накопитель 2028U-TNR4T+ продемонстрировал впечатляющие результаты по сравнению с SSD-накопителями Samsung и Intel, показавшими время задержки в 7.0 мс.

Виртуализированный хост Sysbench Supermicro SuperServer 2028U-TNR4T+

  • Два процессора Intel E5-2699 v3 с частотой 83 ГГц (2.3 ГГц, 18 ядер, 45 МБ кэш-памяти).
  • 768 ГБ оперативной памяти (32 ГБ x 24 Crucial DDR4, 384 ГБ на каждый процессор)
  • VMware ESXi vSphere 6.0 / Enterprise Plus 2-CPU

Бенчмарк Sysbench OLTP работает на базе Percona MySQL с использованием механизма хранения InnoDB, функционирующего внутри установки CentOS. Чтобы согласовать наши тесты традиционных SAN с более современным гиперконвергентным оборудованием, мы перевели многие из наших бенчмарков на более крупную распределенную модель. Основное отличие заключается в том, что вместо запуска одного единственного бенчмарка на физическом сервере мы теперь запускаем несколько экземпляров этого бенчмарка в виртуализированной среде. Используя несколько NVMe SSD, мы развернули 4 виртуальные машины Sysbench на 2028U-TNR4T+ и измерили общую производительность хоста при одновременной работе всех виртуальных машин.

В тесте на среднее количество транзакций в секунду (TPS) модель 2028U-TNR4T+ показала лучшие результаты с твердотельным накопителем Intel SSD DC P3700, достигнув впечатляющей суммарной производительности в 5,779.7 TPS. Однако конфигурация Memblaze не сильно отстала, показав максимальную производительность в 5,717.2 TPS.

Если рассматривать среднюю задержку процессора 2028U-TNR4T+, Intel снова продемонстрировала лучшие результаты с суммарным значением 22.15 мс, в то время как для отдельных виртуальных машин этот показатель колебался от 21.80 мс до 22.37 мс.

В наихудшем сценарии задержки MySQL (задержка на 99-м процентиле) наилучшая производительность была достигнута при использовании накопителя Intel, показавшего впечатляющий суммарный результат всего в 45.97 мс.

Анализ синтетической рабочей нагрузки предприятия

При тестировании этого сервера мы будем использовать твердотельные накопители Intel SSD DC P3700 , Memblaze PBlaze4 и Samsung XS1715 2.5″ NVMe, а также твердотельные накопители Huwei ES3000, HGST SN100, Memblaze PBlaze и Intel P3608 HHHL AIC. Твердотельные накопители Intel P3600 NVMe тестируются в конфигурациях с одним и двумя накопителями. В тестах с двумя накопителями результаты суммируются для получения общей производительности.

Перед запуском каждого из синтетических тестов fio наша лаборатория предварительно подготавливает устройство к работе в стационарном режиме под высокой нагрузкой в ​​16 потоков с очередью из 16 задач на поток. Затем хранилище тестируется через заданные интервалы времени с использованием различных профилей глубины потоков/очередей, чтобы показать производительность при легкой и интенсивной нагрузке.

Предварительная подготовка и первичные испытания в стационарном режиме:

  • Пропускная способность (суммарные операции ввода-вывода при чтении и записи)
  • Средняя задержка (среднее значение задержки чтения и записи)
  • Максимальная задержка (пиковая задержка чтения или записи)
  • Стандартное отклонение задержки (усредненное стандартное отклонение чтения и записи)

Данный синтетический анализ включает четыре профиля, широко используемых в технических характеристиках и сравнительных тестах производителей:

  • 4 тыс. — 100% чтение и 100% запись
  • 8 тыс. — 100% чтение и 100% запись
  • 8k – 70% чтение/30% запись
  • 128 тыс. — 100% чтение и 100% запись

В ходе основного синтетического теста 4K сервер 2028U-TNR4T+ показал максимальное значение IOPS при чтении 717 172 при использовании накопителя Memblaze. Сервер также достиг максимального значения IOPS при записи 172 672, что было достигнуто с накопителями Intel P3700. Анализ пиковой производительности наших накопителей HHHL показал гораздо более высокие результаты: Intel P3608 продемонстрировал 851 693 IOPS.

При сравнении средней задержки 2028U-TNR4T+ с протестированным нами 2.5-дюймовым накопителем, время чтения составило всего 0.36 мс при использовании накопителя Memblaze NVMe, а максимальная средняя задержка записи — 1.48 мс при использовании процессора Intel P3700. Что касается накопителя HHHL, максимальная скорость чтения была зафиксирована при использовании процессора Intel P3608, который снова показал время чтения всего 0.30 мс.

В следующем тестовом задании мы подготовили сервер к последовательным передачам данных размером 8 КБ, чтобы измерить производительность NVMe-накопителей с нагрузкой в ​​16 потоков и глубиной очереди 16 для 100% операций чтения и 100% операций записи. В этом тесте сервер Supermicro показал наилучшую производительность с накопителем Intel на протяжении всего теста до самого конца, где Memblaze вырвалась вперед на последней глубине очереди, достигнув впечатляющих 166 250 IOPS. Из накопителей HHHL наилучшую производительность показал накопитель Huawei ES3000 3.2 ТБ, достигнув чуть менее 300 000 IOPS в терминале.

В среднем по задержке сервер 2028U-TNR4T+ показал отличные результаты с накопителями Intel и Memblaze 2.5″, причем оба варианта были практически идентичны до самого конца, с разницей примерно от 0.2 мс до 1.6 мс. При использовании накопителей HHL сервер 2028U-TNR4T+ продемонстрировал лучшие показатели: пиковое значение для модели Huawei ES3000 3.2 ТБ составило чуть менее 0.9 мс.

Заключение

Входящий в линейку 2U Ultra SuperServer, Supermicro 2028U-TNR4T+ представляет собой высокопроизводительное решение для хранения данных с 24 отсеками для 2.5-дюймовых накопителей с возможностью горячей замены, а также поддержкой 24 портов SAS3 через дополнительные карты расширения. Размещенный в корпусе CSE-219UAC-R1K02 2U, 2028U-TNR4T+ использует двухпроцессорную серверную плату X10DRU-i+ в качестве основной подсистемы устройства. Сервер также оснащен четырьмя отсеками для NVMe-накопителей, что очень привлекательно для корпоративных покупателей, стремящихся использовать эту мощную технологию с низкой задержкой. Кроме того, 2028U-TNR4T+ имеет 24 слота DIMM для установки до 768 ГБ энергонезависимой памяти DDR4 RDIMM или 1536 ГБ памяти LRDIMM DDR4.

Для проверки производительности мы оснастили SuperServer 768 ГБ оперативной памяти Crucial DDR4 (32 ГБ x 24) и двумя процессорами Intel E5-2699v3 с адаптером Supermicro AOC-S3008L-L8i HBA, чтобы задействовать 24 отсека SAS3. Мы также установили три разных комплекта NVMe SSD: Intel SSD DC P3700, Memblaze PBlaze4 и Samsung XS1715, каждый из которых был проанализирован отдельно. Неудивительно, что комбинация NVMe-накопителей в SuperServer 2028U-TNR4T+ продемонстрировала огромную пропускную способность и чрезвычайно низкую задержку. В нашем тесте с нагрузкой 100% чтения и 100% записи 4K, 2028U-TNR4T+ показал максимальное значение IOPS чтения 717 172 при использовании накопителя Memblaze. При использовании с нагрузкой в ​​16 потоков и глубиной очереди 16 для 100% операций чтения и 100% операций записи, сервер 2028U-TNR4T+ продемонстрировал пиковую производительность в 166 250 IOPS (также с использованием твердотельного накопителя Memblaze NVMe).

В конечном итоге, Supermicro предлагает предприятиям очень компактную серверную платформу, а также один из самых высоких в отрасли уровней производительности, эффективности, безопасности и масштабируемости. Независимо от предпочтений в интерфейсе хранения данных, 2028U-TNR4T+ обеспечивает покупателям поддержку от жестких дисков/SSD SAS3 для увеличения емкости, 2.5-дюймовых NVMe-накопителей с возможностью горячей замены и низкой задержкой, а также традиционной флэш-памяти PCIe в форм-факторе AIC.

Плюсы

  • Полностью укомплектован и обладает большим потенциалом для высокопроизводительного хранения данных.
  • Четыре отсека для 2.5-дюймовых NVMe-накопителей
  • Опционально четыре порта 10 Гбит/с Ethernet, а также встроенная поддержка SAS3.

Минусы

  • Внутренний слот PCIe LP не подходит для некоторых интерфейсных карт.

Выводы

Сервер Supermicro SuperServer 2028U-TNR4T+ ориентирован на высокую производительность и поддерживает NVMe-накопители как в 2.5-дюймовых отсеках, так и в форм-факторе AIC. Однако сервер также поддерживает SAS и SATA, что позволяет компаниям эффективно использовать имеющиеся ресурсы хранения данных, обеспечивая при этом перспективность новых технологий.

Страница продукта Supermicro SuperServer 2028U-TNR4T+

Обсудите этот отзыв

Подпишитесь на рассылку StorageReview

Взаимодействуйте со StorageReview

Рассылка | YouTube | Подкаст | iTunes / Spotify | Instagram | Twitter | TikTok | RSS-лента

StorageReview Enterprise Lab