Весной 2017 года Dell EMC выпустила долгожданное обновление линейки PowerEdge, заменив Broadwell на процессоры Xeon SP. Обновление включало в себя новое семейство серверов R740, в которое входят как массовая модель R740, так и версия с «экстремальным дисковым резервированием» под названием R740xd, которую мы рассмотрим в этом обзоре. Этот мощный сервер поддерживает широкий спектр вариантов хранения данных, до восемнадцати 3.5-дюймовых или тридцати двух 2.5-дюймовых дисков для невероятной емкости, или до двадцати четырех 2.5-дюймовых NVMe SSD, если вам больше по душе высокая скорость ввода-вывода. Вычислительные возможности и оперативная память также не остались без внимания: R740xd поддерживает до двух процессоров Intel Xeon Scalable с 28 ядрами каждый и максимальным объемом памяти до 3 ТБ. Практически в любом случае этот новый сервер отлично справится со своей задачей, и именно в этом направлении компания Dell EMC следовала при разработке этой постоянно модульной платформы.
Серверы PowerEdge R740 представляют собой отличное сочетание производительности и объема хранилища в корпусе форм-фактора 2U. Сервер может быть сконфигурирован с использованием до 2 масштабируемых процессоров Intel и 24 модулей памяти DDR4 DIMM (или 12 модулей NVDIMM), но их главное преимущество заключается в подходе к хранению данных. В то время как R740 предлагает до 16 отсеков для хранения данных, xd предлагает до 32 отсеков для 2.5-дюймовых накопителей, 24 из которых могут быть NVMe. R740xd также предлагает некоторые уникальные варианты компоновки хранилища по сравнению с типичными фронтальными отсеками, включая отсеки средней и задней загрузки, позволяющие разместить все дополнительное хранилище в том же 2U-корпусе. Такая компоновка позволяет пользователям адаптировать свои потребности в хранении данных к своим приложениям, смешивая NVMe, SSD и HDD в одном корпусе, создавая многоуровневое хранение данных внутри корпуса. R740xd также поддерживает до 192 ГБ NVDIMM. Более того, R740xd может загружаться с внутренних M.2 SSD-накопителей в RAID-массиве через дополнительную карту, освобождая больше доступного спереди пространства для хранения рабочих нагрузок. Обе версии подходят для SDS, поставщиков услуг и VDI, при этом ключевым отличием является общий объем хранилища и количество NVMe-накопителей. Также новым в R740/R740xd является увеличенный объем памяти. Поддержка графических процессоров (GPU) или программируемых логических интегральных схем (FPGA). Оба типа способны поддерживать до трех 300-ваттных или шести 150-ваттных видеокарт. В этом поколении Dell EMC разработала BIOS, который автоматически определяет необходимый для каждой карты воздушный поток и обеспечивает индивидуально настроенный поток воздуха благодаря функции многовекторного охлаждения.
С каждым обновлением любой линейки серверов появляются новые процессоры, больше оперативной памяти, а также улучшенные возможности хранения данных и сетевого подключения. Однако то, что отличает многие компании, — это полное управление жизненным циклом продукта. В разумных пределах любой сервер с одинаковыми аппаратными характеристиками будет показывать примерно одинаковые результаты. Разница, однако, быстро становится очевидной благодаря качеству оборудования, широкому спектру поддерживаемого программного обеспечения и простоте развертывания системы в конкретной среде. Это ключевая область, в которой Dell EMC выделяется среди других игроков рынка. Dell EMC предоставляет пользователям такие важные инструменты, как LifeCycle Controller, iDRAC, OpenManage Mobile и другие. Мы использовали многие из этих инструментов в своей собственной среде и снова и снова убеждались в том, насколько простой и зрелой стала платформа с течением времени.
Новые серверы PowerEdge изначально поддерживают программно-определяемое хранилище (SDS), что делает их подходящими для таких сценариев использования, как гиперконвергентная инфраструктура. В своей собственной линейке корпоративных продуктов Dell EMC использует R740 с предварительно собранными и проверенными решениями, такими как Ready Nodes for ScaleIO или VSAN, а также с линейкой PowerEdge XC. R740xd позволяет создавать конфигурации, использующие все внешние отсеки для дисков для самого продукта SDS, сохраняя загрузочный сегмент на внутреннем твердотельном накопителе m.2.
Новый сервер Dell EMC PowerEdge R740xd уже доступен и обладает широкими возможностями индивидуальной настройки. Для данного обзора мы использовали как отдельный сервер R740xd с конфигурацией, близкой к топовой, так и кластер из 12 серверов R740xd с более скромной конфигурацией.
Используемая нами видеокарта R740xd имеет следующую конфигурацию:
- Два процессора Intel Xeon Platinum 8180
- 384 ГБ оперативной памяти DDR4 2667 МГц (32 ГБ x 12)
- 4 твердотельных накопителя SAS по 400 ГБ
- 2 твердотельных накопителя NVMe по 1.6 ТБ
- Mellanox ConnectX-4 Lx Dual Port 25GbE DA/SFP rNDC
- Рамка ЖК-дисплея с поддержкой Quick Sync 2 и OpenManage.
- iDRAC 9 Enterprise
Технические характеристики сервера Dell EMC PowerEdge R740xd:
- Форм-фактор: 2U для монтажа в стойку.
- Процессоры: до 2 масштабируемых процессоров Intel или до 28 ядер.
- Память: 24 модуля DDR4 RDIMM, LR-DIMM (максимум 3 ТБ)
- Поддержка NVDIMM: до 12 или 192 ГБ
- Отсеки для накопителей
- Передние отсеки:
- До 24 x 2.5” SAS/SSD/NVMe накопителей, максимальный объем 153 ТБ.
- До 12 разъемов SAS 3.5 дюйма, максимальный объем 120 ТБ.
- Средняя часть залива:
- До 4 жестких дисков 3.5 дюйма, максимальный объем 40 ТБ.
- До 4 x 2.5” SAS/SSD/NVMe накопителей, максимальный объем 25 ТБ.
- Задние отсеки:
- До 4 x 2.5 дюймов, максимум 25 ТБ
- До 2 x 3.5 дюймов, максимум 20 ТБ
- Передние отсеки:
- Контроллеры хранения
- Внутренние контроллеры: PERC H730p, H740p, HBA330, программный RAID (SWRAID) S140
- Оптимизированная для загрузки подсистема хранения данных: HWRAID, 2 твердотельных накопителя M.2 объемом 120 ГБ и 240 ГБ.
- Внешний PERC (RAID): H840
- Внешние HBA-адаптеры (не RAID): SAS HBA 12 Гбит/с
- Порты
- Варианты сетевых дочерних плат: 4 x 1GE или 2 x 10GE + 2 x 1GE или 4 x 10GE или 2 x 25GE
- Передние порты: VGA, 2 x USB 2.0, выделенный Micro-USB для прямого подключения к IDRAC.
- Задние порты: VGA, последовательный порт, 2 порта USB 3.0, выделенный сетевой порт iDRAC.
- Видеокарта:
- VGA
- До 8 слотов Gen3, до 4 слотов 16
- Опции графического процессора:
- Nvidia Tesla P100, K80, K40, Grid M60, M10, P4, Quadro P4000.
- AMD S7150, S7150X2
- Поддерживаемые ОС
- Canonical Ubuntu LTS
- Citrix XenServer
- Microsoft Windows Server с Hyper-V
- Red Hat Enterprise Linux
- SUSE Linux Enterprise Server
- VMware ESXi
- Мощность
- Титан 750 Вт, Платина 495 Вт, 750 Вт, 1100 Вт.
- 1600 Вт и 2000 Вт
- 48 В постоянного тока 1100 Вт, 380 В постоянного тока 1100 Вт, 240 В постоянного тока 750 Вт
- Источники питания с возможностью горячей замены и полным резервированием
- До 6 вентиляторов с возможностью горячей замены, с полным резервированием и высокой производительностью.
Дизайн и сборка
Новые серверы PowerEdge были переработаны не только для того, чтобы выглядеть стильно (что им действительно удалось), но и для того, чтобы отразить особенности взаимодействия пользователей и приложений с ними. На передней панели расположена новая рамка с поддержкой Quick Sync и беспроводными возможностями OpenManage. Аналогичный дизайн используется и в новых решениях Dell EMC для хранения данных, включая такие системы, как массив Unity 450F на основе флэш-памяти. Под рамкой находятся 24 отсека для 2.5-дюймовых накопителей, поддерживающих SATA, SAS, Nearline SAS и NVMe (при наличии соответствующей конфигурации).
Переднюю панель можно сконфигурировать для поддержки 12 3.5-дюймовых накопителей, если максимальная емкость важнее производительности. С левой стороны расположены индикаторы состояния и идентификации, а также кнопка беспроводной активации iDRAC Quick Sync 2. С правой стороны находятся кнопка питания, порт VGA, порт micro USB iDRAC Direct и два порта USB 2.0.
В то время как другие игроки рынка ищут способы сократить расходы и убрать лишние компоненты в угоду снижению затрат, Dell EMC сохранила в качестве опции для R740xd и R740 переднюю панель. Кто-то может сказать: «А кому это нужно?!» Но этот небольшой ЖК-дисплей с тремя кнопками невероятно полезен в среде центра обработки данных. Например, в ситуации, когда вы не можете получить удаленный доступ к iDRAC, изменились настройки сети управления, и вы не хотите перезагружать сервер, чтобы вручную выполнить аварийное восстановление с помощью тележки и клавиатуры, передняя панель оказывается очень удобной. На сервере Dell EMC вы можете получить доступ к настройкам iDRAC через небольшой интерфейс и переключить IP-адрес управления со статического на DHCP прямо через переднюю панель. Без этой функции на многих системах вам пришлось бы перезагружать сервер, чтобы изменить IP-адрес вручную. На R740xd это делается полностью внеполосным способом, через другие элементы управления.
Сняв верхнюю крышку, можно увидеть внутреннее устройство и оценить огромное внимание к деталям, которое Dell EMC уделила новым серверам PowerEdge. Многие компоненты сервера легко заменяются при необходимости, а количество лишних элементов сведено к минимуму для улучшения циркуляции воздуха. В протестированной нами системе можно увидеть двухслотовый загрузочный SSD-накопитель m.2, две RAID-карты, а также два сквозных адаптера PCIe для слотов NVMe на передней панели.
Наша сборка также включает в себя внутреннее двухслотовое загрузочное устройство microSD для хранения данных гипервизора. Менее заметная (но очень важная) система вентиляции, обеспечивающая циркуляцию воздуха по всей системе, сводя к минимуму зоны перегрева и позволяя серверу минимизировать избыточный шум вентиляторов. В ходе тестирования мы отмечали (или не отмечали) какой-либо избыточный шум вентиляторов. При экстремальной нагрузке с полностью загруженными процессорами шум вентиляторов оставался значительно ниже, чем у других тестовых систем в нашей лаборатории. Еще один интересный момент, который мы обнаружили, — это то, как системы справлялись с воздушным потоком при более высоких температурах окружающего воздуха. В нашей лаборатории мы используем свежий воздух для охлаждения серверов, поэтому системы в нашей лаборатории могут работать в широком диапазоне температур воздуха. В ситуациях, когда R740xd работал в среде с высокими температурами окружающего воздуха, он плавно увеличивал скорость вращения вентиляторов, но при этом сохранял минимальный уровень шума. Это резко контрастирует с другими серверами и оборудованием в нашей лаборатории, шум которых слышен даже через закрытые двери или заглушает разговоры, происходящие вокруг них.
В обеих наших конфигурациях варианты хранения данных в центральных отсеках не были предусмотрены. Мы привели пример из технического руководства PowerEdge R740xd, на котором показаны внутренние 3.5-дюймовые отсеки, а также крепления для 2.5-дюймовых дисков. Немногие, если вообще какие-либо, другие серверы массового сегмента предлагают такой высокий уровень плотности в конфигурации системы. Хотя на рынке существуют уникальные серверные сборки, многие из них создаются индивидуально для конкретного приложения. Это имеет огромное значение с точки зрения управления и развертывания уникальных систем, а также того, кто их администрирует в центре обработки данных.
Перевернув корпус R740xd на заднюю панель, следует обратить внимание на возможности расширения. В верхнем левом углу расположены три полноразмерных слота расширения PCIe, а под ними — кнопка идентификации системы, выделенный сетевой порт iDRAC, последовательный порт, порт VGA и два порта USB 3.0. Посередине находятся еще два полноразмерных слота PCIe, а также слот половинной высоты, используемый в данной сборке для RAID-контроллера. Ниже них расположен слот rNDC, в который установлен двухпортовый сетевой адаптер Mellanox 25 Гбит/с. В верхнем правом углу расположены еще два полноразмерных слота PCIe над двумя блоками питания. Имея два свободных полноразмерных слота PCIe, Dell EMC предусмотрела поддержку четырех 2.5-дюймовых NVMe SSD, двух RAID-контроллеров, двух загрузочных SSD-накопителей m2, а также двухпортового сетевого адаптера Ethernet 25 Гбит/с.
Слот rNDC используется в качестве основного встроенного сетевого интерфейса. В него можно установить различные сетевые модули, от четырехпортовых 1GbE до двухпортовых 25Gb от Mellanox и Broadcom. Ни один из этих модулей не занимает один из доступных слотов PCIe сервера, оставляя их полностью свободными для других целей. Как мы показали в нашем руководстве по модернизации rNDC, этот отсек легко модернизировать, и он очень полезен для размещения сетевых устройств вне основных слотов PCIe.
Управление и менеджмент
Сервер PowerEdge R740xd предлагает широкий спектр возможностей управления, включая как традиционные, так и удобные для использования на ладони. Развертывание R740xd может осуществляться с помощью мобильного приложения Dell EMC OpenManage или локально, как на серверах предыдущего поколения. Возможности OpenManage Mobile действительно могут существенно помочь, особенно при настройке нескольких серверов в одном центре обработки данных или при необходимости быстро завершить развертывание, не тратя время на поиски и использование аварийной тележки. Использование предварительно созданных профилей для быстрого развертывания сервера с помощью одного лишь мобильного телефона значительно ускоряет процесс, который часто требует использования аварийной тележки в центре обработки данных.
Встроенный модуль Wi-Fi обеспечивает подключение пользователей к серверу R740xd, который имеет защищенную и очень безопасную конфигурацию. Для работы сервера необходим локальный физический доступ: сначала нужно включить беспроводной модуль на передней панели сервера, а также отсканировать информационную метку на передней панели. После включения сети вы получаете доступ к частной локальной сети (LAN), доступной с вашего телефона или мобильной рабочей станции для взаимодействия с iDRAC через мобильное приложение или веб-браузер.

Это позволяет сочетать ручной доступ для быстрой проверки состояния или опроса системы, а также более расширенные функции и работу с iKVM без необходимости подключения проводов или аварийных устройств. Очень малый радиус действия (от 5 до 10 метров от сервера в центре обработки данных) также помогает свести к минимуму вероятность того, что кто-то незаметно подключится к системе. После завершения работы отключение беспроводного модуля блокирует дальнейший доступ.
Встроенная в iDRAC функция Group Manager также является полезным дополнением, позволяющим ИТ-администраторам управлять группой серверов R740 непосредственно из iDRAC. В нашей среде первый сервер R740xd выступает в роли лидера группы, и для удаленного управления несколькими серверами требуется всего один вход в систему. Из центральной точки можно получать информацию о состоянии серверов, а также переключать питание каждого сервера и быстро переходить к его локальному интерфейсу iDRAC без необходимости ввода дополнительных учетных данных.
iDRAC уже довольно давно является основой системы управления Dell. Совсем недавно компания анонсировала ряд улучшений, направленных на дальнейшее повышение удобства использования, а также общей функциональности iDRAC. В iDRAC9 добавлен более мощный процессор, что вчетверо увеличивает его производительность. Теперь он обладает большей степенью автоматизации, экономя время ИТ-администраторов и снижая количество ошибок. Все настройки BIOS теперь можно регулировать через iDRAC, а не загружаясь в BIOS. Новый iDRAC имеет расширенные возможности конфигурации хранилища, такие как онлайн-расширение емкости, миграция уровней RAID, криптографическое стирание физических дисков, восстановление/отмена восстановления физических дисков, включение восстанавливаемого резервного диска и переименование виртуальных дисков.
Когда мы говорим о значительном улучшении производительности iDRAC, это нисколько не преувеличено. Новый интерфейс HTML5 намного быстрее во всех областях, включая первоначальный вход в систему и полноценное взаимодействие через веб-интерфейс iDRAC. По сравнению с R730 (который и на момент выхода был неплох), разница колоссальная. Что касается некоторых новых функций, используемых непосредственно при входе в iDRAC, то в управлении теперь есть удаленный вид под названием «Вид подключения». Это позволяет ИТ-администраторам сразу же увидеть различные аспекты сервера. Кроме того, появилась новая панель управления для удаленного управления с помощью iDRAC Group Manager. Для еще большей доступности через прямое подключение теперь есть порт для iDRAC непосредственно на передней панели сервера.
В iDRAC добавлены дополнительные функции, позволяющие пользователям лучше настраивать каждый сервер под конкретное приложение. Настройки на уровне BIOS теперь можно производить непосредственно через iDRAC, без необходимости входа в консоль. Это упрощает изменение нескольких ключевых параметров перед первоначальным развертыванием — всё через простой веб-браузер или приложение на мобильном телефоне. Для одновременного развертывания нескольких серверов пользователи также могут создать файл профиля сервера для быстрого развертывания на нескольких серверах.
В серверах последнего поколения управление установленным оборудованием также получило интересное развитие. Dell упростила пользователям управление дополнительными картами PCIe: сервер определяет тип карты и автоматически регулирует скорость вращения вентиляторов для обеспечения надлежащего охлаждения. Воздушный поток можно дополнительно настроить с помощью пользовательской настройки скорости вращения вентилятора LFM для каждого установленного устройства, а также с помощью регулировки смещения на уровне сервера. Многие из настроек охлаждения предназначены не для того, чтобы охлаждать установленное оборудование «лучше», чем в серверах предыдущего поколения; скорее, речь идет об *идеальном* охлаждении оборудования с минимальным необходимым воздушным потоком. Во многих серверах можно установить вентиляторы на полную скорость и не беспокоиться о перегреве оборудования. Но это происходит за счет избыточного энергопотребления и шума.
Минимизация воздушного потока значительно снижает энергопотребление за счет предотвращения излишнего расхода энергии на вращение вентиляторов. В конечном итоге это делает работу дата-центра более комфортной, поскольку вентиляторы не гудят на оглушительной громкости.
Эффективности
При сравнении R740xd с системами предыдущего поколения вычислительный потенциал и возможности хранения данных значительно возросли. Благодаря обновлениям Intel Broadwell, топовый процессор серии R730 (E5-2699v4) обеспечивает частоту 96.8 ГГц в двухпроцессорной конфигурации. Однако в PowerEdge R740xd с процессорами Intel Scalable топовый процессор (Platinum 8180) увеличивает эту частоту до 139.66 ГГц. На первый взгляд, это скачок на 44%, но это даже не учитывает улучшения тактовой частоты при большем количестве ядер или тактовой частоты DRAM. Что касается хранения данных, то NVMe SSD также стали играть более важную роль в конфигурациях R740xd: теперь максимальное количество NVMe SSD достигает 24, тогда как в R730xd их было четыре.
Рассматривая улучшения, внесенные в серверы Dell EMC PowerEdge последнего поколения, мы в последующем обзоре затронем как локальную производительность, так и производительность кластера на группе из восьми серверов, использующих хранилище Dell EMC Unity 450F All-Flash. Данный обзор призван помочь заинтересованным покупателям увидеть, как эти серверы хорошо работают в отдельных экземплярах, а также как они взаимодействуют в высоко виртуализированной среде в рамках экосистемы Dell EMC. Все эти системы объединены сетевыми адаптерами Mellanox ConnectX-4 25Gb rNDC, а также коммутаторами Dell EMC Networking Z9100 100G.
В разделе, посвященном производительности локальной системы, мы используем хорошо оснащенный R740xd, который тестируем с двумя различными комбинациями NVMe-накопителей. Первая комбинация включает два NVMe-накопителя Samsung PM1725a емкостью 1.6 ТБ, а вторая — четыре NVMe-накопителя Toshiba PX04P емкостью 1.6 ТБ . Благодаря процессорам Intel Platinum 8180 у нас было достаточно ресурсов ЦП для выполнения задач, связанных с хранением данных, что позволило нам продемонстрировать разницу при переходе от двух к четырем NVMe-накопителям в рамках одной и той же рабочей нагрузки. Кроме того, мы также испытываем возможности хранения данных на пределе возможностей в среде ESXi 6.5 с помощью многопроцессорного теста vdbench, включающего несколько рабочих нагрузок, имитирующих базовое тестирование «четырех углов» вплоть до трассировки VDI.
Производительность Sysbench MySQL
Наш первый тест производительности локального хранилища данных проводится на базе данных Percona MySQL OLTP с помощью SysBench. В ходе теста измеряются среднее количество транзакций в секунду (TPS), средняя задержка и средняя задержка на уровне 99-го процентиля.
Каждая виртуальная машина Sysbench настроена с тремя виртуальными дисками: один для загрузки (~92 ГБ), один с предварительно созданной базой данных (~447 ГБ) и третий для тестируемой базы данных (270 ГБ). С точки зрения системных ресурсов, мы настроили каждую виртуальную машину с 16 виртуальными процессорами, 60 ГБ оперативной памяти и использовали контроллер LSI Logic SAS SCSI.
Настройка параметров тестирования Sysbench (для каждой виртуальной машины)
- CentOS 6.3 64-бит
- Percona XtraDB 5.5.30-rel30.1
- Таблицы базы данных: 100
- Размер базы данных: 10 000 000
- Количество потоков базы данных: 32
- Объем оперативной памяти: 24 ГБ
- Продолжительность теста: 3 часа
- 2 часа предварительной обработки, 32 нити
- 1 час 32 нити
Мы сравнили производительность двух тестов Sysbench на PowerEdge R740xd: один с 4 виртуальными машинами, размещенными на двух NVMe SSD, и другой с 4 виртуальными машинами, каждая из которых имела выделенный NVMe SSD. В обоих тестах загрузка ЦП не достигала 100%. Мы наблюдали примерно 60% и 80% использования ЦП в обоих тестах, что означает наличие потенциала для дальнейшего роста с добавлением виртуальных машин и увеличением объема оперативной памяти. В первом тесте с двумя NVMe SSD, на которых размещались виртуальные машины Sysbench, суммарное количество TPS составило 11 027, а во втором тесте с четырьмя NVMe SSD суммарное количество TPS увеличилось до 13 224. Это контрастирует с результатом в 10 683 TPS, полученным на PowerEdge R630, который мы тестировали около года назад с процессорами E5-2699v4 и четырьмя NVMe SSD.
Анализируя среднюю задержку в нашей рабочей нагрузке Sysbench, мы получили результат для 2 NVMe SSD-накопителей — 11.61 мс, а для 4 NVMe SSD — 9.69 мс.
В наихудшем случае, при измерении задержки на уровне 99-го процентиля, два NVMe SSD показали время 24.5 мс, в то время как четыре NVMe SSD продемонстрировали очень стабильный результат в 20.7 мс.
Производительность SQL-сервера
В протоколе тестирования Microsoft SQL Server OLTP от StorageReview используется текущая версия бенчмарка Transaction Processing Performance Council Benchmark C (TPC-C), представляющего собой онлайн-бенчмарк обработки транзакций, имитирующий действия, встречающиеся в сложных средах приложений. Бенчмарк TPC-C ближе, чем синтетические бенчмарки производительности, к оценке сильных и слабых мест инфраструктуры хранения данных в средах баз данных.
Каждая виртуальная машина SQL Server настроена с двумя виртуальными дисками: томом 100 ГБ для загрузки и томом 500 ГБ для базы данных и файлов журналов. С точки зрения системных ресурсов, мы настроили каждую виртуальную машину с 16 виртуальными процессорами, 64 ГБ оперативной памяти и использовали контроллер LSI Logic SAS SCSI. В то время как наши тестовые нагрузки Sysbench ранее полностью загружали платформу как по операциям ввода-вывода хранилища, так и по емкости, тест SQL Server оценивает производительность по задержке.
В этом тесте используется SQL Server 2014, работающий на гостевых виртуальных машинах Windows Server 2012 R2, и он нагружается с помощью Dell Benchmark Factory for Databases. Традиционно мы использовали этот бенчмарк для тестирования больших баз данных масштаба 3,000 экземпляров на локальном или общем хранилище, но в этой версии мы сосредоточились на равномерном распределении четырех баз данных масштаба 1,500 экземпляров на наших серверах.
Конфигурация тестирования SQL Server (для каждой виртуальной машины)
- Windows Server 2012 R2
- Объем выделенного хранилища: 600 ГБ, использовано: 500 ГБ
- SQL Server 2014
- Размер базы данных: 1,500 единиц.
- Нагрузка на виртуальные клиенты: 15 000
- Объем оперативной памяти: 48 ГБ
- Продолжительность теста: 3 часа
- 2.5 часа предварительной подготовки
- 30-минутный период выборки
Аналогично тому, как мы запускали наш бенчмарк Sysbench, мы тестировали конфигурации с 2 NVMe SSD, а также с 4 NVMe SSD. При использовании 4 виртуальных машин, распределенных по 2 дискам, мы получили суммарное количество транзакций в секунду (TPS) в Benchmark Factory, равное 12 631, тогда как при использовании 4 NVMe SSD этот показатель составил 12 625. Хотя это несколько противоречит интуиции, в нашей конкретной конфигурации бенчмарка истинную картину показывает задержка, измеренная ниже.
При использовании двух NVMe SSD-накопителей средняя задержка составила 6.5 мс для четырех рабочих нагрузок SQL Server, а при использовании четырех NVMe SSD-накопителей это значение снизилось до 4 мс. В обоих тестах производительности сервер использовал всего 20 и 22% ресурсов ЦП соответственно. Сервер PowerEdge R740xd с двумя процессорами Intel 8180 обладает огромным вычислительным и дисковым потенциалом, позволяющим без особых усилий справляться с подобными задачами, связанными с базами данных.
Анализ рабочей нагрузки VDBench
В заключительном разделе локального тестирования производительности мы сосредоточились на производительности синтетической рабочей нагрузки. В этой области мы использовали четыре NVMe SSD в VMware ESXi 6.5 и равномерно распределили 16 рабочих виртуальных машин, на каждой из которых было смонтировано два vmdk-файла по 125 ГБ, чтобы измерить объем используемого хранилища в 4 ТБ. Этот тип теста полезен для демонстрации того, как выглядят реальные показатели использования хранилища с учетом накладных расходов, связанных с виртуализированной средой.
Когда речь заходит о сравнительной оценке производительности массивов хранения данных, лучше всего подходит тестирование приложений, а синтетическое тестирование занимает второе место. Хотя синтетические тесты не являются идеальным отражением реальных рабочих нагрузок, они помогают установить базовые параметры устройств хранения данных с коэффициентом повторяемости, что упрощает сравнение конкурирующих решений «яблоко к яблоку». Эти рабочие нагрузки предлагают ряд различных профилей тестирования, от тестов «четырех углов» и тестов на определение размера передачи данных в базах данных до трассировки из различных сред VDI. Все эти тесты используют общий генератор рабочих нагрузок vdBench с механизмом сценариев для автоматизации и сбора результатов на большом кластере вычислительных ресурсов. Это позволяет нам повторять одни и те же рабочие нагрузки на широком спектре устройств хранения данных, включая флэш-массивы и отдельные устройства хранения. Что касается массивов, мы используем наш кластер серверов Dell PowerEdge R730:
Профили:
- Чтение случайных данных 4K: 100% чтение, 128 потоков, 0-120% iorate
- Случайная запись 4K: 100% запись, 64 потока, скорость записи 0-120%.
- Последовательное чтение 64K: 100% чтения, 16 потоков, скорость чтения 0-120%.
- Последовательная запись 64K: 100% запись, 8 потоков, скорость записи 0-120%.
- Синтетические базы данных: SQL и Oracle
- Трассировки полного клонирования VDI и трассировки связанных клонов
Рассматривая пиковую производительность чтения, Dell EMC PowerEdge R740xd показал задержку менее миллисекунды при чтении 4K-файлов, достигнув чуть более 800 000 операций ввода-вывода в секунду, начиная с 0.21 мс. На пике производительности R740xd показал 978 000 операций ввода-вывода в секунду при задержке 3.8 мс.
Рассматривая пиковую производительность записи 4K, можно отметить, что R740xd начинал с задержки 0.12 мс и оставался ниже 1 мс, пока не достиг примерно 730 000 операций ввода-вывода в секунду. На пике производительности R740xd достиг более 834 000 операций ввода-вывода в секунду при задержке 2.4 мс.
При переключении на пиковую скорость чтения 64K, R740xd начал работу с задержкой 0.27 мс и оставался ниже 1 мс, пока не достиг примерно 150 000 операций ввода-вывода в секунду. Пиковая скорость составила чуть более 170 000 операций ввода-вывода в секунду с задержкой 3 мс. В итоге R740xd показал пропускную способность 10.644 ГБ/с.
При пиковой скорости последовательной записи 64K, R740xd начал с 0.14 мс и оставался ниже 1 мс, пока не достиг чуть более 65 000 операций ввода-вывода в секунду (IOPS). Пиковое значение R740xd составило 93 000 IOPS с задержкой 2.7 мс. Пропускная способность R740xd на пике также составила 5.83 ГБ/с.
В нашей рабочей нагрузке SQL маршрутизатор R740xd начал задержку с 0.21 мс и оставался ниже 1 мс до достижения производительности от 700 000 до 750 000 операций ввода-вывода в секунду. Пиковое значение составило 760 000 операций ввода-вывода в секунду, а задержка — всего 1.29 мс.
В бенчмарке SQL 90-10 процессор R740xd начал работу с задержкой 0.2 мс и оставался ниже 1 мс до достижения скорости чуть менее 600 тыс. операций ввода-вывода в секунду. Пиковая скорость R740xd превысила 634 тыс. операций ввода-вывода в секунду при задержке 1.57 мс.
В тесте SQL 80-20 маршрутизатор R740xd начал работу с задержкой 0.2 мс и оставался ниже 1 мс, пока не превысил 481 тыс. операций ввода-вывода в секунду. Пиковая производительность R740xd составила почти 538 тыс. операций ввода-вывода в секунду с задержкой 1.7 мс.
При использовании рабочей нагрузки Oracle, задержка на R740xd составляла 0.2 мс, и оставалась ниже 1 мс до достижения скорости чуть более 400 000 операций ввода-вывода в секунду. Пиковая скорость R740xd достигла 470 000 операций ввода-вывода в секунду с задержкой в 2.5 мс.
В тесте Oracle 90-10 процессор R740xd начал работу с задержкой 0.2 мс и оставался ниже 1 мс на протяжении всего теста. Пиковое значение составило 636 тыс. операций ввода-вывода в секунду при задержке 0.98 мс.
При использовании Oracle 80-20, R740xd начал работу с задержкой 0.2 мс и оставался ниже 1 мс, пока не достиг производительности чуть менее 529 тыс. операций ввода-вывода в секунду. Пиковая производительность составила 533 тыс. операций ввода-вывода в секунду с задержкой 1.14 мс.
При переключении на режим VDI Full Clone тест загрузки показал, что R740xd начинает работу с задержкой 0.21 мс и остается ниже 1 мс до достижения примерно 490 тыс. операций ввода-вывода в секунду. Пиковая производительность R740xd составила 539 тыс. операций ввода-вывода в секунду с задержкой 1.9 мс.
Начальная задержка при полном клонировании VDI составляла 0.17 мс и оставалась ниже 1 мс до достижения примерно 175 тыс. операций ввода-вывода в секунду. Максимальная производительность R740xd достигла 218 тыс. операций ввода-вывода в секунду с задержкой 4.1 мс.
В понедельник при подключении к системе через VDI Full Clone задержка составляла 0.2 мс, оставаясь ниже 1 мс до достижения скорости более 180 000 операций ввода-вывода в секунду. Пиковое значение достигло 215 000 операций ввода-вывода в секунду при задержке 2.36 мс.
При переходе к VDI Linked Clone тест загрузки показал, что производительность оставалась ниже 1 мс примерно до 350 тыс. операций ввода-вывода в секунду, а затем достигла пика в 376 тыс. операций ввода-вывода в секунду со средней задержкой 1.36 мс.
В ходе измерения производительности при первоначальном входе в систему с использованием клонированного VDI-сервера мы наблюдали задержку менее миллисекунды до достижения примерно 130 тыс. операций ввода-вывода в секунду, после чего она увеличилась до 154 тыс. операций ввода-вывода в секунду при пиковой нагрузке в 1.64 мс.
В нашем последнем анализе производительности VDI Linked Clone Monday Login мы видим, что переход через барьер в 1 мс происходит примерно при 109 тыс. операций ввода-вывода в секунду, после чего нагрузка продолжает расти, достигнув пика в 151 тыс. операций ввода-вывода в секунду и средней задержки в 3.36 мс.
Заключение
Новый Dell EMC PowerEdge R740xd — это версия R740 с «экстремальным дисковым резервированием». В корпусе форм-фактора 2U он может вместить до 32 2.5-дюймовых накопителей, включая до 24 NVMe-накопителей. Этот сервер позволяет раскрыть потенциал высокопроизводительного хранилища, используя до двух масштабируемых процессоров Intel и до 3 ТБ оперативной памяти. Dell EMC не ограничилась только улучшением аппаратной части. Новый сервер имеет встроенную поддержку SDS, что делает его идеальным для сценариев использования, требующих высокоуровневой конфигурируемости (HCI). Сервер имеет модульную конструкцию и широкие возможности настройки, позволяющие удовлетворить практически любые потребности клиентов.
В наших тестах производительности приложений мы протестировали один сервер Dell EMC PowerEdge R740xd с 4 виртуальными машинами, размещенными на двух NVMe SSD, и еще один сервер с 4 виртуальными машинами, каждая из которых имела выделенный NVMe SSD. В тесте Sysbench с 4 NVMe SSD результат составил 13 224 TPS, средняя задержка — 10 мс, а наихудшая задержка — 21 мс, в то время как в тесте с 2 NVMe SSD результат составил 11 028 TPS, средняя задержка — 12 мс, а наихудшая задержка — 24 мс. В тесте SQL Server результат с 4 NVMe SSD составил 12 625 TPS, а общая задержка — 4 мс. В тесте с 2 NVMe SSD общий результат составил 12 631,8 TPS, а общая задержка — 6.5 мс.
В нашем анализе рабочей нагрузки VDBench сервер R740xd показал себя с лучшей стороны в виртуализированной среде ESXi 6.5. В нашем синтетическом тесте с произвольным доступом к данным размером 4K мы наблюдали производительность менее миллисекунды при чтении до 800 000 IOPS и при записи до 730 000 IOPS. При последовательном чтении 64K сервер R740xd показал задержку менее миллисекунды до 150 000 IOPS и пропускную способность 10.644 ГБ/с. При записи 64K сервер показал производительность менее миллисекунды до 65 000 IOPS и пропускную способность 5.83 ГБ/с. В нашей рабочей нагрузке SQL мы снова наблюдали высокую производительность с точностью до долей миллисекунды (до 700 000 IOPS, 600 000 IOPS и 481 000 IOPS для рабочих нагрузок 90-10 и 80-20 соответственно), но наиболее впечатляющим было то, что производительность достигала максимума с задержкой от 1.29 мс до 1.7 мс, при этом производительность в каждом случае превышала 500 000 IOPS. Рабочая нагрузка Oracle также продемонстрировала высокую производительность с точностью до долей миллисекунды: 90-10 выполнил весь тест менее чем за 1 мс, достигнув пика в 636 000 IOPS. R740xd достиг пика в 539 000 IOPS, 218 000 IOPS и 215 000 IOPS при полном клонировании (с пиковой задержкой 1.9 мс, 4.1 мс и 2.36 мс). В наших тестах на основе связанных клонов сервер показал пиковые значения 376 000 IOPS, 154 000 IOPS и 151 000 IOPS (с пиковой задержкой 1.36 мс, 1.64 мс и 3.36 мс).
Компания Dell EMC явно в восторге от запуска новой линейки серверов, и в частности, от R740xd, центрального элемента линейки PowerEdge. Мы провели много недель, тестируя новые системы, и тринадцать R740xd составляют основу нашей тестовой лаборатории. По результатам нашей работы, серверы произвели впечатление во всех отношениях: от управляемости через iDrac и OpenManage Mobile до производительности с отсеками NVMe. Учитывая все дополнительные возможности, которые предлагает версия xd R740, неудивительно, что Dell EMC использует её в качестве ключевого элемента в нескольких своих решениях SDS, включая vSAN Ready Nodes, ScaleIO Ready Nodes, Storage Spaces Direct Ready Nodes, VxRail и XC740xd (Nutanix), например. В целом, PowerEdge R740xd — это наиболее полное из всех серверных решений, которые мы видели на сегодняшний день, с точки зрения качества сборки, конструкции системы, гибкости хранения данных, производительности и простоты управления, что делает его явным лидером в своей области и нашим первым выбором редакции в категории серверов.




Amazon