Группа VSAN компании VMware недавно анонсировала бесплатный инструмент для тестирования производительности хранилищ в гиперконвергентной инфраструктуре (HCI) — бенчмарк HCI или HCIbench . Хотя тестирование традиционных массивов с помощью тестов ввода-вывода или пропускной способности достаточно хорошо изучено, применение синтетических тестов к оборудованию HCI требует тщательного подхода и значительных усилий для освоения. В традиционной инфраструктуре хранения вы настраиваете генератор ввода-вывода с заданным профилем рабочей нагрузки, указываете на несколько LUN и запускаете его. Тестирование гиперконвергентных систем требует крупномасштабного подхода, когда множество виртуальных машин (часто от 10 до 64) одновременно применяют эту рабочую нагрузку к нескольким виртуальным дискам… не говоря уже о сборе всех этих данных после завершения задачи. Такой подход необходим для адекватного тестирования платформы и приближения, хотя и не полного, к реальным производственным условиям. Как вы можете себе представить, это сложно для опытных тестировщиков и может быть невыполнимо для многих конечных пользователей в разумные сроки. HCIbench от VMware значительно упрощает этот процесс тестирования и позволяет любому, кто может развернуть предварительно созданную тестовую виртуальную машину, а также независимому эксперту более эффективно тестировать HCI.
До того, как VMware выпустила этот инструмент и поделилась им с нами, у нас были некоторые трудности на этапе масштабирования собственных инструментов для измерения производительности VSAN и других платформ HCI. В настоящее время мы используем FIO из систем Windows и Linux (некоторые физические, другие виртуальные машины), указывая на локальный или удаленный том (iSCSI, SMB, CIFS) и запуская единую рабочую нагрузку. В случае с SSD, SAN или NAS вы можете выбрать физическое устройство хранения или несколько LUN для проверки платформы с двумя контроллерами и эффективно нагружать ее из центральной точки. Для запуска этого процесса достаточно одного скрипта, пример которого мы привели ниже:
fio.exe –filename=\\.\PhysicalDrive1:\\.\PhysicalDrive2:\\.\PhysicalDrive3:\\.\PhysicalDrive4 –thread –direct=1 –rw=randrw –refill_buffers –norandommap –randrepeat=0 –ioengine=windowsaio –bs=4k –rwmixread=100 –iodepth=16 –numjobs=16 –time_based –runtime=60 –group_reporting –name=4ktest –output=4ktest.out
Рецензент или тестировщик должен уметь корректно изменять скрипт между тестами, чтобы он обращался к нужному устройству, применял правильную нагрузку, не говоря уже о наличии нескольких скриптов для рабочих нагрузок с разными размерами блоков. А если добавить к этому скрипты внутри скриптов (необходим цикл для предварительной обработки или множественных нагрузок!), модифицировать их для PowerShell или Bash, то можно увидеть, как быстро ситуация выходит из-под контроля. Чтобы еще больше усугубить ситуацию, вам потребуется больше скриптов, написанных на заказ, для анализа файлов результатов бенчмарков, построения графиков и сравнения различий. Как рецензенты, мы должны иметь эти инструменты в своем арсенале и использовать их ежедневно. Как правило, требуются месяцы или годы, чтобы собрать хороший набор инструментов, узнать их сильные стороны, а также понять их слабые стороны. Клиент, оценивающий новую платформу хранения данных, обычно не занимается тестированием хранилищ профессионально и быстро будет перегружен всем этим. HCIbench использует те же инструменты, которым доверяют независимые рецензенты, и делает их использование простым для любого пользователя.
HCIbench упрощает тестирование гиперконвергентных систем. Вместо использования стандартных инструментов тестирования с большим количеством скриптов для настройки и сбора большого объема данных, HCIbench автоматически развертывает несколько виртуальных машин с запущенным Vdbench в вашем кластере. Хотя инструмент изначально ориентирован на сегмент рынка HCI, он так же хорошо работает и на традиционных кластерах с общим хранилищем. Главное здесь то, что VMware не продвигает на рынок собственный проприетарный инструмент или собственные профили рабочих нагрузок. Вместо этого они решили использовать уже известный и проверенный vdbench в качестве генератора рабочих нагрузок, предоставить клиенту или тестировщику возможность использовать собственные тестовые профили и создать графический интерфейс для более эффективного сравнения и оптимизации результатов. Уровень детализации отчетов впечатляет, поскольку он охватывает не только профили рабочих нагрузок, но и интегрируется с гипервизором, собирая эти статистические данные для оценки влияния тестов на кластер в процессе их выполнения.
Использовать HCIbench для тестирования довольно просто. Вы загружаете предварительно собранный OVA-файл Auto-Perf-Tool и развертываете его в своей среде VMware. После запуска он проведет вас через несколько шагов для присвоения себе IP-адреса через DHCP, или же ему может быть назначен IP-адрес. После завершения этого этапа вы можете перейти к работе в веб-браузере.
На странице конфигурации вы вводите все важные параметры вашей тестовой среды, чтобы инструмент мог автоматически развертывать сгенерированные виртуальные машины.
После прокрутки вниз вы найдете разделы для изменения параметров развертывания по умолчанию. В разделе «Спецификация гостевой виртуальной машины Vdbench» вы можете указать, как инструмент развертывается на вашем оборудовании. Для нашей 4-узловой платформы VSAN мы начали с 16 виртуальных машин и сохранили стандартное количество дисков данных (10) и стандартный размер диска данных (10 ГБ). С 16 виртуальными машинами это дает нам 1600 ГБ занимаемого места в кластере, что позволяет нам измерять производительность виртуальных машин, работающих на флэш-памяти. Увеличение этих значений, будь то количество виртуальных машин, количество виртуальных дисков или размер виртуального диска, позволяет расширить эти пределы и измерить, как система реагирует на перенос данных за пределы флэш-памяти в уровень жестких дисков, или, в случае полностью флэш-массивов, в более медленный, ориентированный на чтение уровень флэш-памяти. Для конечного пользователя это невероятно важно, поскольку многие результаты, предоставляемые поставщиками, показывают производительность в наилучшем случае, а не производительность по мере роста рабочего набора данных.
Далее вы можете загрузить, выбрать или создать собственный файл параметров vdbench. Для тестирования по принципу «четырех углов» для измерения пиковой скорости ввода-вывода и пиковой пропускной способности мы рекомендуем использовать случайное чтение и запись 4K, а также значение пропускной способности чтения и записи для больших блоков в последовательном режиме. Для смешанной нагрузки 8K случайных операций, 70% чтения и 30% записи, хорошо подходит для сравнения с показателями, сообщаемыми в отрасли. Чтобы максимально упростить задачу, мы создали все 5 этих профилей рабочих нагрузок и предлагаем их для скачивания. Они помогут создать отправную точку и будут использоваться в будущих обзорах с помощью этого инструмента. Хотите скопировать наши тесты? Скачайте инструмент, примените эти профили и сравните полные статистические данные.
Профили рабочих нагрузок HCIbench от StorageReview
- 4K Случайное чтение 100%
- 4K Случайная запись 100%
- 8K Случайный режим 70% чтение / 30% запись
- 32K Последовательное чтение 100%
- 32K Последовательная запись 100%
После определения рабочей нагрузки прокрутите вниз и выберите любые другие параметры, которые вы хотите использовать. Параметр VMDK Warm Up полезен для заполнения вновь созданных виртуальных дисков перед тестированием. Мы также добавили команду «warmup» в наши общие файлы рабочей нагрузки, чтобы дополнительно подготовить рабочую нагрузку и перенести «горячие» данные во флэш-память. Для получения более чистого результата лучше всего использовать более длительное время тестирования. Если вы хотите провести несколько запусков, начните с 900 или 1800 секунд. Для более формального запуска выберите 6 часов (21600 секунд) или дольше. Также следует установить флажок «Очистить виртуальные машины», поскольку это позволит HCIbench создать и развернуть виртуальные машины и удалить их с вашего хранилища после завершения теста. В самом низу вы увидите, что вам необходимо загрузить бинарный файл Vdbench и загрузить полный ZIP-файл, чтобы инструмент работал. Существуют ограничения на распространение инструмента в лицензионном соглашении Oracle, поэтому вам необходимо загрузить его самостоятельно. Нажмите на ссылку для скачивания, чтобы перейти на сайт Oracle, и загрузите файл vdbench50403.zip, затем загрузите этот файл в заархивированном виде в соответствующее окно. Наконец, сохраните конфигурацию, проверьте её, чтобы убедиться, что вы ничего не упустили, и запустите тест. После завершения вы сможете просмотреть результаты.
На странице результатов вы перейдете к простой программе для просмотра HTML-файлов.
Первый представленный файл содержит краткое изложение результатов. В нашем случае, при рабочей нагрузке VSAN, мы достигли 114 тыс. операций ввода-вывода в секунду при нагрузке 8 тыс. 70/30, средней задержке 2 мс и пропускной способности 984 МБ/с. Эти данные получены из выходных файлов vdbench, собранных со всех виртуальных машин, развернутых в среде. Пользователи могут просмотреть эти файлы, если хотят увидеть статистику посекундно.
Перейдите в папку iotest и щелкните файл «stats.html».
Это позволяет отобразить практически все возможные детали в удобном графическом интерфейсе с автоматически генерируемыми диаграммами.
Вы даже можете получить подробную статистику, например, сколько данных было передано через ваш vmknic на каждом хосте и всю связанную с этим информацию.
Компания VMware приложила впечатляющие усилия, чтобы упростить процесс синтетического тестирования HCI для конечного пользователя в рамках пилотного проекта или даже для такого рецензента, как я. Это устраняет сложности и путаницу, связанные с развертыванием синтетических рабочих нагрузок в среде общего хранилища, и предоставляет вам невероятное количество сгенерированных данных. Это также сокращает время тестирования, необходимое для эффективного сравнения с системами, повышая ваши шансы принять более обоснованное решение в ходе пилотного проекта. В конечном итоге, это оболочка для инструмента с открытым исходным кодом vdbench, генератора ввода-вывода, известного и заслуживающего доверия в сообществе, что снижает опасения по поводу возможных махинаций со стороны VMware. У этого инструмента есть ограничения, поскольку он не может воспроизвести рабочую нагрузку приложения или работающую производственную среду. Однако это дополнительные инструменты, которые можно добавить к сравнению, и этот инструмент предлагает хорошую отправную точку.




Amazon