Micron RealSSD P320h — это ускоритель приложений половинной высоты и длины (HHHL), использующий SLC NAND и интерфейс PCIe Gen 2 x8 для достижения заявленной производительности 3.2 ГБ/с при последовательном чтении и до 785 000 операций ввода-вывода в секунду при случайном чтении. Архитектура P320h отличается от многих других недавно рассмотренных нами ускорителей приложений, которые обычно объединяют несколько флеш-накопителей в RAID-массивы. Предложение Micron отличается тем, что вместо этого использует RAIN (избыточный массив независимых NAND-памяти) с пользовательским контроллером, что аналогично подходу, используемому Fusion-io и Virident. Эта архитектура позволяет Micron заявлять о впечатляющих показателях скорости и задержки, обеспечивая при этом высокий уровень безопасности данных на накопителе. В этом обзоре мы протестируем пару карт по 700 ГБ и посмотрим не только на их скорость по отдельности, но и на то, как P320h масштабируется в Windows Server 2012.
Как уже отмечалось, архитектура накопителя и политики управления NAND играют решающую роль в производительности устройства как с точки зрения пропускной способности, так и задержки. В P320h компания Micron объединяет собственную интеллектуальную собственность с проектированием и производством ASIC от IDT. В результате получается контроллер ASIC, включающий в себя запатентованные Micron технологии управления и контроля NAND, в том числе RAIN. Подход Micron к RAIN очень эффективен в обработке NAND, и именно эта эффективность в конечном итоге определяет производительность и защиту данных P320h. Micron использует архитектуру RAID5 7+1P в рамках RAIN. Благодаря использованию чередования на уровне 7+1, Micron обеспечивает ту же производительность, что и накопитель без контроля четности, при этом сохраняя необходимую предприятиям защиту данных.
Хотя P320h интересен благодаря технологиям управления NAND от Micron, его физическая конструкция также заслуживает внимания. Плата HHHL заполнена компонентами Micron, включая, конечно же, SLC NAND и DDR, и для достижения максимальной производительности не требуется внешнее питание. В наших 700-гигабайтных накопителях на плате размещено 64 элемента NAND, что подчеркивается пассивным радиатором на одном контроллере. Конструкция с одним контроллером обеспечивает лучшую производительность и надежность по сравнению с конкурирующими решениями, которые полагаются на объединение нескольких контроллеров с помощью аппаратного и программного обеспечения. Использование контроллера, специально разработанного для NAND от Micron, дает Micron еще одно преимущество с точки зрения совместимости, производительности и поддержки накопителя. Вопреки сообщениям в других источниках, накопитель не поддерживает NVMe, однако Micron определенно движется в этом направлении в будущих продуктах.
Micron предлагает P320h в двух вариантах емкости только для SLC-накопителей: 350 ГБ и 700 ГБ полезного объема. Накопитель на 350 ГБ изначально имеет объем 512 ГБ RAW, но после вычета 12.5% для RAIN и 22% для резервирования, объем накопителя составит 350 ГБ. P320h обеспечивает до 25 ПБ ресурса для модели на 350 ГБ и 50 ПБ для модели на 700 ГБ, а также поставляется с программными инструментами для управления накопителем и составления отчетов о его состоянии.
Технические характеристики Micron RealSSD P320h
- Место для проведения
- 350 ГБ (MTFDGAR350SAH-1N1AB)
- Последовательное чтение: 3.2 ГБ/с (128 КБ, в установившемся режиме)
- Последовательная запись: 1.9 ГБ/с (128 КБ, в установившемся режиме)
- Случайное чтение: 750 000 операций ввода-вывода в секунду (4 КБ, в установившемся режиме)
- Произвольная запись: 95 000 операций ввода-вывода в секунду (4 КБ, в установившемся режиме)
- 700 ГБ (MTFDGAR700SAH-1N1AB)
- Последовательное чтение: 3.2 ГБ/с (128 КБ, в установившемся режиме)
- Последовательная запись: 1.9 ГБ/с (128 КБ, в установившемся режиме)
- Случайное чтение: 750 000 операций ввода-вывода в секунду (4 КБ, в установившемся режиме)
- Произвольная запись: 95 000 операций ввода-вывода в секунду (4 КБ, в установившемся режиме)
- 350 ГБ (MTFDGAR350SAH-1N1AB)
- Задержка готовности: <42 мкс (512 байт)
- Задержка записи: <9 мкс
- Интерфейс: PCIe Gen2 x8
- Мощность: 25 Вт (максимум), 10 Вт в режиме ожидания.
- Форм-фактор: HHHL
- Встроенная функция постановки команд в очередь до 256 команд.
- Ресурс: 350 ГБ – 25 ПБ, 700 ГБ – 50 ПБ
- Размеры: 68.90mm х 167.65mm х 18.71mm
- Рабочая температура: от 0°C до +50°C
- Совместимость с ОС
- Microsoft: Windows Server 2008 R2 SP1 (x86-64), Windows Server 2008 R2 SP1 Hyper-V (x86-64), Windows Server 2012 (x86-64) SP128, Windows Server 2012 Hyper-V (x64)
- Linux: RHEL Linux 5.5, 5.6, 5.7, 5.8 (SP128), 6.1, 6.2 (x86-64), SLES Linux 11 SP1 и SP2 (x86-64)
- Открытый исходный код под лицензией GPL (версия ядра 2.6.25+)
- Срок хранения данных по окончании срока службы — 1 год.
Обзор видео
Построение и дизайн
Micron RealSSD P320h — это карта PCI-Express x8 половинной высоты и длины, имеющая самую простую компоновку PCIe AA на рынке с точки зрения дизайна. Благодаря одному контроллеру и двум небольшим дочерним платам, она тоньше любого другого решения, которое мы рассматривали до сих пор, и, безусловно, наименее сложная. Это играет на руку Micron по нескольким причинам. Во-первых, карта автоматически подходит практически для всех серверов на рынке, поддерживающих карты расширения PCIe, но это также имеет значение при сравнении общей надежности в корпоративных решениях. Благодаря одному контроллеру и отсутствию коммутатора PCIe, как в предложениях Fusion-io «Duo», количество компонентов, которые могут выйти из строя, значительно меньше. Это резко контрастирует с многоконтроллерными конфигурациями, встречающимися в некоторых конкурирующих решениях, которые объединяют в RAID несколько контроллеров SandForce. На рынке, где не любят отключать платформы после их запуска в производство, за исключением возможной замены в будущем, знание того, что установленное сегодня устройство будет работать годами без проблем, является огромным плюсом.
В основе Micron RealSSD P320h лежит уникальный для этого решения специализированный контроллер Micron/IDT ASIC. На двух наших образцах объемом 700 ГБ этот контроллер подключен к пулу памяти Micron SLC NAND объемом 1 ТБ и буферизован 2.25 ГБ оперативной памяти Micron DDR. В зависимости от точки зрения, эти компоненты дают Micron огромное преимущество, поскольку компания обладает очень подробными знаниями о работе всех этих компонентов на базовом уровне, имея их собственные разработки.
SSD-накопитель Micron RealSSD P320h отличается очень низким энергопотреблением, потребляя менее 25 Вт через шину PCIe 2.0 x8 и не требуя внешнего подключения к источнику питания. Это обеспечивает P320h большую гибкость при выборе подходящих платформ для установки, исключая необходимость в дополнительных силовых кабелях или тестировании серверов на предмет подачи питания по стандарту PCIe.
Управление программным обеспечением
Хотя большинство ускорителей приложений поставляются с некоторым программным обеспечением, удобство использования и эффективность этих инструментов варьируются от отличных до плохих. Micron предоставляет свои инструменты RealSSD Manager, разработанные для повышения эффективности управления P320h, включая как интерфейс командной строки, так и графический интерфейс пользователя. Эти инструменты совместимы как с Windows, так и с Linux и предлагают широкий спектр функций. Пользователи могут использовать эти программные средства для обновления прошивки накопителя, проверки состояния PCIe AA, а также для запуска форматирования устройства. На более продвинутом уровне можно отслеживать текущее использование накопителя и температуру, используя встроенные возможности ведения журнала.
По сравнению с уже имеющимися утилитами, по набору функций и общему дизайну Micron RealSSD Manager немного уступает Fusion-io. Хотя дизайн несколько уступает ioSphere, Micron RealSSD Manager предлагает многие из тех же возможностей управления и мониторинга, но только на локальном уровне. В настоящее время он не поддерживает мониторинг устройств на удаленных системах, но в целом значительно превосходит по функциональности инструменты управления LSI или OCZ.
Тестирование фона и сравнительных данных
Когда речь идет о тестировании корпоративного оборудования, среда так же важна, как и используемые для его оценки процессы тестирования. В StorageReview мы предлагаем то же оборудование и инфраструктуру, что и во многих центрах обработки данных, куда в конечном итоге будут направлены тестируемые нами устройства. Это включает в себя тестирование только с корпоративными серверами, а также с соответствующим инфраструктурным оборудованием, таким как корпоративные сети, место в стойках, системы стабилизации/мониторинга питания и аналогичное оборудование того же класса, чтобы должным образом оценить производительность устройства. Ни один из наших обзоров не оплачивается и не контролируется производителем тестируемого оборудования; соответствующие аналогичные устройства выбираются по нашему усмотрению из продуктов, имеющихся в нашей лаборатории.
Платформа тестирования StorageReview Enterprise:
- 2 процессора Intel Xeon X5650 (2.66 ГГц, 12 МБ кэш-памяти)
- Windows Server 2008 Standard Edition R2 SP1 64-бит и CentOS 6.2 64-бит
- Чипсет Intel 5500+ ICH10R
- Память – 8 ГБ (2 x 4 ГБ) 1333 МГц DDR3 Registered RDIMM
При выборе аналогов для этого обзора мы отдали предпочтение лидерам от каждого производителя, но только в тех областях, которые имели смысл в сравнении с Micron RealSSD P320h, оснащенным SLC-памятью. По этой причине мы исключили LSI WarpDrive первого поколения, поскольку его заменил Nytro WarpDrive второго поколения, а также OCZ Z-Drive R4, который слишком сильно выходил за пределы кривой задержки для потребностей рынка высокопроизводительных корпоративных систем хранения данных.
640GB Fusion-io ioDrive Duo
- Выпущено: 1 полугодие 2009 года
- Тип NAND: MLC
- Контроллер: 2 x Фирменный
- Видимость устройств: JBOD, программный RAID (в зависимости от ОС).
- Fusion-io VSL Windows: 3.1.1
- Fusion-io VSL Linux 3.1.1
200GB LSI Nytro WarpDrive WLP4-200
- Выпущено: 1 полугодие 2012 года
- Тип NAND: SLC
- Контроллер: 4 x LSI SandForce SF-2500 через мост LSI SAS2008 PCIe to SAS Bridge
- Видимость устройства: фиксированный аппаратный RAID0
- LSI Windows: 2.10.51.0
- LSI Linux: собственный драйвер для CentOS 6.2
700GB Micron RealSSD P320h
- Выпущено: 2 полугодие 2011 года
- Тип NAND: SLC
- Контроллер: 1 x Фирменный
- Отображение устройства: Одно устройство
- Окна Micron: 7.03.3452.00
- Micron Linux: 1.3.7-1
Анализ синтетической рабочей нагрузки предприятия (стандартные настройки)
Наш подход к анализу решений для хранения данных на базе PCIe выходит за рамки традиционных показателей пиковой или стационарной производительности. При рассмотрении усредненной производительности за длительный период времени упускаются из виду детали работы устройства на протяжении всего этого периода. Поскольку производительность флэш-памяти сильно меняется со временем, наш новый процесс тестирования анализирует производительность по таким параметрам, как общая пропускная способность, средняя задержка, пиковая задержка и стандартное отклонение на протяжении всего этапа предварительной подготовки каждого устройства. Для высокопроизводительных корпоративных продуктов задержка часто важнее пропускной способности. Поэтому мы прилагаем все усилия, чтобы показать полные характеристики производительности каждого устройства, которое мы тестируем в нашей лаборатории корпоративного тестирования.
Мы также добавили сравнение производительности, чтобы показать, как каждое устройство работает с различными наборами драйверов в операционных системах Windows и Linux, используя генератор рабочих нагрузок Fio. Для Windows мы используем последние драйверы на момент первоначального обзора, после чего каждое устройство тестируется в 64-битной среде Windows Server 2008 R2. Для Linux мы используем 64-битную среду CentOS 6.2, которую поддерживает каждый корпоративный ускоритель приложений PCIe. Наша главная цель этого тестирования — показать, как различается производительность ОС, поскольку указание совместимости операционной системы в описании продукта не всегда означает одинаковую производительность на обеих системах.
Все тестируемые устройства проходят тестирование по единой процедуре от начала до конца. В настоящее время для каждой отдельной рабочей нагрузки устройства подвергаются безопасному стиранию данных с использованием инструментов, предоставляемых поставщиком, предварительному выводу в стационарное состояние с той же рабочей нагрузкой, с которой устройство будет тестироваться при высокой нагрузке в 16 потоков с очередью из 16 операций на поток, а затем тестируются через заданные интервалы в различных профилях глубины потоков/очередей для демонстрации производительности при легком и интенсивном использовании. Для тестов со 100% активностью чтения предварительная подготовка проводится с той же рабочей нагрузкой, но с переключением на 100% активность записи.
Предварительная подготовка и первичные испытания в стационарном режиме:
- Пропускная способность (суммарные операции ввода-вывода при чтении и записи)
- Средняя задержка (среднее значение задержки чтения и записи)
- Максимальная задержка (пиковая задержка чтения или записи)
- Стандартное отклонение задержки (усредненное стандартное отклонение чтения и записи)
В настоящее время анализ синтетической нагрузки для корпоративных систем включает четыре распространенных профиля, которые могут отражать реальную активность. Они были выбраны для того, чтобы иметь некоторое сходство с нашими предыдущими тестами, а также для сравнения с широко опубликованными значениями, такими как максимальная скорость чтения и записи 4K, а также 8K 70/30, обычно используемая для корпоративных накопителей. Мы также включили две устаревшие смешанные рабочие нагрузки, включая традиционный файловый сервер и веб-сервер, предлагающие широкий диапазон размеров передаваемых данных. Последние две будут постепенно выведены из эксплуатации вместе с тестами приложений в этих категориях по мере их появления на нашем сайте и заменены новыми синтетическими рабочими нагрузками.
- 4K
- 100% чтение или 100% запись
- 100% 4К
- 8К 70/30
- 70% чтение, 30% письмо
- Файловый сервер
- 80% чтение, 20% письмо
- 10% 512b, 5% 1к, 5% 2к, 60% 4к, 2% 8к, 4% 16к, 4% 32к, 10% 64к
- Веб-сервер
- Прочитано на 100%
- 22% 512b, 15% 1k, 8% 2k, 23% 4k, 15% 8k, 2% 16k, 6% 32k, 7% 64k, 1% 128k, 1% 512k
Переходя к первому тесту, который охватывает рабочую нагрузку предварительной подготовки случайной записи 4K, Micron RealSSD P320h демонстрирует высокие показатели, достигая пиковых скоростей чуть менее 400 000 IOPS в нашем Lenovo ThinkServer. Производительность стабилизировалась на уровне выше 200 000 IOPS примерно через 80 минут, при этом результаты в наших тестовых средах CentOS 6.2 и Windows Server 2008 оказались очень схожими.
Анализируя среднюю задержку в течение нашего теста предварительной обработки 4K, P320h быстро стабилизировался, показав задержку чуть более 1 мс при нагрузке 16T/16Q, что значительно ниже, чем у LSI Nytro WarpDrive с SLC-чипом.
При сравнении максимальной задержки в Windows и Linux на протяжении всего периода предварительной обработки данных мы обнаружили, что в среде Linux наблюдалось наименьшее количество скачков высокой задержки, в то время как в среде Windows время от времени достигало 1,000 мс.
Хотя скачки в 1,000 мс могут вызывать беспокойство, сравнение стандартного отклонения дает более полную картину общей задержки на протяжении всего теста. В случае с P320h, даже с более высокими скачками в Windows Server 2008, он все равно занял второе место, уступив только самому себе в Linux.
После завершения этапа предварительной подготовки мы провели более длительное тестирование каждого ускорителя приложений в рабочей нагрузке 4K с 16 потоками/16 кадрами в секунду. Micron RealSSD P320h показал наивысшую производительность как при случайном чтении, так и при случайной записи 4K, причем преимущество было обеспечено его набором драйверов для Linux. В CentOS мы измерили 417 тыс. IOPS при чтении против «всего» 378 тыс. IOPS в Windows. Скорость случайной записи 4K была стабильной на обеих платформах, превышая 202 тыс. IOPS.
Учитывая почти невероятную пропускную способность, неудивительно, что P320h показал самую низкую среднюю задержку. Средняя задержка чтения составила чуть более 0.6 мс, а задержка записи — 1.26 мс.
При сравнении пиковой задержки в нашей финальной выборке производительности случайного чтения и записи 4K, Micron RealSSD P320h показал одни из самых высоких скачков задержки при случайном чтении 4K среди всех протестированных устройств как в Windows, так и в Linux. Производительность случайной записи была более неоднородной: более высокая пиковая задержка наблюдалась в Windows, а более низкая — в Linux.
Если углубиться в анализ общей задержки, то Micron realSSD P320h продемонстрировал наиболее стабильную производительность случайного доступа к 4K-файлам в Linux, и немного меньшую — с драйверами для Windows.
В следующем тесте мы переключимся на рабочую нагрузку 8K 70/30, где Micron P320h снова с большим отрывом лидирует в группе по пропускной способности. В этом сегменте пиковые скорости изменились через 30 минут после начала теста, а затем стабилизировались примерно к 120 минутам.
В нашей рабочей нагрузке 8K 70/30 процессор P320h продемонстрировал очень низкую среднюю задержку, составившую около 1.5 мс в течение всего процесса предварительной подготовки. Драйверы для Linux показали небольшое преимущество, но в целом разница была бы практически незаметной.
Если переключить внимание со средней на пиковую задержку, то можно заметить существенную разницу в поведении в Windows и Linux. Максимальное время отклика драйверов Windows колебалось в пределах 1,000-1,200 мс, в то время как в Linux оно было ниже и составляло около 200 мс.
Хотя пиковая задержка показывает наихудшее время отклика, в следующем разделе мы рассмотрим стандартное отклонение, чтобы увидеть, как в целом выглядела задержка на этапе предварительной подготовки. В Linux Micron P320h продемонстрировал гораздо большую стабильность по сравнению с Windows. Хотя производительность в Windows была менее стабильной, он все же занял среднее место.
По сравнению с фиксированной максимальной нагрузкой в 16 потоков и 16 очередей, которую мы использовали в тесте записи 4K со 100% загрузкой, наши профили смешанной нагрузки масштабируют производительность в широком диапазоне комбинаций потоков и очередей. В этих тестах мы варьируем интенсивность нагрузки от 2 потоков и 2 очередей до 16 потоков и 16 очередей. Micron P320h продемонстрировал значительное преимущество при большей глубине очереди по сравнению с аналогичными устройствами в этой группе, уступая лишь минимальной производительности на уровне 2 потоков/2 очередей. Во всем диапазоне набор драйверов Linux обеспечил более высокую пропускную способность в большинстве областей с небольшим отрывом.
SSD-накопитель Micron RealSSD P320h показал лучшие результаты по времени отклика среди всех накопителей, за исключением режима 2T/2Q, и оставался ниже 1 мс во всех режимах, кроме 16T/16Q.
Увеличение времени отклика на P320h в Windows начало проявляться примерно в середине теста, при более чем 4 одновременно работающих потоках. Драйверы Linux ограничивали эти скачки, за исключением самых высоких эффективных тестов QD128 и QD256, где время отклика приближалось к 200 мс.
Сравнивая стандартные отклонения, Micron RealSSD P320h продемонстрировал наиболее стабильную производительность под Linux и занял среднее место по набору драйверов для Windows.
Нагрузка на файловый сервер представляет собой более широкий диапазон размеров передаваемых данных, воздействующий на каждое конкретное устройство, поэтому вместо того, чтобы работать со статической нагрузкой в 4 или 8 КБ, накопитель должен справляться с запросами в диапазоне от 512 байт до 64 КБ. Тест предварительной подготовки файлового сервера стал первой областью, где Micron P320h не превзошел другие модели по пиковой скорости, хотя его скорость продолжала расти по мере завершения теста, начиная с состояния с удаленными данными. Начав с показателя ниже 80 000 IOPS, через 100 минут он превысил 120 000 IOPS в установившемся режиме. Это значительно превзошло существующие модели в этом сегменте.
Если рассматривать среднюю задержку, то по мере приближения Micron RealSSD P320h к установившемуся состоянию при эффективной глубине очереди 256, среднее время отклика составляло 2 мс.
Переключив внимание на пиковое время отклика, мы снова обнаружили, что набор драйверов для Windows показал более высокое пиковое время отклика, колеблющееся в районе 1,000 мс на протяжении всего теста. Это контрастировало с набором драйверов для Linux, у которых пиковый уровень не превышал 50 мс.
Хотя пиковые значения времени отклика не всегда выглядят впечатляюще, мы переключаем внимание на стандартное отклонение, чтобы получить более четкое представление об общей задержке у Micron P320h. В этой области можно заметить некоторые скачки на протяжении всего теста P320h в Windows, но в целом уровень задержки остается одним из самых низких в группе.
После завершения этапа предварительной подготовки мы перешли к основным тестам с нагрузкой, варьирующейся от 16T/16Q до 2T/2Q. Micron RealSSD P320h быстро показал себя и лидировал с существенным отрывом по мере увеличения эффективной глубины очереди. В конечном итоге производительность в нашем двухпроцессорном сервере достигла значения ниже 130 тыс. IOPS.
Если сравнивать среднюю задержку, то P320h показал максимальную пропускную способность в 130 000 IOPS при 16T/4Q со средней задержкой около 0.5 мс, увеличивающейся до 1-2 мс на уровнях EQD128 и EQD256.
В ходе основного сегмента нашего теста файлового сервера максимальная задержка составляла те же 1,000 мс, что и в предыдущих тестах, при этом драйверы для Linux демонстрировали гораздо меньшее пиковое время отклика.
Сравнивая стандартное отклонение задержки, Micron RealSSD P320h показал наилучшее распределение задержки среди всех протестированных устройств в Linux и занял место в середине списка в Windows.
В нашем последнем синтетическом тесте, охватывающем профиль веб-сервера, который традиционно представляет собой тест на 100% чтение, мы применяем 100% активность записи, чтобы полностью подготовить каждый накопитель перед основными тестами. В этом тесте Micron RealSSD P320h показал самую высокую производительность в установившемся режиме, но новым для этого теста стало явное различие в пропускной способности между драйверами для Windows и Linux. Производительность в Linux оказалась значительно выше, а также обеспечила лучшую пиковую производительность.
Переключившись на среднюю задержку, Micron P320h показал ровную кривую, начиная примерно с 20 минут теста, при этом производительность в Linux оказалась почти на 2 мс выше.
По сравнению с тестами смешанных нагрузок чтения/записи в предыдущих тестах, которые демонстрировали частые скачки задержки в 1,000 мс у P320h, тест предварительной подготовки веб-сервера показал гораздо более спокойный результат. При этом, в тестах Linux все было еще спокойнее, скачки задержки во время процесса предварительной подготовки отсутствовали.
В ходе сравнения стандартного отклонения задержки на этапе предварительной подготовки веб-сервера, Micron RealSSD P320h показал наиболее стабильную задержку, даже с учетом скачков, вызванных драйверами Windows. Рассматривая очень незначительное увеличение задержки по мере приближения накопителя к установившемуся состоянию, мы видим, что производительность полностью стабилизировалась в промежутке между 60 и 80 минутами работы.
Перейдя к основному сегменту нашего теста веб-сервера со 100% профилем чтения, Micron P320h по-прежнему лидировал во всех категориях, за исключением производительности в Windows в разделе 2T/2Q нашего теста. Интересный аспект сравнения их производительности заключается в том, что, хотя в Linux была выше производительность записи, набор драйверов для Windows обеспечивал более высокую производительность чтения. Это привело к более высокой производительности в Windows во всех разделах с большей глубиной очереди и значительно большей максимальной скорости (152 тыс. против 170 тыс. IOPS).
Средняя задержка Micron RealSSD P320h оставалась ниже 1 мс на всех этапах, за исключением момента, когда эффективная глубина очереди составляла 256. Сравнивая пиковую пропускную способность со средней задержкой, мы обнаружили, что оптимальным значением для этой карты в нашем трассировочном отчете для веб-сервера является глубина очереди от 64 до 128.
Несмотря на то, что драйверы для Windows в итоге показали лучшие результаты по пропускной способности и средней задержке, максимальное время отклика на большинстве участков теста всё ещё оставалось около 1,000 мс; производительность в Linux не демонстрировала высоких пиков задержки.
Сравнивая стандартное отклонение задержки между накопителями в этой группе, Micron RealSSD в Linux показал наилучшее распределение задержки, в то время как драйверы для Windows оказались ближе к середине списка.
Анализ синтетической рабочей нагрузки предприятия (многодисковое/сетевое подключение)
Оснащенная двумя 700-гигабайтными PCIe-ускорителями приложений Micron RealSSD P320h, мы настроили тестовую среду, состоящую из высокопроизводительного сервера Supermicro под управлением Windows Server 2012. Эта тестовая платформа была подключена через два отдельных PCIe 3.0 адаптера Mellanox InfiniBand к нашему коммутатору SX6036 IB, который, в свою очередь, был подключен к двум серверам HP Proliant DL380p Gen8, также работающим под управлением Windows Server 2012. На высокопроизводительном сервере хранения данных Supermicro мы создали простой массив хранения с использованием Storage Spaces, который затем был предоставлен по протоколу SMB. В отличие от наших основных тестов, которые проверяют всю поверхность LBA дисков, эти тесты нагружали два 50-гигабайтных сегмента, распределенных по чередующемуся тому, и тестировались как локально, так и по сети InfiniBand.
Ниже представлено видео с обзором результатов тестирования InfiniBand:
Платформа для тестирования корпоративных решений StorageReview 56 Гбит/с:
Супермикрокомпьютер SuperServer 7047R-TXRF
- Супермикрокомпьютер X9DRX+-F
- Два процессора Intel E5-2670 (2.6 ГГц, 20 МБ кэш-памяти)
- Windows Server 2012 DataCenter
- 128 ГБ оперативной памяти (8 ГБ x 16 Hynix DDR3, 64 ГБ на каждый процессор)
- Intel Xeon E5-2640 (6 ядер, 2.50 ГГц, 15 МБ памяти, 95 Вт)
- Windows Server Standard 2012
- Набор микросхем Intel C600
- 64 ГБ (8 x 8 ГБ) и 16 ГБ (4 x 4 ГБ) DDR3 Registered RDIMM 1333 МГц
Коммутатор Mellanox SX6036 56 Гбит/с InfiniBand и соответствующее оборудование.
- 36 портов FDR 56 Гбит/с
- Пассивные медные кабели QSFP
- Адаптер Mellanox ConnectX-3 VPI PCIe 3.0 Twin 56 Гбит/с InfiniBand
Наша текущая инфраструктура для тестирования высокопроизводительных межсоединений InfiniBand состоит из двух серверов HP Proliant DL380p Gen8, оснащенных адаптерами Mellanox ConnectX-3 VPI PCIe, подключенных через 36-портовый коммутатор Mellanox IB со скоростью 56 Гбит/с. Эта среда позволяет использовать в качестве узкого места по вводу-выводу устройство хранения данных, а не само сетевое оборудование.
В разделе тестирования локального простого пространства и InfiniBand мы ограничились ограниченным набором тестов, а не использовали весь наш набор. Для удобства сравнения мы использовали нашу рабочую нагрузку 8K 70/30, чтобы показать разницу в производительности между локальным доступом и при совместном использовании по сети.
Используя меньший общий размер тестового массива по сравнению с нашими основными тестами, мы обнаружили, что производительность очень хорошо масштабируется в среде с двумя видеокартами. Локально, при одновременном запуске двух сессий генератора рабочей нагрузки, имитирующих работу двух серверов по сети, мы измерили производительность, превышающую 490 тыс. IOPS в нашей рабочей нагрузке 8K 70/30. При представлении этого единого массива с чередованием данных на двух общих ресурсах и доступе к нему с двух наших серверов HP Proliant DL380p Gen8 производительность упала до 402 тыс. IOPS. В обоих сценариях нам удалось более чем удвоить пропускную способность, сохранив при этом отличную производительность на каждом сервере.
Анализируя среднюю задержку в нашей среде с двумя P320h, мы обнаружили некоторую разницу между локальным и удаленным доступом через InfiniBand, но задержка все же была ниже, чем та, которую мы измерили на одном P320h в нашем основном тестовом стенде. Учитывая минимальное влияние задержки на совместное использование этого высокопроизводительного устройства ввода-вывода несколькими системами, это действительно открывает возможности для распределения дорогостоящих высокопроизводительных ресурсов между несколькими системами.
Фактически, не было обнаружено существенной разницы в пиковой задержке при сравнении локального и удаленного доступа, что важно, учитывая, что сеть InfiniBand не приводит к значительному увеличению задержки для таких устройств, как ускорители приложений PCIe.
Аналогично пиковой задержке, мы не обнаружили заметной разницы между стандартным отклонением задержки, наблюдаемым локально в сети с чередованием полос и в нашей сети InfiniBand.
После того, как мы увидели, что производительность 8K 70/30 при двух одновременных нагрузках с эффективной глубиной очереди 256 каждая показала небольшое снижение производительности по сети по сравнению с локальной нагрузкой, мы переключили внимание на переменную нагрузку в диапазоне от 2T/2Q до 16T/16Q. Поскольку это происходило одновременно на двух серверах или двух локальных генераторах нагрузки, общая нагрузка составляла от 4T/2Q до 32T/16Q. Как локальный, так и сетевой доступ к массиву P320h с чередованием данных демонстрировали одинаковую скорость отклика при увеличении нагрузки. Оба теста показали практически идентичные результаты во всем диапазоне, при этом локальный доступ показал наибольшую производительность.
Средняя задержка в основной части нашей рабочей нагрузки 8K 70/30 на конфигурации P320h с чередованием данных продемонстрировала превосходную производительность как локально, так и в сети. Наиболее впечатляющими являются результаты InfiniBand, где каждый сервер показал задержку менее 0.8 мс при производительности более 400 000 операций ввода-вывода в секунду по сети.
Сравнение максимальной задержки в рабочей нагрузке 8K 70/30 с нашей конфигурацией из двух P320h показало схожие результаты как локально, так и удаленно: в обоих случаях наблюдались скачки задержки более 1,000 мс на протяжении всего теста.
Как и в случае с результатами по максимальной задержке, приведенными выше, разница между локальным доступом к массиву P320h и его совместным использованием через Windows Storage Space в нашей сети InfiniBand была минимальной.
Заключение
Micron RealSSD P320h — это просто отличный пример качественной инженерной работы. Всё, от конструкции и компоновки платы до пользовательского контроллера, делает P320h по-настоящему интегрированным устройством, что не всегда встречается даже в сегменте корпоративных систем хранения данных. Micron находит способы повысить ценность накопителя на всех уровнях, от IP-блоков управления NAND в пользовательском ASIC до максимально глубокой характеризации NAND, обеспечивающей максимальную производительность и долговечность компонентов SLC-флэш-памяти.
При оценке производительности P320h накопитель демонстрирует впечатляющие результаты, поддерживая практически одинаковые показатели в наших тестовых средах CentOS и Windows Server. В плане совместимости с различными средами Linux всегда имел преимущество, особенно в отношении оптимальной задержки. Однако сказать, что Micron P320h быстр, — это мягко сказано. Он значительно превзошел любое другое решение, которое мы тестировали до сих пор, демонстрируя более высокую пиковую скорость, чем большинство, и гораздо более высокую производительность в стабильном режиме, чем конкурирующие решения. Что касается быстродействия, средняя задержка была безупречной, но еще более впечатляющей оказалась его новая безупречная производительность в Linux, с очень низкой пиковой задержкой и стандартным отклонением задержки. В Windows показатели были не слишком далеки от ожидаемых, хотя пиковая задержка и стандартное отклонение задержки у него были средними по сравнению с остальными.
Что касается совместимости, мы обнаружили, что Micron RealSSD P320h безупречно работает в корпоративной среде. На наш взгляд, нет смысла тестировать это топовое корпоративное решение на потребительской платформе, поскольку оно никогда не будет использоваться в производственной среде. В связи с этим, на тестируемых нами серверах первого уровня оно работало без сбоев на разных операционных системах. P320h также без проблем работало в конфигурации с двумя накопителями на нашем сервере Supermicro SuperServer 7047R под управлением Windows Server 2012, как видно на нашем видео.
Если и есть повод для нареканий, то это незначительные недостатки среды Windows, особенно при сравнении пиковой задержки и стандартного отклонения во всех наших рабочих нагрузках. Даже с такой высокой задержкой производительность всё равно превзошла многие, если не все, протестированные нами ускорители приложений PCIe, но мы считаем, что можно было бы добиться ещё большей производительности с помощью более совершенных драйверов. Ещё один незначительный недостаток – это предложение только SLC-накопителей в двух вариантах ёмкости. Конкуренты предлагают накопители в форм-факторах MLC или eMLC, что позволяет снизить начальную стоимость, а также значительно увеличить ёмкость; в некоторых случаях более 2 ТБ на одной карте. Конечно, целевая аудитория P320h не относится к корпоративному рынку начального уровня, но большее разнообразие для удовлетворения различных потребностей могло бы сделать семейство P320h более универсальным.
Плюсы
- Самый быстрый ускоритель приложений PCIe, который мы тестировали на сегодняшний день.
- Очень низкая средняя и пиковая задержка
- Отличная производительность в средах Windows и Linux.
Минусы
- Ограничено использованием SLC NAND
- Максимальный объем памяти составляет 700 ГБ.
Резюме
Micron RealSSD P320h — это хорошо продуманное и комплексное решение для предприятий, которые хотят получить максимум от возможностей PCIe-хранилищ. P320h — это лучший в своем классе накопитель, обеспечивающий превосходную и стабильную работу в различных операционных системах благодаря компонентам Micron и интеллектуальной собственности в области управления NAND-памятью, интегрированной в контроллер.
Обсудить этот отзыв






Amazon