StorageReview.com

Обзор производительности постоянной памяти Intel Optane DC для NoSQL-систем

Предприятие  ◇  SSD

Ранее в этом году мы опубликовали данные о производительности постоянной памяти Intel Optane DC в нашем обзоре платформы Supermicro SuperServer 1029U-TN10RT . Supermicro была одной из первых компаний, предложивших поддержку постоянной памяти Intel, и эта двухпроцессорная система форм-фактора 2U отлично показала себя в качестве тестовой платформы для постоянной памяти. Рассмотрение скорости постоянной памяти Optane DC с точки зрения традиционного блочного хранения данных является поучительным, но истинная ценность постоянной памяти раскрывается в приложениях, которые могут изначально использовать преимущества этого нового носителя, интеллектуально размещая данные в DRAM, постоянной памяти или встроенном хранилище в зависимости от потребностей приложения. Чтобы лучше понять профиль производительности постоянной памяти Optane DC, мы протестировали сервер Supermicro, используя ведущую платформу NoSQL Aerospike.

Постоянная память Intel Optane DC
Модули постоянной памяти Intel Optane DC в сервере Supermicro

Что такое Аэроспайк?

Aerospike предоставляет распределенную, высокомасштабируемую нереляционную систему управления базами данных для ресурсоемких операций чтения/записи оперативных данных. Она разработана для обеспечения чрезвычайно быстрого и предсказуемого времени отклика при доступе к наборам данных, содержащим миллиарды записей в базах данных объемом от десятков до сотен терабайт. Aerospike используется в самых разных стратегических приложениях, включая предотвращение мошенничества, цифровые платежи, рекомендательные системы, торги в реальном времени и многое другое. Среди клиентов Aerospike такие крупные компании, как Adobe, Airtel, FlipKart, Kayak, Nielsen, PayPal и Wayfair.

В зависимости от сценария использования и набора данных, Aerospike может быть развернут в различных конфигурациях, оптимизирующих системные ресурсы для конкретного сценария. Aerospike может запускаться с данными в оперативной памяти, или индексироваться в оперативной памяти с данными на SSD, или индексироваться на SSD с данными на SSD. Недавно Aerospike выпустил новую конфигурацию, которая использует преимущества постоянной памяти Intel Optane DC в режиме AppDirect. Индекс хранится в PMEM, а данные — на SSD. Этот новый режим расширяет возможности Aerospike, сохраняя при этом производительность, очень близкую к индексированию в оперативной памяти с данными на SSD. Этот новый режим не только обеспечивает задержки менее миллисекунды, но и позволяет быстро перезапускать Aerospike без перестроения основного индекса.

Применяя различные типы рабочих нагрузок в разных конфигурациях Aerospike, можно оценить преимущества и производительность использования постоянной памяти Intel Optane DC на сервере SuperMicro SuperServer. Запуск и сравнение бенчмарков для конфигурации с индексом в памяти/данными на SSD и индексом в PMEM/данными на SSD позволяют сделать обоснованный выбор в пользу использования постоянной памяти или DRAM. Существует еще одна конфигурация, которая может предоставить дополнительную информацию о производительности постоянной памяти. Хотя функция индекса в PMEM и данных в PMEM еще не выпущена, существует способ настроить PMEM на сервере для работы с индексом в PMEM и запуска части PMEM, сконфигурированной как блочное устройство, чтобы получить представление о возможностях производительности индекса в PMEM и данных в PMEM.

Конфигурация NoSQL Aerospike

Для каждой из трех различных конфигураций были применены три различных рабочих нагрузки. В тесте Aerospike Java Benchmark были сгенерированы рабочая нагрузка 50/50 чтение/запись, рабочая нагрузка только на чтение и рабочая нагрузка только на запись от 4 клиент-серверов. Каждый тест состоял из нескольких этапов:

  • Этап загрузки данных – загрузка данных в базу данных.
  • Фаза прогрева – запуск операции записи в течение двух часов для достижения стабильного состояния базы данных.
  • Этап тестирования – Запуск реальной тестовой нагрузки в течение часа.

Перед проведением каких-либо тестов были выбраны подходящий набор ключей и размер объекта для данных. Хотя Aerospike предлагает широкий диапазон размеров объектов — от нескольких байт до миллиона байт, набор ключей и размер объекта были выбраны таким образом, чтобы проверить работоспособность серверного оборудования и продемонстрировать производительность конфигураций PMEM. Большие размеры объектов могут создать узкое место в сети и не в полной мере продемонстрировать возможности постоянной памяти Optane DC. Поэтому для всех тестов использовался размер объекта 440 байт.

Размер набора ключей был ограничен объемом памяти, используемой для индекса в оперативной памяти/данных на SSD-накопителе. Конфигурация индекса в оперативной памяти была ограничена набором данных из 4 миллиардов объектов. Хотя индекс в PMEM мог обрабатывать 15.5 миллиардов ключей, для лучшего сравнения с тестом индекса в оперативной памяти было использовано только 4 миллиарда ключей. Финальные тесты проводились с индексом в PMEM и данными в PMEM. Поскольку сервер имел в общей сложности 1.5 ТБ памяти PMEM, для этих тестов использовалось только миллиард ключей.

Конфигурация оборудования

Аппаратная конфигурация включает два ключевых компонента. В единственном сервере базы данных размещена постоянная память Intel Optane PC. Четыре клиентских сервера создают нагрузку на сервер базы данных.

Сервер базы данных

  • Корпус – SuperMicro Ultra 1U SYS-1029U-TN10RT
  • ЦП
    • 2 процессора Intel Xeon Scalable 8268 (2.9 ГГц, 24 ядер)
    • 2 процессора Intel Xeon Scalable 8280 (2.7 ГГц, 28 ядер)
  • Хранение данных – 10 твердотельных накопителей Intel DC P4510 2 ТБ NVMe, 1DWPD
  • DRAM – 12 x 32 ГБ DDR4-2933
  • Постоянная память – 12 модулей DDR4-2666 Intel Optane DC PMM по 128 ГБ
  • Сеть – 100 Гбит/с Ethernet
  • ОС – Fedora 29  

Клиент-серверы

  • Корпус – Dell R740xd
  • Процессор – 2 x Intel Xeon Scalable 6130
  • Оперативная память – 256 ГБ
  • Сеть – 2 x 25 Гбит/с Ethernet
  • ОС – Ubuntu – 18.04
  • Программное обеспечение – Aerospike Enterprise 4.5.1
  • Генератор нагрузки – Тест производительности Aerospike Java (Aerospike Java Client 4.4.0)

Результаты испытаний Aerospike

Как уже отмечалось, мы проводили тестирование в различных конфигурациях рабочей нагрузки, а также при различном расположении индекса и базы данных. Кроме того, мы использовали два разных набора процессоров Intel Xeon Scalable второго поколения . В качестве серверов баз данных мы использовали как 8268, так и 8280, при этом процессоры 8280 являются процессорами Intel высшего класса, поддерживающими постоянную память Optane DC. По тактовой частоте 8280 обеспечивают прирост на 12 ГГц по сравнению с 8268, или увеличение производительности на 8.6%. Хотя это не отражено в таблицах ниже, следует отметить, что с точки зрения качества обслуживания все результаты тестов по задержке на сервере составляли или были близки к 100% в пределах долей миллисекунды.

Индекс в памяти, данные на NVMe SSD

Активность Операции с высокой пропускной способностью
Intel 8268
Операции с высокой пропускной способностью
Intel 8280
Чтение/Запись 50/50 2,100,000 2,298,000
Прочитано на 100% 2,240,000 2,720,000
Напишите 100% 1,760,000 2,020,000

Хотя нам известно, что процессоры 8280 обеспечивают прирост тактовой частоты на 8.6% по сравнению с 8268, ключевым моментом является изучение того, как это отражается на улучшении работы приложений. В Aerospike, где индекс находится в памяти, а данные — на NVMe SSD, мы наблюдали следующие изменения: производительность при смешанном чтении/записи 50/50 увеличилась на 9.4%, при 100% чтении — на 21.4%, а при 100% записи — на 14.8%. 

Индекс в постоянной памяти Optane DC, данные на твердотельных накопителях NVMe.

Активность Операции с высокой пропускной способностью
Intel 8268
Операции с высокой пропускной способностью
Intel 8280
Чтение/Запись 50/50 2,000,000 2,252,000
Прочитано на 100% 2,200,000 2,630,000
Напишите 100% 1,740,000 1,980,000

Как видно из этих данных, перемещение индексов из DRAM в постоянную память оказало незначительное влияние на производительность транзакций. Однако в производственной среде это означает, что поскольку Aerospike может использовать постоянную память вместо DRAM для индексов, восстановление после перезагрузки узла базы данных происходит намного быстрее, так как большой пул DRAM не нужно задействовать на SSD для перестроения. Также достигается экономия средств в высокоплотных системах, поскольку тестируемые модули постоянной памяти Optane DC объемом 128 ГБ значительно дешевле, чем модули DIMM объемом 128 ГБ. 

Указатель и данные по постоянной памяти Optane DC

Активность Операции с высокой пропускной способностью
Intel 8268
Операции с высокой пропускной способностью
Intel 8280
Чтение/Запись 50/50 2,600,000 2,866,000
Прочитано на 100% 2,810,000 3,100,000
Напишите 100% 2,120,000 2,210,000

Как уже отмечалось, Aerospike анонсировала, но пока не предоставила общедоступную возможность запуска индексов и базы данных на постоянной памяти Intel Optane DC. Тем не менее, мы продемонстрировали текущую сборку кода, которая это позволяет, и она показывает увеличение производительности примерно на 33% или 600 000 операций в секунду при смешанной нагрузке. 

Заключение

Постоянная память Intel Optane DC — невероятно мощный инструмент в иерархии данных. Занимая промежуточное положение между оперативной памятью и хранилищем, технология постоянной памяти от Intel наконец-то стала общедоступной. Но простого доступа к новой технологии хранения недостаточно; приложения, способные использовать преимущества постоянной памяти изначально, получат огромное конкурентное преимущество. Гибкость, которую мы видим в Aerospike, показывает, что они были готовы с самого начала, обеспечив поддержку режима App Direct (блочное хранилище) для постоянной памяти Optane DC. Более того, они являются лидерами в мире NoSQL, когда речь идет о хранении как индексов, так и данных на модулях постоянной памяти. Хотя последнее пока еще находится на стадии становления, первые результаты выглядят очень многообещающими.

Аэроспайк

Обсудить этот отзыв

Подпишитесь на рассылку StorageReview

Взаимодействуйте со StorageReview

Рассылка | YouTube | Подкаст | iTunes / Spotify | Instagram | Twitter | TikTok | RSS-лента

Брайан Билер

Брайан проживает в Цинциннати, штат Огайо, и является главным аналитиком и президентом StorageReview.com.