EchoStreams GridStreams — это 2U высокоплотная четырехузловая серверная платформа, разработанная для высокопроизводительных центров обработки данных и поставщиков облачных услуг Open Computing Alliance. Каждый из четырех узлов оснащен материнской платой половинной ширины с поддержкой одного или двух процессоров Intel Xeon 2600 и местом для одного или двух слотов расширения PCIe в зависимости от конфигурации материнской платы. GridStreams предлагает блок из восьми отсеков для 2.5-дюймовых накопителей толщиной 7 мм в центре, предназначенных для совместного использования по два отсека на каждом из вычислительных узлов. Сконфигурированный для использования в центрах обработки данных, корпус и отсеки для накопителей обслуживаются с передней стороны и допускают «горячую» замену. На задней стороне корпуса расположены только вентиляторы и блок питания, предназначенные для замены в новых средах центров обработки данных, где стойка обеспечивает как питание 12 В постоянного тока, так и охлаждение корпуса сервера.
GridStreams присоединяется к тестовой лаборатории StorageReview в качестве ключевого компонента для тестирования высокопроизводительных массивов хранения данных на основе флэш-памяти в нашей новой среде тестирования баз данных и программных приложений. Эта высокопроизводительная система в форм-факторе 2U с четырьмя узлами обеспечит необходимые системные ресурсы для эффективного нагружения высокопроизводительных устройств хранения данных в наших предстоящих тестах приложений. Синтетические тесты не требуют (относительно говоря) больших системных ресурсов для выполнения и могут быть размещены на одном двухпроцессорном сервере даже при генерации 1-2 млн операций ввода-вывода в секунду в синтетических рабочих нагрузках. Потребление такого объема операций ввода-вывода от реального приложения требует экспоненциально больших ресурсов, большего количества ядер ЦП и оперативной памяти, чем может вместить один сервер. Для воспроизведения этих нагрузок в тестовой лаборатории StorageReview мы используем различные системы и конфигурации, включая четырехузловые EchoStreams GridStreams, чтобы обеспечить нам необходимые вычислительные ресурсы для запуска новейших тестов приложений.
Технические характеристики EchoStreams и GridStreams
- Высота корпуса: 2U
- Вычислительные узлы: 4
- Материнская плата: от половины ширины до 18 дюймов в глубину.
- Чипсет: Intel C602
- Процессор (на узел)
- Конфигурация: 2 x Intel E5-2640 (2.5 ГГц, 15 МБ кэш-памяти, 6 ядер)
- Поддерживаемые процессоры: 2 x Intel Socket 2011 / семейство Xeon E5-2600
- Память (на узел)
- Конфигурация: 128 ГБ (16 x 8 ГБ)
- Общее количество слотов: 16 (4 канала на каждый процессор, 8 слотов DIMM на каждый процессор)
- Максимальный объем памяти RDIMM — до 512 ГБ / максимальный объем памяти UDIMM — до 128 ГБ
- Объем хранилища (на узел)
- Конфигурация: 2 x 100 ГБ Micron RealSSD P400e
- 2 жестких диска или SSD-накопителя 2.5 дюйма толщиной 7 мм
- 2 порта SATA 6.0 Гбит / с
- Расширение ввода/вывода (на узел)
- Настроено: Mellanox ConnectX-3 QDR InfiniBand Сетевая карта 56 Гбит/с
- 1 x PCIe x16 (Gen3 x16 Link)
- Блок питания (на один узел): блок питания открытого типа мощностью 400 Вт.
- Охлаждение корпуса: 4 сменных 80-мм вентилятора
- Передняя панель (для каждого узла)
- Выключатель питания со светодиодом
- Найдите переключатель со светодиодом.
- Кнопка перезагрузки
- Светодиодный индикатор предупреждения системы
- Встроенные возможности подключения (на каждый узел)
- 2 x Intel Server-Class GbE LAN
- 1 x Управляющая локальная сеть с поддержкой iKVM
- Опциональный встроенный однопортовый модуль Mellanox ConnectX-3 QDR InfiniBand
Варианты оборудования
Сервер EchoStreams GridStreams Quad-Node основан на стандартном оборудовании, что означает, что варианты аппаратного обеспечения могут зависеть от потребностей покупателя. Система, предоставленная StorageReview, предлагает различные варианты подключения, от встроенных SAS и SATA до Ethernet и опционального встроенного InfiniBand. Каждый узел поддерживает одно- и двухпроцессорные конфигурации; в настоящее время EchoStreams поддерживает процессоры Intel Xeon E5-2600.
В шасси GridStreams локальное хранилище предоставляется по узлам; каждый узел подключается через разъем к двум из восьми отсеков для 7-мм SSD/HDD на передней панели. Каждый узел по определению независим и может быть быстро отключен и извлечен в случае необходимости обслуживания. Также доступна опция интегрированного RAID, позволяющая использовать конфигурацию RAID1 с двумя жесткими дисками или SSD для компенсации сбоя диска. В нашей лаборатории мы используем два SSD Micron P400e для каждого вычислительного узла в многооперационной среде без резервирования. Один SSD загружает узел с CentOS 6.3, а другой — с Windows Server 2012.
Для удовлетворения уникальных потребностей нашей лаборатории мы предоставили собственные сетевые карты Mellanox ConnectX-3 InfiniBand , которые занимают единственный слот PCIe 3.0 в каждом узле. Технология InfiniBand была выбрана специально за её высокую пропускную способность и низкую задержку, необходимые для наших новейших тестов приложений. По запросу заказчика каждая материнская плата может быть также оснащена встроенным интерфейсом Mellanox ConnectX-3 QDR, освобождая единственный слот PCIe для других целей. Это обеспечивает каждой системе большую гибкость и позволяет конечному пользователю максимально эффективно использовать каждый узел.
Мониторинг и управление
Каждый узел оснащен выделенным портом Ethernet для управления через интерфейс iKVM. iKVM поддерживает перенаправление консоли и удаленное размещение дисков, что позволяет администраторам настраивать или диагностировать системы удаленно, без необходимости прямого подключения к системе. Интерфейс GridStreams iKVM широко использовался при первоначальной настройке каждого узла для быстрого запуска платформы в тестовой лаборатории.
Входящее в комплект программное обеспечение для управления также поддерживает дистанционное управление питанием и предоставляет пользователю актуальную информацию о температуре, мощности и охлаждении. Пользователь может мгновенно проверить напряжение блока питания, скорость вращения вентиляторов, а также температуру материнской платы и процессора. Каждый из этих датчиков также может записывать данные, что позволяет отслеживать изменения условий от простоя до высокой нагрузки, чтобы убедиться, что система должным образом подготовлена к условиям окружающей среды.
Дизайн и сборка
Уникальная конструкция EchoStreams GridStreams размещает разъемы материнской платы и ввода-вывода на передней панели корпуса, а не на задней, что обеспечивает большую гибкость в центрах обработки данных, предназначенных для такой компоновки. Несмотря на то, что в лаборатории StorageReview используется традиционная стоечная среда, нам удалось интегрировать GridStreams с кабелями, проложенными через слоты в одной из наших стоек Eaton S-серии . Для подключения к сети узлы включают два порта Intel 1GbE, а также еще один порт 1GbE, предназначенный для управления iKVM. На передней панели также имеется вырез для одного порта QSFP InfiniBand, который есть на материнских платах, оснащенных этим дополнительным модулем.
Одна из наиболее уникальных особенностей конструкции сервера GridStreams — это блок дисков с возможностью горячей замены, расположенный на передней панели шасси. В то время как многие вычислительные узлы имеют два встроенных отсека для хранения данных, компания EchoStreams пошла другим путем. В шасси GridStreams каждый узел имеет прямой доступ к двум отсекам, обычно сконфигурированным в RAID1 для резервирования системных дисков. В нашей конфигурации используются твердотельные накопители Micron RealSSD P400e емкостью 100 ГБ для загрузки CentOS 6.3 и Windows Server 2012.
Система EchoStreams GridStreams разработана для удобного обслуживания в производственной среде: каждый узел установлен на выдвижном лотке, который можно легко выдвинуть, чтобы одним движением снять материнскую плату и интерфейс PCIe. Каждый лоток подключается к шасси с помощью быстроразъемных соединений питания и передачи данных. Такая конструкция позволяет пользователям устанавливать новое оборудование или обслуживать отдельные узлы вне стойки, небольшими порциями, без необходимости выносить всю систему из стойки.
Компания EchoStreams поставляет с сервером GridStreams направляющие с быстроразъемными соединениями, которые позволяют легко установить направляющие в стойку и переместить систему на нужное место. Хотя направляющие допускают некоторое выдвижение после установки сервера в стойку, они не выдвигаются полностью, чтобы обслуживать весь корпус без его полного демонтажа. Учитывая доступ к узлам на передней панели и доступ к вентиляторам на задней панели, пользователю потребуется полностью извлечь корпус из стойки только в случае отказа источника питания.
Охлаждение
EchoStreams GridStreams предлагает уникальную конструкцию охлаждения, включающую четыре 80-мм вентилятора, расположенных на задней панели корпуса. Эти четыре вентилятора обеспечивают исключительное охлаждение и воздушный поток для GridStreams, сначала обдувая карты PCIe и SSD-накопители или жесткие диски, затем процессоры, и, наконец, блоки питания. Скорость вращения вентиляторов регулируется каждым узлом, что позволяет устанавливать профили регулирования или фиксировать вентиляторы на полной скорости. В наших текущих лабораторных условиях мы поддерживаем 100% скорость вращения вентиляторов во всех тестах. В открытой вычислительной стойке, обеспечивающей как питание, так и охлаждение, вентиляторы можно снять с корпуса, чтобы стойка обеспечивала охлаждение корпуса GridStreams. Каждый из четырех вентиляторов может быть заменен на месте эксплуатации для обеспечения долгосрочного обслуживания. Чтобы снять вышедший из строя вентилятор, ослабьте два крепежных винта с помощью ручных затяжек и вытащите блок с задней стороны корпуса. Каждый вентилятор имеет быстросъемный разъем питания, поэтому нет необходимости возиться с проводами при снятии или установке нового вентилятора.
В ходе наших тестов при средней температуре в лаборатории 25.8°C температура процессора каждого узла в режиме ожидания составляла 42°C/45°C (спереди/сзади), а под нагрузкой повышалась до 68°C/90°C. После того, как лаборатория прогрелась до верхнего предела рабочей температуры EchoStreams GridStreams, мы измерили температуру каждого узла в режиме ожидания на уровне 47°C/51°C и под нагрузкой на уровне 74°C/90°C при температуре окружающей среды в стойке 31°C.
Мощность
Серверы GridStreams могут питаться от источников 100-240 В или от стандартного напряжения 12 В постоянного тока в центрах обработки данных Open Compute, оснащенных низковольтными стоечными блоками питания. Наша система включает четыре высокоэффективных блока питания мощностью 400 Вт каждый, работающих от сети 100-240 В, которые не резервируются между узлами. Это означает, что каждый узел имеет собственное подключение к источнику питания, и если один блок питания выходит из строя, блок питания, питающий этот конкретный узел, отключается. Клиенты, которым требуется более высокая эффективность или резервирование питания, могут использовать один из стоечных блоков питания EchoStreams на 12 В постоянного тока, поддерживающих несколько серверов GridStreams. RPC предлагает автоматически масштабируемые внутренние узлы питания N+1, которые адаптируются к спросу, включая или отключая питание для поддержания системы в состоянии, максимизирующем эффективность.
В ходе наших тестов с узлом, сконфигурированным с использованием одной 8-гигабайтной оперативной памяти DDR3 RDIMM, двух процессоров Intel Xeon E5-2640 и сетевой карты Mellanox ConnectX-3 InfiniBand, мы измерили энергопотребление в режиме ожидания на уровне 98 Вт, которое увеличилось до 232 Вт при полной нагрузке на процессор с помощью нашего блока распределения питания Eaton Advanced ePDU . В режиме ожидания коэффициент мощности составил 0.93, а под нагрузкой — 0.97.
Заключение
Вычислительная платформа EchoStreams GridStreams с четырьмя узлами в форм-факторе 2U присоединяется к лаборатории StorageReview в критически важный момент, поскольку мы масштабируемся на более крупные приложения для тестирования, требующие все более универсальных вычислительных решений для достижения наилучшей производительности приложений. GridStreams решает не только проблемы производительности, но и вопросы плотности размещения и специализированные требования членов Open Computing Alliance. Удобство обслуживания корпуса и блейд-серверов, а также расположенные спереди порты ввода-вывода делают GridStreams идеальным решением для поставщиков облачных услуг, у которых мало вариантов от традиционных поставщиков серверов. Кроме того, EchoStreams планирует продолжать развивать платформу, в конечном итоге отказавшись от вентиляторов и блоков питания, которые объединяются в интеллектуальные стойки, выполняющие эти функции в крупных центрах обработки данных.
Наши цели несколько менее амбициозны, чем цели крупного центра обработки данных, но в более скромном масштабе возможность моделирования реальных вычислительных и хранилищных сред имеет решающее значение для надлежащего тестирования и оценки. В этом отношении решение GridStreams становится бесценной частью нашей лаборатории, поскольку мы продолжаем расширять масштабы тестирования, касающегося хранилищ и экосистемы в целом.




Amazon