StorageReview.com

Тестовая лаборатория StorageReview Enterprise

Для оценки корпоративного оборудования крайне важно иметь подходящую среду тестирования, чтобы получить общепринятые в отрасли показатели производительности и удобства использования. Мы сотрудничаем со многими ведущими поставщиками в различных сегментах рынка, включая вычислительные ресурсы, хранилища данных, сети и инфраструктуру, чтобы предлагать информативные оценки недавно выпущенного и следующего поколения оборудования. В сотрудничестве со StorageReview эти компании предоставляют информацию и отзывы о методологиях тестирования, а также передают оборудование в нашу лабораторию для включения в нашу разнообразную среду тестирования. С этой целью StorageReview создала одну из крупнейших независимых лабораторий тестирования оборудования в условиях, максимально приближенных к реальным, чтобы предоставить покупателям необходимую информацию для принятия обоснованного решения о покупке.

По мере нашего роста за эти годы расширялась и наша лаборатория, а также увеличивалось количество необходимого оборудования для бесперебойной работы. Недавно мы завершили модернизацию нашей существующей испытательной лаборатории, переехав в более просторное помещение с расширенными возможностями электроснабжения. Новая лаборатория предлагает многие из тех же элементов оборудования, которые мы использовали ранее, хотя и в гораздо большем количестве. Наши возможности электроснабжения значительно расширились, как и возможности по стабилизации электропитания и место в стойках. В тесном сотрудничестве с компанией Eaton Electrical мы расширили нашу основную лабораторию с трех до пяти стоек, перешли на новый источник бесперебойного питания Eaton BladeUPS мощностью 12 кВт и оптимизировали распределение электроэнергии с помощью измерительных и управляемых блоков распределения питания Eaton ePDU. Новый дизайн лаборатории также предлагает более удобную «городскую» атмосферу, ориентированную на выездные визиты, а также обеспечивает эффективный доступ для установки оборудования, сокращая время от сборки до установки в стойку в процессе оценки.

В дополнение к нашей новой лаборатории, компания Dell EMC стала замечательным партнером, помогая StorageReview расширяться за счет новых серверов класса Purley для проведения оценок производительности. Благодаря добавлению 12 высокопроизводительных серверов Dell EMC PowerEdge R740xd, наша лаборатория может использовать новейшие платформы хранения данных в качестве узкого места в тестировании, а не наше вычислительное оборудование. Как и в случае с предыдущими обновлениями серверов, мы также тесно сотрудничали с поставщиками компонентов, включая Intel, Mellanox, Emulex, Netgear, Brocade, Avago, Micron, Toshiba и других, чтобы адаптировать эти серверы под их соответствующие потребности в тестировании. Кроме того, Lenovo, HP и Supermicro предоставили серверы классов Haswell, Ivy Bridge и Sandy Bridge для дополнения других областей нашей лаборатории, предлагая широкий выбор платформ.

Хотя список оборудования в тестовой лаборатории StorageReview Enterprise постоянно расширяется и адаптируется к нашим повседневным потребностям, мы стараемся предоставить список устройств, которые в настоящее время установлены в стойках или имеются в наличии. Это оборудование также может быть использовано для специальных проектов или расширено в зависимости от требований или результатов оценки продукта.

Оборудование для стойки

Крупнейшими компонентами основной тестовой лаборатории StorageReview являются пять стоек Eaton 42U S-Series. Они позволяют нам размещать оборудование для хранения данных в его естественной среде, в непосредственной близости от источников питания, сетевого оборудования и вычислительных мощностей. Что касается условий окружающей среды, установка оборудования в стоечном исполнении также способствует обеспечению надлежащей циркуляции воздуха и поддержанию низких температур системы и компонентов.

В нашей текущей конфигурации мы разделили стационарную вычислительную инфраструктуру на центральные стойки и внешние стойки для оборудования, проходящего тестирование, чтобы минимизировать сбои во время установки и демонтажа оборудования в процессе проверки. Одна стойка выделена для основного оборудования стабилизации питания, а также для более временных платформ NAS, которые не требуют формальной установки в стойки для тестирования. Такая компоновка позволяет нам аккуратно организовать прокладку сетевых кабелей для различных типов межсоединений, что занимает большую часть пространства в задней части всех стоек.

С задней стороны каждой стойки вы можете увидеть блоки распределения питания (ePDU), установленные в соответствующих местах 0U, хотя основные кабели питания мы скрываем в кабельных каналах, встроенных в каждую стойку Eaton S-Series сверху. Большая часть нашего оборудования подключается через традиционные блоки распределения питания с индикацией уровня входного сигнала, в то время как для некоторых устройств мониторинг на уровне розеток осуществляется с помощью наших блоков распределения питания Eaton Advanced Monitored ePDU.

Наконец, у нас также есть управляемый ePDU, к которому подключаются более крупные массивы хранения данных или определенные коммутаторы для удаленного отключения питания после тестирования или переключения некоторых компонентов, которые могут нуждаться в периодическом перезапуске. Уделяя особое внимание эффективному энергопотреблению, минимизации затрат на электроэнергию и требований к охлаждению, мониторинг и управление питанием являются ключевыми задачами нашей лаборатории.

Для обеспечения надежной ежедневной работы вычислительных систем и хранилищ данных мы регулируем температуру в лаборатории с помощью дополнительных вытяжных вентиляторов, которые отводят горячий воздух из помещения, а также имеем в наличии два портативных чиллера для работы при гораздо более высоких тепловых нагрузках. Как и в любой испытательной или опытно-конструкторской среде, в отличие от традиционной производственной среды, потребности в охлаждении быстро меняются, а потребление электроэнергии и связанная с ним тепловая мощность значительно варьируются от одного испытания к другому.

Энергетическая инфраструктура

На уровне компонентов энергопотребление постоянно снижается с выходом каждого нового поколения продуктов, но на уровне центров обработки данных общая мощность, необходимая для работы множества коммутаторов, серверов, SAN и другого необходимого оборудования, постоянно растет. Лаборатория StorageReview предлагает широкий спектр вариантов подключения, подкрепленных трехфазным электропитанием, поступающим в наше здание.

Для организации такого масштабного распределения электроэнергии по отдельным розеткам мы используем блоки распределения питания Eaton ePDU и резервные батареи. Основная часть электроэнергии поступает через резервный источник питания Eaton BladeUPS, а ИБП Eaton 9PX6K находится в режиме ожидания для технического обслуживания и работы с большими нагрузками. Такая конфигурация гарантирует, что независимо от внешних условий кратковременные перебои в электроснабжении не будут мешать нашей повседневной работе. Мы также предусмотрели возможности для будущего роста, используя платформу BladeUPS, которая легко масштабируется для поддержки дополнительных модулей.

Благодаря круглосуточному мониторингу электропитания с использованием интеллектуальной системы управления питанием Eaton (IPM) мы обеспечиваем бесперебойное проведение тестов, стабильное электропитание и гарантируем, что аномальные условия электропитания не повлияют на результаты тестирования. Учитывая, что оценка оборудования занимает недели или месяцы, а отдельные тесты длятся несколько дней, обеспечение бесперебойной работы всего оборудования является важным аспектом при анализе корпоративного оборудования.

Для организации такого масштабного распределения электроэнергии по каждой розетке отдельно, в нашей лаборатории используется широкий спектр блоков распределения питания Eaton. В этот список входят усовершенствованный блок распределения питания с мониторингом (Advanced Monitored ePDU), три блока распределения питания G3 с измерением входного напряжения, а также один блок распределения питания G3 с управлением (G3 Managed ePDU). Питание подается через модуль питания Eaton Rack Power Module, который использует выходной сигнал от нашего резервного источника питания BladeUPS.

Каждый блок распределения питания (ePDU) подключается через собственный разъем L6-30R на 24 А на задней панели RPM, с многоуровневым мониторингом мощности для надлежащего балансирования нагрузки на каждой фазе питания.

Сетевая инфраструктура

Тестовая лаборатория StorageReview Enterprise Test Lab поддерживает все основные стандарты межсоединений, включая Ethernet 1 Гбит/с, 10 Гбит/с и 40/56 Гбит/с, Fibre Channel 8 Гбит/с и 16 Гбит/с, а также InfiniBand 56 Гбит/с. Эти стандарты предоставляются партнерами, среди которых Brocade, Emulex, Intel, Mellanox, Netgear и QLogic. Разветвленная сетевая инфраструктура позволяет нам проводить тестирование на всех основных платформах хранения данных, обеспечивая при этом поддержку самых быстрых интерфейсов.

Для взаимодействия с оборудованием по протоколам SSH, RDP или iKVM мы используем инфраструктуру Ethernet 1GbE, разделенную на несколько VLAN для разделения обычной офисной и лабораторной связи. Это включает в себя сеть класса C для нашего офиса, а также сеть класса B для лабораторных испытаний, что обеспечивает нам более 65 000 адресуемых хостов. Наша инфраструктура 1GbE предоставлена ​​компанией Netgear и имеет широкий диапазон масштабируемости — от полностью управляемого коммутатора ядра L3 до интеллектуальных коммутаторов для филиальных сегментов нашей сети. В основе этой сети лежит межсетевой экран Netgear UTM150, который управляет входящим и исходящим трафиком, распределяет нагрузку между несколькими интернет-соединениями и обеспечивает VPN-доступ к лаборатории. Для доступа в Интернет мы используем оптоволоконное соединение через сервис Fioptics от Cincinnati Bell.

Следующий шаг в развитии аппаратного обеспечения для межсоединений включает в себя Ethernet 10 Гбит/с и 40 Гбит/с от Mellanox, маршрутизация которого осуществляется через коммутаторы SX1036 и SX1024. Эта коммутационная матрица используется для тестирования устройств NAS и SAN от малых и средних предприятий до крупных компаний, которым требуется пропускная способность, способная легко перегрузить стандартные интерфейсы 1 Гбит/с. Мы также добавили поддержку устройств 10GBase-T с использованием новейших коммутаторов Netgear.

Для сетей хранения данных Fibre Channel SAN и устройств хранения данных у нас есть два коммутатора Brocade 6510 16Gb FC, а хост-серверы используют адаптеры HBA Emulex и QLogic 16Gb.

Для приложений с высокой пропускной способностью и высокой чувствительностью к задержкам мы также используем 56-гигабитную сеть Mellanox InfiniBand для тестирования флэш-накопителей и в качестве основы для новых тестов приложений, таких как наш бенчмарк MarkLogic для баз данных NoSQL.

Вычислительная инфраструктура

Вычислительная инфраструктура в тестовой лаборатории StorageReview Enterprise Test Lab разделена на две основные группы: отдельные серверы, используемые для тестирования производительности отдельных систем, и кластерные серверы для крупномасштабных приложений. У нас много физических хостов, работающих под управлением операционных систем Windows и Linux, включая Windows Server 2012 и 2012 R2, а также CentOS 6.2, 6.3 и 7.0. Что касается виртуализации, мы активно используем VMware в нашей лаборатории, применяя ESXi 5.5 и ESXi 6.0 в наших тестовых средах. В настоящее время все платформы, используемые в наших тестах, относятся к классу Intel Sandy Bridge или более новым, обеспечивая полную поддержку PCIe 3.0.

Хотя у нас есть ряд несовпадающих серверов, используемых для специализированных приложений, мы также располагаем большими группами серверов с согласованной конфигурацией. Наш новейший кластер включает 12 серверов Dell PowerEdge R730, оснащенных двумя процессорами E5-2690 v3 и 256 ГБ оперативной памяти DDR4. У нас также есть группа из 8 серверов Lenovo RD630, оснащенных двумя процессорами E5-2690 и 128 ГБ оперативной памяти DDR3. Наконец, у нас есть четырехузловой кластер, построенный на базе шасси EchoStreams GridStreams, каждый узел которого сконфигурирован с двумя процессорами E5-2640 и 64 ГБ оперативной памяти DDR3. Они используются для кластерных приложений баз данных, больших виртуализированных сред, а также для тестирования VDI.

По мере роста и развития лаборатории мы обязательно будем обновлять этот пост, добавляя информацию о новейшем оборудовании и более подробные сведения о том, как мы его используем.