StorageReview.com

Кластеры OpenShift/K8s в облачной среде Supermicro Rack Plug and Play

Предприятие  ◇  Корпоративное хранилище

Когда речь заходит о Kubernetes (K8s), часто на ум приходят такие термины, как «облачный масштаб», «неограниченная масштабируемость» и даже «гигантский». Однако в реальности значительная часть ИТ-индустрии начинает работу с гораздо меньших сред K8s для разработки и производства. Чтобы обеспечить удобство, гибкость и масштабируемость на уровне облака, а также добиться экономии средств при использовании локальной и гибридной облачной инфраструктуры, компания Supermicro представила готовое решение, использующее их передовое оборудование в сочетании с высококачественной интеграцией программного обеспечения. В этой статье мы рассмотрим, из чего состоит это решение Supermicro Rack Plug and Play, как оно работает и каковы экономические преимущества использования собственной платформы K8s по сравнению с облачной.

Сервер Supermicro Rack Plug and Play 2U

Облачная инфраструктура Supermicro Rack Plug and Play

Любая установка Kubernetes состоит из четырех компонентов: вычислительных ресурсов, хранилища данных, сети и программного обеспечения. Чтобы охватить как можно больше клиентов, компания Supermicro разработала различные конфигурации систем и стоек на основе этой программы. В аппаратной части этого решения используются проверенные процессоры Intel Xeon третьего поколения и постоянная память Optane (PMem), о которых мы поговорим позже. Архитектура их решения состоит из различных классов вычислительных узлов, соответствующих отраслевому стандарту:

  • Бастионный узел и виртуальная машина SCC Для запуска развертывания на одном из узлов был создан бастионный узел для выполнения установки OpenShift. На бастионном узле установлена ​​операционная система Red Hat Enterprise Linux, на которой размещены скрипты, файлы и инструменты для развертывания компактного кластера. На этом узле также размещена виртуальная машина для размещения SuperCloud Composer, предназначенного для управления и мониторинга кластера OpenShift.
  • Мастер Узел Предоставляет высокодоступную и отказоустойчивую платформу для API-сервера, сервера управления контроллерами и т. д. Для управления кластером K8s и планирования его работы требуется несколько главных узлов, чтобы гарантировать отсутствие единой точки отказа в кластере K8s.
  • Узел инфраструктуры (Инфра) Изолирует рабочие нагрузки инфраструктуры, обеспечивая разделение и абстракцию для целей технического обслуживания и управления.
  • Узел приложения запускает контейнеризированные приложения.
  • Узел OpenShift Data Foundation (ODF) ODF (ранее известный как OpenShift Container Storage [OCS]) предоставляет программно-определяемое хранилище (SDS), обеспечивающее постоянное место хранения данных по мере запуска и остановки контейнеров в разных средах. ODF также поддерживает файловое, блочное или объектное хранилище.

Компания Supermicro разработала компактный кластер из 3 узлов на базе архитектуры X12 BigTwin и включила в него системы X12 Ultra для предоставления дополнительной емкости хранения в рамках программы JumpStart, о которой мы расскажем в этой статье. Для кластера начального уровня хранилище Ceph не требуется.

X12 BigTwin — это 4-узловая система форм-фактора 2U с двумя процессорами Intel Xeon Platinum 6338N. Она содержит 72 вычислительных ядра Intel, 4 ТБ памяти Intel Optane PMem, 512 ГБ оперативной памяти DDR4 и 184 ТБ хранилища NVMe на каждом узле. Для подключения предусмотрены интерфейсы 100 Гбит/с для NVMe-oF, поддерживающие постоянное хранилище на 3 узлах, и 25 Гбит/с для взаимодействия с кластером объектного хранилища. Три сервера X12 Ultra являются узлами хранения, каждый из которых может иметь до 1.1 ПБ объектного хранилища и до 80 вычислительных ядер. Одним из наиболее подходящих вариантов для этого решения является сфера медиа и развлечений для потоковой передачи видео, доставки контента и аналитических целей.

Схема подключения оборудования Supermicro Rack Plug and Play

Как уже упоминалось выше, в системе BigTwin используется память Intel Optane PMem Series 200 и традиционная память DDR4. Благодаря этому Supermicro может максимально экономично увеличить объем памяти, поскольку Optane PMem стоит примерно вдвое дешевле DDR4 (за ГБ).

Следует отметить, что в X12 BigTwin используется общая система питания и охлаждения для снижения эксплуатационных расходов. Компания Supermicro поделилась с нами конкретным примером использования, предоставленным одним из их клиентов в финансовом секторе. Им удалось добиться экономии электроэнергии более чем на 20% с системами X12 BigTwin по сравнению с системами X12 1U, поскольку система BigTwin потребляла всего 675 Вт энергии по сравнению с 980 Вт, которые потребляла система X12 1U при выполнении той же рабочей нагрузки.

Большие системы подходят не всем, и компактный кластер Supermicro идеально подходит для организаций, ищущих готовую к развертыванию среду DevOps начального уровня. Supermicro предлагает бесплатную программу удаленного доступа Rack Plug and Play JumpStart для компактного кластера, позволяющую ИТ-специалистам и разработчикам тестировать свои рабочие процессы, оценивать удобство использования и производительность. X12 BigTwin можно настроить для масштабирования объектного хранилища с помощью SYS-620BT-DNC8R, двух узлового решения форм-фактора 2U с поддержкой 3.5-дюймовых SAS/SATA-накопителей. В этой конфигурации для оптимизации производительности и соотношения цены и качества могут не потребоваться интерфейсы 100 Гбит/с. Компактный кластер также доступен в виде готового стоечного решения с предустановленным Red Hat OpenShift, о котором мы подробнее расскажем в этой статье.

Серверы Supermicro Rack Plug and Play, готовые к работе в стойке.

Если потребности уменьшатся или, наоборот, возрастут, компания Supermicro предлагает эталонные архитектуры для решений в области периферийных, региональных и центральных центров обработки данных, которые позволяют легко масштабировать систему до необходимой мощности.

Компания Supermicro разработала еще четыре конфигурации Rack Plug and Play – Edge, Performance, High Density и Extreme (в порядке убывания количества вычислительных ядер Intel).

Практический опыт работы с облачными решениями Supermicro Rack Plug and Play

Чтобы лучше понять, какое оборудование входит в каждую конфигурацию, мы изучили спецификацию компонентов для Edge (артикул: SRS-OPNSHFT-3N ), которая состоит из трех главных узлов, трех узлов приложений и трех совместно размещенных узлов ODF. Для минимизации количества узлов инфраструктурные узлы исключены, а их функции распределены между остальными узлами.

Это решение включает 72 вычислительных ядра Intel, 768 ГБ оперативной памяти и 138 ТБ хранилища (из которых 46 ТБ — NVMe-хранилище). Для обеспечения отказоустойчивости предусмотрена двойная сеть 10 Гбит/с (всего четыре) для управления и передачи данных через два коммутатора SX350X-12. Все это занимает всего 6U места в стойке и может питаться от двух стандартных электрических цепей 120 В, которые обычно встречаются в офисах и домах.

Компания Supermicro рассматривает свою конфигурацию для периферийных вычислений как средство запуска ИИ/машинного обучения на периферии сети, ориентированное на такие рынки, как розничная торговля, здравоохранение, производство и энергетика. Мы также считаем, что это станет отличным недорогим решением для небольших команд разработчиков и распределенных сетей доставки контента.

Спецификация компонентов для высокопроизводительной версии (SRS-OPNSHFT-10) включает три главных узла, три размещенных рядом инфраструктурных узла, три узла приложений и три узла ODF. Это решение имеет 288 вычислительных ядер Intel, 3 ТБ оперативной памяти и 138 ТБ NVMe-хранилища. Для обеспечения отказоустойчивости предусмотрена сеть 1 Гбит/с (всего четыре канала) для управления и сеть 25 Гбит/с для передачи данных, коммутируемая через два коммутатора SX350X-12, при этом трафик управления проходит через коммутатор SSE-G3648BR. Все это занимает 42U места в стойке.

Высокоплотная версия (SRS-OPNSHFT-20) имеет 336 вычислительных ядер Intel, 3 ТБ оперативной памяти и 18 узлов. Это высокоплотное решение SuperRack представляет собой масштабируемую версию компактного кластера, но использует два узла SYS-220BT-HNTR (система 2U с 4 узлами) для контроллеров и инфраструктурных узлов, а также узел SYS-620BT-DNC8R (система 2U с 2 узлами) в качестве узлов приложений.

Более того, модель Extreme (SRS-OPNSHFT-30) имеет 640 вычислительных ядер Intel, 8 ТБ оперативной памяти и 22 узла. Вот полные характеристики всех четырех моделей Supermicro.

Программное обеспечение Supermicro Rack Plug and Play

Программное обеспечение, предустановленное для всех версий, — это чрезвычайно популярная платформа Red Hat OpenShift , корпоративная платформа Kubernetes с полной автоматизацией для управления развертыванием Kubernetes. Red Hat — активный сторонник и участник сообщества Kubernetes, и OpenShift пользуется заслуженным уважением в этом сообществе. OpenShift позволяет не только управлять системой на системном уровне, но и самостоятельно предоставлять ресурсы командам разработчиков. Одним из преимуществ OpenShift является то, что если вы решите использовать ресурсы публичного облака, вы сможете использовать те же рабочие процессы интерфейса. Это очень важно, поскольку сокращает время обучения и предотвращает ошибки, возникающие из-за изменения рабочих процессов.

Вкратце, OpenShift — это очень зрелый продукт, поскольку он был разработан более десяти лет назад и все это время являлся платформой как услуга (PaaS) от Red Hat, а также полностью открытым исходным кодом. Его программные компоненты основаны на тщательно отобранном стеке, использующем лучшие и наиболее популярные компоненты. Для оркестрации и планирования он использует Kubernetes в сочетании с Docker в качестве среды выполнения контейнеров и, конечно же, Red Hat в качестве операционной системы.

Ключевым компонентом программного стека является OpenShift Container Platform (OCP) и Red Hat Enterprise Linux CoreOS (RHCOS), обе из которых поставлялись вместе с CoreOS (компанией, которую Red Hat приобрела в 2018 году).

RHCOS — это урезанная версия Red Hat Enterprise Linux, специально разработанная для использования в контейнерах. OCP — это платформа как услуга (PaaS), созданная для контейнеров Linux, которая управляется и координируется Kubernetes. Обе системы прошли полное тестирование Red Hat и широко используются на практике. Это ключевые компоненты для снижения затрат на развертывание на физическом оборудовании в рамках данного решения.

Для ускорения разработки и развертывания OpenShift включает в себя фреймворк Operator. В терминологии Kubernetes оператор — это программное обеспечение, которое инкапсулирует знания, необходимые для развертывания и управления приложением в Kubernetes. Фреймворк Operator — это набор инструментов и компонентов Kubernetes, которые помогают в разработке операторов и централизованном управлении в многопользовательском кластере. OpenShift имеет операторы для популярных приложений, таких как Redis и Cassandra. Использование операторов позволяет значительно сэкономить время и избежать проблем при развертывании приложения, независимо от уровня квалификации пользователя.

SuperCloud Composer

Одной из скрытых жемчужин Supermicro является SuperCloud Composer (SCC) — единый интерфейс, позволяющий отслеживать и управлять серверами, а также развертывать операционные системы на компьютерах. Он имеет API, позволяющий другим использовать его интеграцию, совместимую с Redfish, и охватывает широкий спектр задач, от управления питанием до управления активами. Это часть секретного ингредиента, дополняющего комплексное решение за счет поддержки на аппаратном уровне.

Для работы с компактным кластером Supermicro требуются аналогичные условия, как и для стандартной установки OpenShift от Red Hat. К таким условиям относятся, помимо прочего, следующие:

  • Обеспечение наличия сетевого подключения.
  • Настройте или установите балансировщики нагрузки для API и Ingress.
  • Для кластера созданы DNS-записи.
  • Любые инструменты командной строки, которые вам могут понадобиться
  • Резервирование DHCP-адресов или использование статических IP-адресов

Компактный кластер легко развертывается, если выполнены все необходимые предварительные условия. В будущем Supermicro планирует выпустить сценарий Ansible для организации процесса настройки, включая конфигурацию аппаратного RAID 1 для загрузочных NVMe M.2 дисков и установку кластера OpenShift. По сути, это позволит реализовать автоматическую настройку без участия пользователя, что обычно встречается только у независимых поставщиков программного обеспечения с OEM-устройствами.

Узел D физически расположен внутри корпуса форм-фактора 2U, но изолирован в отдельную сеть BMC для администраторов Supermicro, активно поддерживающих программу JumpStart. Этот узел имеет сетевую карту 1 Гбит/с для «моста подготовки» для виртуальной машины SCC. Исходя из топологии сети, программа JumpStart позволяет удаленным пользователям безопасно получать доступ к виртуальной машине SCC и кластеру OpenShift для изучения возможностей кластера, включая демонстрацию видео по запросу, работающую на Pod-модуле. Схема демонстрации показана ниже.

Облако Supermicro Rack Plug and Play Программа быстрого старта

Инвестиции в новое решение всегда сопряжены с неопределенностью в отношении совместимости с рабочими нагрузками и рабочими процессами. Чтобы развеять эти опасения, компания Supermicro разработала надежную программу быстрого старта (Jumpstart ) , которая позволяет потенциальным клиентам протестировать решение перед его покупкой.

Стоимость

Публичные облака процветали благодаря распространенному заблуждению о том, что они дешевле, чем локальные развертывания; однако во многих ситуациях владение оборудованием оказывается более привлекательным, если сравнивать стабильную ценовую политику с текущими затратами, связанными с облачным решением. Да, у облачных провайдеров есть преимущество масштабируемости, позволяющее амортизировать затраты на персонал на тысячах узлов. Однако Supermicro компенсирует это, используя OpenShift, где Red Hat взяла на себя бремя тестирования и поддержки решения. Это означает, что клиентам Supermicro не нужно проверять обновления и исправления для своих систем, что может быть трудоемким и, следовательно, дорогостоящим процессом.

Стабильность ценообразования также является фактором, играющим на руку Supermicro. Безусловно, существует не одна история о том, как потребители публичного облака превысили свой бюджет из-за чрезмерного потребления ресурсов. В действительности, в случае с высокоавтоматизированным решением, таким как Kubernetes, простая ошибка конфигурации может привести к появлению множества приложений, потребляющих ресурсы публичного облака. В отличие от этого, в случае с локальным решением это просто невозможно.

Это решение не только конкурентоспособно по стоимости с публичными облаками, но и предлагает Supermicro другие способы снижения затрат, например, использование подписки на Red Hat Open Data Foundation (ODF) на физическом оборудовании вместо запуска на гипервизоре, поскольку это обычно дешевле и позволяет избежать налога на гипервизор.

Мы спросили компанию Supermicro о том, как клиенты могут приобрести OpenShift (программный компонент их решения), и они ответили, что его можно либо включить в единый счет от компании, либо клиенты могут приобрести его напрямую у Red Hat.

Компания Supermicro любезно предоставила нам расчеты, касающиеся разницы в стоимости развертывания OpenShift на физическом оборудовании или с использованием гипервизора. Мы были удивлены, насколько можно сэкономить, запуская OpenShift на физическом оборудовании по сравнению с гипервизором. Поскольку приложениям Kubernetes требуется хранилище, они также привели оценку, согласно которой для приложений, нуждающихся в файловой системе, достаточно всего 4 ядер для блочного хранилища объектных данных.

Цифры показывают, что запуск OpenShift на физическом оборудовании может быть в 3–9 раз экономичнее, чем запуск на гипервизоре, в зависимости от объема вычислительных и дисковых ресурсов, необходимых для кластера. Для оценки экономии средств были проанализированы два сценария. В нижнем диапазоне учитывались 16 подписок OCP (32 ядра) и 2 ODF (4 ядра). В верхнем диапазоне учитывались все 64 ядра на узле как для вычислительных ресурсов, так и для хранения данных. Каждый узел потенциально может поддерживать 250 Pod-ов по умолчанию. Supermicro рекомендует тщательно планировать развертывание OpenShift. Хорошей отправной точкой является этот документ по планированию OpenShift 4.8.

Управление данными

Вопрос локализации данных — сложная тема. Многие компании и правительства предъявляют очень строгие требования к месту хранения данных. При использовании локального решения вы и ваши аудиторы можете быть уверены, вплоть до физического контакта, где именно хранятся данные. Физический доступ к хранилищу в публичном облаке просто невозможен — и точка.

Заключение 

Компания Supermicro определила рыночную нишу и, как это часто случалось в прошлом, создала надежное и доступное решение для ее заполнения. В данном случае речь идет о локальном кластере Kubernetes, использующем проверенные процессоры Intel Xeon третьего поколения для обеспечения надежности в сочетании с технологией Intel Optane PMem для снижения затрат без ущерба для производительности, а также проверенное программное обеспечение Red Hat K8s. Эти готовые решения позволяют клиентам быстро развернуть кластер K8S, поскольку они поставляются компанией Supermicro уже с разработанной, проверенной и протестированной архитектурой.

Их решение можно развернуть за несколько дней, а не за недели, как это обычно требуется для развертывания собственного решения, и, поскольку решение Supermicro прошло тщательное тестирование на совместимость, вы не столкнетесь с какими-либо проблемами, которые могут привести к значительным временным или финансовым затратам при внедрении новых технологий. Что касается стоимости, то ценовая модель решения Supermicro предотвращает неприятный сюрприз в виде завышенных цен, который может возникнуть при использовании публичного облака.

Независимо от ваших потребностей, Supermicro разработала решение, которое вас удовлетворит: от модели Edge, предназначенной для работы с ИИ/машинным обучением на периферии сети или для небольших команд разработчиков, до модели Extreme, разработанной для региональных и центральных центров обработки данных для производственных нагрузок и способной заменить развертывание в публичном облаке.

Для получения более подробной информации о решении Supermicro K8s вы можете посетить их веб-портал здесь.

Ознакомьтесь с программой Jumpstart , чтобы получить практический опыт работы с этим решением.

Взаимодействуйте со StorageReview

Рассылка | YouTube | Подкаст | iTunes / Spotify | Instagram | Twitter | TikTok | RSS-лента

Том Фентон

Том Фентон обладает богатым практическим опытом в сфере ИТ, накопленным за последние 27 лет работы с различными технологиями, при этом последние 20 лет он специализируется на виртуализации и хранении данных. Ранее он работал в VMware в качестве старшего разработчика курсов, инженера по решениям и в группе конкурентного маркетинга. Он также работал старшим инженером по валидации в The Taneja Group, где возглавлял лабораторию валидации и сыграл важную роль в создании практики vSphere Virtual Volumes. Его аккаунт в Твиттере: @vDoppler

Предыдущая статья:

Следующая статья: