Firma VAST Data nawiązała współpracę z firmą Microsoft, aby oferować system operacyjny VAST AI (AI OS) natywnie na platformie Microsoft Azure. Celem tej integracji jest stworzenie wydajnej, skalowalnej infrastruktury AI w chmurze, koncentrującej się na agentowej sztucznej inteligencji i przepływach pracy w modelu produkcyjnym.
System operacyjny VAST AI OS będzie działał bezpośrednio w infrastrukturze platformy Azure, umożliwiając firmom korzystanie ze znanych narzędzi, mechanizmów zarządzania, zabezpieczeń i rozliczeń platformy Azure. Celem jest osiągnięcie ujednoliconego zarządzania, spójnej wydajności i niezawodności na poziomie platformy Azure, przy jednoczesnym rozszerzeniu lokalnych funkcji VAST na środowisko platformy Azure z akceleracją GPU.
Usługi VAST jako natywna oferta platformy Azure
Klienci platformy Azure będą mieli dostęp do kompleksowego stosu usług danych VAST, który obejmuje ujednolicone funkcje przechowywania, katalogowania danych i bazy danych. Platforma została zaprojektowana z myślą o obsłudze złożonych procesów AI w środowiskach lokalnych, hybrydowych i wielochmurowych bez konieczności przeprojektowywania aplikacji.
Pozycjonując VAST jako natywną usługę w chmurze Azure, firmy mogą skonsolidować usługi danych AI na jednej logicznej platformie. Takie podejście ma na celu minimalizację wyzwań operacyjnych i zapewnienie spójnej wydajności, zarządzania danymi i bezpieczeństwa, niezależnie od miejsca ich przechowywania.
Jeff Denworth, współzałożyciel VAST Data, opisał partnerstwo jako sposób na stworzenie infrastruktury AI, która łączy wydajność, skalowalność i łatwość obsługi dla sztucznej inteligencji opartej na agentach. Podkreślił, że współpraca z platformą Azure umożliwia klientom ujednolicenie danych i procesów AI za pomocą znanych narzędzi VAST, teraz wzmocnionych globalną obecnością i elastycznością platformy Azure.
Agentyczna sztuczna inteligencja z InsightEngine i AgentEngine
Integracja jest zoptymalizowana pod kątem sztucznej inteligencji opartej na agentach, w której autonomiczni agenci stale działają na danych w czasie rzeczywistym. System operacyjny VAST AI na platformie Azure zaoferuje dwie kluczowe usługi:
- Silnik VAST InsightEngine: Zapewnia wydajne, wysokowydajne usługi obliczeniowe i bazodanowe dostosowane do zadań związanych z danymi AI, w tym wyszukiwanie wektorowe, generowanie wspomagane wyszukiwaniem (RAG) oraz przygotowywanie danych. Uruchamianie obliczeń blisko danych z ulepszonym wejściem/wyjściem i indeksowaniem zmniejsza opóźnienia i zwiększa przepustowość.
- Silnik agenta VAST: Zarządza autonomicznymi agentami w strumieniach danych w czasie rzeczywistym w środowiskach hybrydowych i wielochmurowych. Umożliwia to ciągłe przetwarzanie AI w globalnie rozproszonych zbiorach danych bez konieczności ręcznego przygotowywania danych lub przepisywania potoków.
Razem usługi te ustanawiają system operacyjny VAST AI OS na platformie Azure jako warstwę kontroli i wykonywania dla przepływów pracy AI opartych na agentach w środowiskach lokalnych i wielochmurowych.
Wydajność w skali dla konstruktorów modeli
System operacyjny VAST AI OS został zaprojektowany z myślą o utrzymaniu aktywnych klastrów GPU i CPU podczas treningu i wnioskowania. W systemie Azure będzie on korzystał z maszyn wirtualnych Laos VM Series i przyspieszonej sieci Azure Boost.
Kluczowe cechy wydajnościowe obejmują:
- Usługi transmisji danych o wysokiej przepustowości, umożliwiające pełne wykorzystanie możliwości procesorów GPU i CPU
- Inteligentne buforowanie często używanych zestawów danych w celu skrócenia czasu opóźnień
- Zoptymalizowane pod kątem metadanych ścieżki wejścia/wyjścia umożliwiające obsługę zadań AI wymagających małych plików i dużej ilości metadanych
Celem jest zapewnienie niezawodnej wydajności od wczesnych testów aż po wdrożenia produkcyjne w wielu regionach, udostępniając twórcom modeli spójną warstwę danych w miarę ich rozwoju.
Hybrydowa sztuczna inteligencja z przestrzenią danych o wielkości eksabajtów
Dla klientów z hybrydowymi lub lokalnymi systemami VAST, przestrzeń danych VAST DataSpace o wielkości eksabajta oferuje ujednoliconą globalną przestrzeń nazw dla różnych lokalizacji i chmur. Ten pojedynczy logiczny widok eliminuje silosy danych i konieczność ręcznego kopiowania danych.
Firmy mogą rozszerzać zadania akcelerowane przez GPU z lokalizacji na platformę Azure bez typowej migracji danych lub rekonfiguracji. Procesy AI można rozszerzyć, wykorzystując tę samą przestrzeń nazw, a VAST będzie zarządzać rozmieszczeniem i ruchem danych w tle.
Zunifikowany dostęp do danych i natywna baza danych AI
Zintegrowana platforma Azure obejmuje:
- Magazyn danych VAST: Obsługuje protokoły plików (NFS, SMB), obiektów (S3) i bloków z jednej platformy. Taka konfiguracja umożliwia starszym zadaniom, zadaniom analitycznym i zadaniom sztucznej inteligencji współdzielenie tych samych danych bez konieczności korzystania z oddzielnych stosów pamięci masowej.
- Baza danych VAST: Łączy ono w sobie szybką wydajność transakcji, prędkość zapytań na poziomie magazynu danych i ekonomiczność jeziora danych, umożliwiając uruchamianie mieszanych obciążeń na jednej platformie, zamiast oddzielnych systemów OLTP, OLAP i jeziora danych.
Elastyczna i ekonomiczna architektura
Architektura DASE (Disaggregated, Shared-Everything) firmy VAST umożliwia niezależne skalowanie zasobów obliczeniowych i pamięci masowej w ramach platformy Azure. Klienci mogą dostosowywać zasoby w miarę zmian modeli, zestawów danych i zapotrzebowania, zamiast nadmiernie przydzielać zasoby powiązanym systemom.
Wbudowana funkcja redukcji podobieństwa zmniejsza również zapotrzebowanie na pamięć masową poprzez usuwanie zduplikowanych wzorców danych, szczególnie w przypadku dużych modeli, osadzeń i wersji zbiorów danych. W rezultacie powstaje bardziej ekonomiczna podstawa dla rozbudowanej infrastruktury AI.
Zgodność z planem działania Microsoftu w zakresie sztucznej inteligencji
Aung Oo, wiceprezes ds. Azure Storage w firmie Microsoft, stwierdził, że VAST AI OS on Azure zapewnia wydajną, skalowalną platformę opartą na maszynach Laos VM Series z funkcją Azure Boost, rozszerzając lokalne potoki AI na infrastrukturę Azure obsługiwaną przez GPU. Zwrócił uwagę na obecne zainteresowanie VAST wśród twórców modeli skalowalnością, wydajnością i natywnymi funkcjami AI. Wspomniał, że partnerstwo powinno uprościć operacje, obniżyć koszty i przyspieszyć proces analizy.
W miarę jak Microsoft rozwija infrastrukturę AI i projekty oparte na niestandardowych układach scalonych, VAST będzie współpracować z zespołem Azure, aby sprostać przyszłym potrzebom platformy. To partnerstwo pozycjonuje VAST jako kluczową platformę danych i AI, dążącą do obsługi przyszłych systemów AI za pomocą systemu operacyjnego skoncentrowanego na skalowalności, wydajności i łatwości obsługi.
Amazon