Společnost NetApp se dohodla na akvizici společnosti PEAK:AIO, softwarové společnosti z Manchesteru ve Spojeném království, jejíž metadata a paralelní práce s NFS podle NetAppu urychlí její plán rozvoje infrastruktury umělé inteligence. NetApp plánuje spojit služby metadat PEAK:AIO a technologii paralelních jmenných prostorů s ONTAP s cílem vytvořit sdílené úložiště škálovatelné spolu s rostoucími clustery GPU v architektuře, která má podle něj podporovat biliony souborů a multiexabajtová nasazení. Podmínky nebyly zveřejněny a transakce podléhá obvyklým podmínkám uzavření a schválení regulačními orgány.
„Cloudy s umělou inteligencí potřebují vysoce výkonné sdílené úložiště, které se dá škálovat společně s rostoucími clustery GPU a zároveň si zachovává odolnost, bezpečnost a provozní jednoduchost, na kterých organizace závisí,“ řekl George Kurian, generální ředitel společnosti NetApp. „S PEAK:AIO naplňujeme naši vizi nové generace infrastruktury umělé inteligence, která kombinuje škálovatelné služby metadat s osvědčeným základem ONTAP, aby pomohla zákazníkům maximalizovat efektivitu infrastruktury a podporovat umělou inteligenci v hyperscale cloudu.“
Metadata, která se sama škálují
NetApp popisuje architekturu, která odděluje metadata od dat, takže služby metadat se mohou škálovat nezávisle na kapacitě. PEAK:AIO přináší škálování metadat, globální jmenný prostor a paralelní přístup NFS pro masivně paralelní úlohy a NetApp přináší ONTAP jako datovou základnu s odolností, zabezpečením a provozní vyspělostí, kterou jeho zákazníci již používají. NetApp uvádí, že tato kombinace má snížit zablokování GPU související s daty a poskytnout stávajícím zákazníkům ONTAP jasnou cestu vývoje.
Nejdůležitější součástí práce PEAK:AIO v oblasti metadat je pNFS Lattice , open-source, škálovatelný server metadat pro NFSv4.2 a pNFS Flex Files, který PEAK:AIO inicioval ve spolupráci s Los Alamos National Laboratory a Carnegie Mellon University a publikoval s podporou Linux Foundation. Lattice rozděluje autoritu metadat, koordinaci protokolů a umisťování dat do samostatných vrstev: několik démonů serveru metadat v uživatelském prostoru sdílí úložiště metadat RonDB, klienti se ke správnému serveru metadat dostanou prostřednictvím standardních odkazů NFSv4 a datové servery jsou nezáplatované instance Linuxu knfsd obsluhující rozvržení flexibilních souborů přes TCP nebo RDMA. Kód je na GitHubu pod licencí MIT, s jedním souborem GPL-2.0, kde odkazuje na RonDB. PEAK:AIO jej označuje jako předběžnou verzi pro výzkum, vývoj a testování, zatím nedoporučenou pro produkční prostředí. LANL a PEAK:AIO mají naplánováno představení Lattice na konferenci vývojářů SNIA v Santa Claře od 28. do 30. září, včetně sekce Birds of a Feather, kterou povede Gary Grider z LANL.
„NetApp a PEAK:AIO spojuje společné přesvědčení, že éra umělé inteligence vyžaduje zásadně nový přístup k datové infrastruktuře,“ řekl Mark Klarzynski, technický ředitel a zakladatel PEAK:AIO. „Na spojení s NetApp nás nejvíce nadchla příležitost propojit naši kulturu inovací s dosahem, rozsahem a důvěrou zákazníků globálního lídra.“
Co jsme viděli u PEAK:AIO
PEAK:AIO sledujeme pozorně již léta a společným vláknem je software, který ze standardních serverů hodně vytěží. V roce 2023 dosáhl server AI Data Server od PEAK:AIO rychlosti 80 GB/s z jediného úložného uzlu. V roce 2024 jsme navštívili londýnskou zoologickou zahradu, kde Zoologická společnost Londýna provozuje dva systémy NVIDIA DGX proti 1.2 PB úložiště PEAK:AIO pro monitorování divoké zvěře, a probrali jsme jeho práci s MONAI a Solidigm na udržování lékařské AI v prostorách nemocnic. V roce 2025 jsme testovali 2U server AI Data Server s rychlostí 1.5 PB a 120 GB/s na hardwaru Dell a 61TB SSD discích Solidigm, následovaný platformou Token Memory Platform založenou na CXL pro opětovné použití mezipaměti KV.
V naší recenzi serveru Dell PowerEdge R7725xd si server udržel rychlost přes 300 GB/s na svých 24 discích Gen5 NVMe lokálně a PEAK:AIO poskytoval 160 GB/s přes NVMe-oF RDMA dvěma klientům na čtyřech 200Gb linkách s náhodným sledováním šířky pásma pro čtení, které bylo sekvenční od 32K bloků výše. PEAK:AIO jsme také použili k vytvoření cíle NVMe-oF pro naši recenzi NVIDIA DGX Spark . Když se Brian setkal s Klarzynskim na SC25 v rámci podcastu #144 , hovořil o tom, že PEAK:AIO by měl zůstat nezávislý, místo aby se stal funkcí v rámci produktové řady velkého dodavatele, a o modelu, kde zákazníci začínají s úložištěm na GPU serveru a přidávají uzly do rostoucího jmenného prostoru, jakmile se jejich projekty umělé inteligence osvědčí. Verze NetApp se zaměřuje na stejná metadata a práci s jmenným prostorem.
Generální ředitel společnosti PEAK:AIO Roger Cummings ve svém příspěvku na LinkedInu, v němž oznámil dohodu, jasně vyjádřil přístup společnosti: „Nezačali jsme s technologií a nehledali problém, který bychom měli řešit. Začali jsme s problémy, se kterými se zákazníci potýkali, a kolem nich jsme stavěli.“
Kam se NetApp posouvá
Společnost NetApp loni v říjnu spustila portfolio AFX AI , které spojilo systém pro ukládání dat s nativní paralelní architekturou a AI Data Engine. V červenci koupila společnost DataPelago , aby mohla provozovat zpracování dat pomocí GPU tam, kde se data již nacházejí. Díky tomu je PEAK:AIO druhou akvizicí zaměřenou na umělou inteligenci za posledních zhruba dva měsíce. NetApp zatím neuvedla, kam se technologie PEAK:AIO integruje jako první, ale nezávislé škálování metadatových služeb, globální jmenný prostor a paralelní přístup NFS před ONTAP se zdají být přirozeným doplňkem pro desagregovaný design AFX.
Jakmile se dohoda uzavře, budeme sledovat, zda NetApp ponechá vývoj Lattice v otevřeném prostředí; jedná se o mladý projekt s licencí MIT, který inženýři z LANL prezentují tento měsíc na SDC. PEAK:AIO si také získal přízeň mezi nemocnicemi, univerzitami a výzkumnými laboratořemi, které si nedokázaly ospravedlnit velké pole za jediným GPU serverem, a vydání NetAppu je napsáno pro cloudy s umělou inteligencí v hyperscale, takže bude stát za to sledovat, jak se obě strany tohoto spektra vyvinou. Líbí se nám, co PEAK:AIO vybudoval, a prodejní dosah NetAppu a instalovaná základna ONTAP dávají tomuto dílu cestu do mnohem více datových center, než by to PEAK:AIO dokázal sám o sobě.
Amazon