Pure Storage představuje platformu FlashBlade//EXA

Zatímco starší přístupy k ukládání dat brzdily potenciál umělé inteligence, platforma FlashBlade//EXA dokáže překonat úzké hrdlo v podobě metadat. Děje se tak díky osvědčené architektuře založené na úložných systémech FlashBlade, která je vytvořena pro masivně paralelní zpracování a obrovské množství operací s metadaty, což je typické pro rozsáhlé pracovní úlohy umělé inteligence a HPC. Předběžné testování ukázalo, že FlashBlade//EXA dosahuje rychlosti více než 10 terabajtů za sekundu při čtení v jediném jmenném prostoru, čímž jako nejvýkonnější úložné řešení v oboru nastavuje novou úroveň výkonu.

Architektura FlashBlade//EXA škáluje data a metadata nezávisle na sobě; téměř neomezené škálování poskytuje pomocí předpřipravených datových uzlů třetích stran, které umožňují vysoce škálovatelný výkon dle různých kritérií. Použití standardních protokolů a síťových technologií navíc snižuje složitost nasazení, správy i škálování.

Změna paradigmatu v oblasti ukládání dat

Výkonnější grafické procesory zvýšily rychlost i rozsah trénování základních modelů umělé inteligence. Prudký nárůst velikosti a sofistikovanosti modelů vede ke změně paradigmatu v požadavcích na úložiště. Řešení úložiště musí být schopno plynule držet krok s výpočetní náročností, objemem i rozmanitostí datových požadavků AI a HPC.

Starší úložné systémy nebyly navrženy tak, aby vyhovovaly současným nárokům umělé inteligence. Při použití pro rozsáhlé AI a HPC narážejí tyto systémy na kritická omezení v oblasti souběžného čtení a zápisu i výkonu při zpracování metadat. Nedokáží zajistit velmi nízkou latenci, asynchronní checkpointing (ochranu proti chybám) a předvídatelnou vysokou propustnost.

Moderní úložné řešení musí poskytovat masivně paralelní, disagregovanou (oddělující výkon a kapacitu) architekturu, která zajistí flexibilitu ve velkém měřítku. Pouze takové úložiště pomůže zrychlit tempo úloh AI.

Moderní architektura úložiště pro úlohy umělé inteligence a HPC

Starší architektury vysoce výkonných úložišť byly optimalizovány pro tradiční prostředí HPC s předvídatelnějšími a pravidelnějšími pracovními zátěžemi a se zaměřením na škálování hrubého výkonu. Dnešní pracovní zátěže AI jsou naproti tomu komplexní a multimodální (víceúčelové), zahrnují mj. práci s textem, obrázky i videem a zpracovávají je současně desítky tisíc grafických procesorů (GPU). Tento dramatický posun vyžaduje pokročilou optimalizaci metadat spolu s masivním škálováním výkonu. Jen tak je možné efektivně spravovat různé typy dat a vysokou souběžnost procesů.

Platforma FlashBlade//EXA je se svým bezkonkurenčním výkonem a správou metadat přímo navržena a připravena pro výzvy pracovních úloh AI. Disagregovaná, masivně paralelní architektura umožňuje flexibilitu úložiště ve velkém měřítku. Podniky se mohou přizpůsobit vyvíjejícím se multimodálním modelům, optimalizovat spolehlivost a eliminovat dobu nečinnosti, aby urychlily trénování a odvozování (inferenci) modelů AI a zároveň zlepšily využití GPU. Kombinace metadatového enginu Pure Storage a operačního systému Purity s cenově výhodnými a standardními datovými uzly navíc umožňuje podnikům dosáhnout bezkonkurenčního poměru cena/výkon.

Systém FlashBlade//EXA je postaven na desetileté inovaci společnosti Pure Storage a poskytuje transformační úložiště pro prostředí AI a HPC. Hlavní vlastnosti FlashBlade//EXA:

• Poskytne špičkový škálovatelný výkon a využije osvědčené možnosti práce s metadaty v produktech Pure Storage k maximalizaci efektivity celého toku AI a k minimalizaci zpoždění při workflow tréninkových a inferenčních úloh. Umožní výkon dle více kritérií („vícerozměrný“) s masivně paralelním zpracováním a škálovatelnými metadaty na vstupu i výstupu (IOPS) pro podporu vysokorychlostních požadavků na AI. Poskytování více než 10 terabajtů za sekundu v jediném jmenném prostoru přináší nejlepší výkon v oboru.
• Sníží složitost správy odstraněním úzkých míst v metadatech. Poskytne vysoký výkon, dostupnost a odolnosti metadat pro zpracování masivních datových sad AI bez nutnosti ručního ladění nebo dodatečné konfigurace.
• Urychlí inovace v oblasti AI díky vysoce konfigurovatelné a disagregované architektuře. Podpoří vyvíjející se prostředí AI a HPC pomocí standardních průmyslových protokolů. Bude zahrnovat vysokorychlostní síťové karty NVIDIA ConnectX, přepínače Spectrum, kabely LinkX a akcelerované knihovny pro síťovou komunikaci.

Očekává se, že platforma FlashBlade//EXA bude k dispozici v létě r. 2025.

„Platforma FlashBlade//EXA přináší masivně paralelní architekturu, která umožňuje nezávislé škálování dat a metadat a poskytuje zákazníkům bezkonkurenční výkon, škálovatelnost a přizpůsobivost pro největší a nejnáročnější datová prostředí na světě. Úložiště nyní zrychluje tempo vývoje rozsáhlých nasazení HPC a AI,“ uvedl Rob Lee, technologický ředitel společnosti Pure Storage.

„Data jsou palivem pro podnikové továrny na umělou inteligenci a přímo ovlivňují výkon a spolehlivost aplikací AI. Díky síťové technologii NVIDIA umožňuje platforma FlashBlade//EXA organizacím plně využít potenciál technologií AI při zachování bezpečnosti dat, škálovatelnosti a výkonu pro trénování modelů, jemné ladění a nejnovější požadavky na AI s agenty a argumentační odvozování,“ řekl Rob Davis, viceprezident pro síťové technologie úložišť ve společnosti NVIDIA.

„Ve společnosti Penguin Solutions jsme experti na pomoc našim zákazníkům při nasazování infrastruktury AI ve velkém měřítku. Víme, jak je to složité, a uvědomujeme si, že starší úložné systémy mohou narušit vysoce výkonnou infrastrukturu AI. Platforma FlashBlade//EXA je naproti tomu účelově vytvořena pro požadavky moderních pracovních zátěží AI a HPC. Poskytuje šířku pásma, škálovatelnou správu a konfigurovatelnou, disagregovanou architekturu potřebnou pro provoz dnešních velkých datových center. FlashBlade//EXA považujeme za ideální řešení pro intenzivní prostředí AI a aplikace HPC,“ řekl Pete Manca, prezident společnosti Penguin Solutions.

„Umělá inteligence narušila trh s úložišti dat. Starší úložná prostředí nejsou schopna zvládnout masivní paralelismus vyžadovaný AI a HPC. Moderní úložné a datové platformy musí nepřetržitě zásobovat daty grafické procesory a akcelerátory, které trénují rozsáhlé základní modely, a podporovat nejnáročnější pracovní zátěže. S vysoce výkonnými úložišti však přichází také složitost. V případě řešení FlashBlade//EXA využívá společnost Pure Storage své desetileté zkušenosti s uvolňováním potenciálu výkonu metadat a zároveň abstrahuje od složitosti spojené se správou těchto prostředí. Pokud platforma FlashBlade//EXA splní to, co slibuje, přinese organizacím všech velikostí skutečnou hodnotu,“ dodal Matt Kimball, viceprezident a hlavní analytik společnosti Moor Insights & Strategy.