Pure Storage představuje úložnou platformu FlashBlade//EXA pro AI a další náročné úlohy
Zatímco starší přístupy k ukládání dat brzdily potenciál umělé inteligence, platforma FlashBlade//EXA dokáže překonat úzké hrdlo v podobě metadat. Děje se tak díky osvědčené architektuře založené na úložných systémech FlashBlade, která je vytvořena pro masivně paralelní zpracování a obrovské množství operací s metadaty, což je typické pro rozsáhlé pracovní úlohy umělé inteligence a HPC. Předběžné testování ukázalo, že FlashBlade//EXA dosahuje rychlosti více než 10 terabajtů za sekundu při čtení v jediném jmenném prostoru, čímž jako nejvýkonnější úložné řešení v oboru nastavuje novou úroveň výkonu.
Architektura FlashBlade//EXA škáluje data a metadata nezávisle na sobě; téměř neomezené škálování poskytuje pomocí předpřipravených datových uzlů třetích stran, které umožňují vysoce škálovatelný výkon dle různých kritérií. Použití standardních protokolů a síťových technologií navíc snižuje složitost nasazení, správy i škálování.
Změna paradigmatu v oblasti ukládání dat
Výkonnější grafické procesory zvýšily rychlost i rozsah trénování základních modelů umělé inteligence. Prudký nárůst velikosti a sofistikovanosti modelů vede ke změně paradigmatu v požadavcích na úložiště. Řešení úložiště musí být schopno plynule držet krok s výpočetní náročností, objemem i rozmanitostí datových požadavků AI a HPC.
Starší úložné systémy nebyly navrženy tak, aby vyhovovaly současným nárokům umělé inteligence. Při použití pro rozsáhlé AI a HPC narážejí tyto systémy na kritická omezení v oblasti souběžného čtení a zápisu i výkonu při zpracování metadat. Nedokáží zajistit velmi nízkou latenci, asynchronní checkpointing (ochranu proti chybám) a předvídatelnou vysokou propustnost.
Moderní úložné řešení musí poskytovat masivně paralelní, disagregovanou (oddělující výkon a kapacitu) architekturu, která zajistí flexibilitu ve velkém měřítku. Pouze takové úložiště pomůže zrychlit tempo úloh AI.
Moderní architektura úložiště pro úlohy umělé inteligence a HPC
Starší architektury vysoce výkonných úložišť byly optimalizovány pro tradiční prostředí HPC s předvídatelnějšími a pravidelnějšími pracovními zátěžemi a se zaměřením na škálování hrubého výkonu. Dnešní pracovní zátěže AI jsou naproti tomu komplexní a multimodální (víceúčelové), zahrnují mj. práci s textem, obrázky i videem a zpracovávají je současně desítky tisíc grafických procesorů (GPU). Tento dramatický posun vyžaduje pokročilou optimalizaci metadat spolu s masivním škálováním výkonu. Jen tak lze efektivně spravovat různé typy dat a vysokou souběžnost procesů.
Platforma FlashBlade//EXA je se svým bezkonkurenčním výkonem a správou metadat přímo navržena a připravena pro výzvy pracovních úloh AI. Disagregovaná, masivně paralelní architektura umožňuje flexibilitu úložiště ve velkém měřítku. Podniky se mohou přizpůsobit vyvíjejícím se multimodálním modelům, optimalizovat spolehlivost a eliminovat dobu nečinnosti, aby urychlily trénování a odvozování (inferenci) modelů AI a zároveň zlepšily využití GPU. Kombinace metadatového enginu Pure Storage a operačního systému Purity s cenově výhodnými a standardními datovými uzly navíc umožňuje podnikům dosáhnout bezkonkurenčního poměru cena/výkon.
Systém FlashBlade//EXA je postaven na desetileté inovaci společnosti Pure Storage a poskytuje transformační úložiště pro prostředí AI a HPC. Hlavní vlastnosti FlashBlade//EXA:
- Poskytne špičkový škálovatelný výkon a využije osvědčené možnosti práce s metadaty v produktech Pure Storage k maximalizaci efektivity celého toku AI a k minimalizaci zpoždění při workflow tréninkových a inferenčních úloh. Umožní výkon dle více kritérií („vícerozměrný“) s masivně paralelním zpracováním a škálovatelnými metadaty na vstupu i výstupu (IOPS) pro podporu vysokorychlostních požadavků na AI. Poskytování více než 10 terabajtů za sekundu v jediném jmenném prostoru přináší nejlepší výkon v oboru.
- Sníží složitost správy odstraněním úzkých míst v metadatech. Poskytne vysoký výkon, dostupnost a odolnosti metadat pro zpracování masivních datových sad AI bez nutnosti ručního ladění nebo dodatečné konfigurace.
- Urychlí inovace v oblasti AI díky vysoce konfigurovatelné a disagregované architektuře. Podpoří vyvíjející se prostředí AI a HPC pomocí standardních průmyslových protokolů. Bude také zahrnovat vysokorychlostní síťové karty NVIDIA ConnectX, přepínače Spectrum, kabely LinkX a akcelerované knihovny pro síťovou komunikaci.
Dostupnost
Očekává se, že platforma FlashBlade//EXA bude k dispozici v létě 2025.
