Supermicro AI Storage, soluția completă pentru fluxurile de date din aplicațiile AI și ML

Supermicro AI Storage este o arhitectură completă de stocare concepută pentru a susține fluxurile de date complexe ale aplicațiilor de inteligență artificială, machine learning și high-performance computing. Soluția oferă o combinație optimă între performanță, capacitate și eficiență energetică, permițând organizațiilor să gestioneze volume mari de date cu latență minimă și control total asupra resurselor.

Arhitectura este validată pentru procesoarele AMD EPYC și integrează trei niveluri de stocare: nivelurile all-flash și application sunt conectate prin InfiniBand NDR 400 Gb/s, iar migrarea între all-flash și object storage se face prin rețele Ethernet de 100 Gb/s. Fiecare nivel este proiectat pentru un echilibru între viteză, durabilitate și scalabilitate, susținând aplicațiile care necesită transferuri continue de date și timp de răspuns imediat.

Performanță ridicată pentru fluxuri de date AI

Nivelul all-flash gestionează datele active utilizând serverele Supermicro Petascale ASG-1115S-NE316R și ASG-2115S-NE332R. Acestea sunt echipate cu unități până la 16 unități NVMe E3.S per server (1U) sau 32 unități NVMe E3.S per server (2U), cu o capacitate totală de până la 245,76 TB, respectiv 491,52 TB, oferind o viteză constantă și o densitate ridicată a stocării. Platforma software Weka Data Platform permite transferul direct al datelor între stocare și GPU prin protocolul NVIDIA GPUDirect, eliminând etapele intermediare și reducând latența în procesarea modelelor AI.

Nivelul object funcționează ca un depozit de lungă durată, bazat pe software-ul Quantum ActiveScale. Acesta oferă compatibilitate S3, protecție prin erasure coding, criptare end-to-end și capacitate de extindere la scară petabyte. În acest nivel sunt utilizate servere Supermicro SSG-640SP-DE1CR90, fiecare cu până la 90 de unități SAS de 22 TB, optimizate pentru stocarea și recuperarea sigură a datelor istorice. Configurația testată include trei servere SuperStorage SSG-640SP-DE1CR90, oferind ≈ 5,94 PB brut (≈ 4,59 PB utilizabil).

Nivelul application este reprezentat de servere GPU de înaltă performanță, precum Supermicro AS-8125GS-TNHR, echipate cu procesoare AMD EPYC de generația a patra și module NVIDIA HGX H100 cu 8 GPU-uri. Configurația asigură peste 3,2 Tb/s de I/O și un transfer rapid între GPU-uri prin NVLink și NVSwitch, esențial pentru antrenarea modelelor de mari dimensiuni și procesarea paralelă a datelor.

Supermicro AI Storage, arhitectură modulară și eficiență energetică

Designul modular permite scalarea independentă a fiecărui nivel, astfel încât performanța și capacitatea pot fi adaptate nevoilor specifice ale organizației. Conectivitatea este asigurată prin NVIDIA ConnectX-7 SmartNICs și rețele InfiniBand NDR 400 Gb/s, care oferă transferuri neîntrerupte între serverele de calcul și cele de stocare.

Procesoarele AMD EPYC contribuie la eficiența sistemului prin performanță ridicată per watt și configurabilitate precisă în funcție de cerințele aplicației. Prin această abordare, arhitectura Supermicro AI Storage minimizează consumul energetic și reduce costurile operaționale fără a compromite viteza de procesare.

Aplicații practice și domenii de utilizare ale Supermicro AI Storage

Supermicro AI Storage este deja implementată în medii de producție care necesită procesarea rapidă a volumelor mari de date. Printre aplicațiile validate se numără detecția automată a defectelor în fabricarea semiconductorilor, cercetarea biomedicală și analiza genomică, dezvoltarea sistemelor de conducere autonomă, precum și modelarea geofizică și simulările climatice.

Prin integrarea unitară a stocării și procesării, arhitectura permite reducerea timpului de antrenare a modelelor AI, accelerarea ciclurilor de inovare și îmbunătățirea eficienței proceselor industriale sau științifice.

Management centralizat și continuitate operațională

Toate serverele din arhitectură pot fi administrate prin platforma SuperCloud Composer, care oferă monitorizare unificată și configurare rapidă. Interfața Redfish API asigură integrarea cu instrumente de management existente, permițând automatizarea fluxurilor de lucru și menținerea infrastructurii la parametri optimi. Prin redundanță completă, protecție împotriva erorilor și posibilitatea de replicare locală sau în cloud, Supermicro AI Storage garantează continuitate operațională și securitate sporită a datelor critice.

Supermicro AI Storage reprezintă o soluție scalabilă și eficientă pentru gestionarea fluxurilor de date complexe din aplicațiile AI și ML. Cu arhitectură pe trei niveluri, conectivitate InfiniBand de 400 Gb/s, integrare cu platformele Weka și ActiveScale și suport pentru procesoarele AMD EPYC, sistemul oferă performanță constantă și fiabilitate industrială. Weka Data Platform susține clustere între 8 și 1024 noduri și capacități de sute de PB, cu transfer direct NVMe-to-GPU prin GPUDirect™.Este o infrastructură concepută pentru organizațiile care transformă datele în decizii, inovație și avantaje competitive.