[Kína, Shenzhen, 14. júlí, 2023] Í dag afhjúpaði Huawei nýja gervigreindargeymslulausn sína fyrir tímum stórra módelanna, sem býður upp á bestu geymslulausnir fyrir grunnlíkanaþjálfun, iðnaðarsértæka líkanaþjálfun og ályktanir í sundurliðuðum atburðarásum, þannig losar um nýja gervigreindargetu.
Við þróun og innleiðingu stórra líkanaforrita standa fyrirtæki frammi fyrir fjórum stórum áskorunum:
Í fyrsta lagi er tíminn sem þarf til að undirbúa gögn langur, gagnaheimildir eru dreifðar og samansöfnun er hæg og tekur um 10 daga að forvinna hundruð terabæta af gögnum. Í öðru lagi, fyrir fjölþætt stór módel með gríðarstór texta- og myndgagnasöfn, er núverandi hleðsluhraði fyrir stórar litlar skrár minni en 100MB/s, sem leiðir til lítillar skilvirkni við hleðslu þjálfunarsetts. Í þriðja lagi valda tíðar breytubreytingar fyrir stórar gerðir, ásamt óstöðugum þjálfunarpöllum, truflunum á þjálfun á um það bil 2ja daga fresti, sem gerir Checkpoint vélbúnaðinn nauðsynlega til að hefja þjálfun á ný, þar sem bati tekur meira en einn dag. Að lokum, háir innleiðingarþröskuldar fyrir stórar gerðir, flókin kerfisuppsetning, áskoranir í tímaáætlun auðlinda og nýting GPU auðlinda oft undir 40%.
Huawei er í takt við þróun gervigreindar á tímum stórra módelanna og býður upp á lausnir sem eru sérsniðnar fyrir mismunandi atvinnugreinar og aðstæður. Það kynnir OceanStor A310 Deep Learning Data Lake Storage og FusionCube A3000 Training/Inference Super-Converged tækið. OceanStor A310 Deep Learning Data Lake Storage miðar að bæði grunn- og iðnaðarstigi stórra líkanagagnavatnasviðsmynda og nær yfirgripsmikilli gervigreindargagnastjórnun frá gagnasöfnun, forvinnslu til líkanaþjálfunar og ályktunarforritum. OceanStor A310, í einum 5U rekki, styður leiðandi 400GB/s bandbreidd og allt að 12 milljónir IOPS, með línulegri sveigjanleika allt að 4096 hnúta, sem gerir óaðfinnanleg samskipti milli samskiptareglur. Alþjóðlega skráarkerfið (GFS) auðveldar snjöllum gagnavefningu á milli svæða, og hagræðir gagnasöfnunarferlum. Near-geymsla computing gerir sér grein fyrir forvinnslu nálægt gögnum, dregur úr gagnaflutningi og bætir skilvirkni forvinnslu um 30%.
FusionCube A3000 Training/Inference Super-Converged tækið, hannað fyrir þjálfun/ályktunarsviðsmyndir fyrir stórar gerðir, kemur til móts við forrit sem fela í sér líkön með milljarða stika. Það samþættir OceanStor A300 hágæða geymsluhnúta, þjálfunar-/ályktunarhnúta, skiptibúnað, gervigreindarvettvangshugbúnað og stjórnunar- og rekstrarhugbúnað, sem veitir samstarfsaðilum stórra gerða upplifun af uppsetningu og spilun fyrir afhending á einum stað. Tilbúið til notkunar, það er hægt að dreifa því innan 2 klukkustunda. Hægt er að stækka bæði þjálfunar-/ályktunarhnúta og geymsluhnúta sjálfstætt og lárétt til að passa við ýmsar módelskalakröfur. Á sama tíma notar FusionCube A3000 afkastamikil ílát til að gera mörgum gerðum kleift að þjálfa og álykta verkefni til að deila GPU, sem eykur auðlindanýtingu úr 40% í yfir 70%. FusionCube A3000 styður tvö sveigjanleg viðskiptamódel: Huawei Ascend One-Stop lausn og þriðja aðila samstarfsaðila lausn með opinni tölvu, netkerfi og gervigreindarvettvangshugbúnaði.
Forseti Huawei gagnageymslu vörulínu, Zhou Yuefeng, sagði: „Á tímum stórra módelanna ákvarða gögn hæð gervigreindar. Sem gagnaflutningsaðili verður gagnageymsla lykilinnviðir gervigreindar í stórum stíl. Huawei Data Storage mun halda áfram að gera nýsköpun, bjóða upp á fjölbreyttar lausnir og vörur fyrir tímabil gervigreindar stórra gerða, í samstarfi við samstarfsaðila til að knýja fram gervigreindarvald í fjölmörgum atvinnugreinum.
Pósttími: Ágúst-01-2023
