[Кина, Шенжен, 14. јул 2023.] Данас је Хуавеи представио своје ново решење за складиштење вештачке интелигенције за еру великих модела, пружајући оптимална решења за складиштење за основну обуку модела, обуку модела специфичну за индустрију и закључивање у сегментираним сценаријима, тако ослобађање нових АИ способности.
У развоју и имплементацији апликација великих размера, предузећа се суочавају са четири главна изазова:
Прво, време потребно за припрему података је дуго, извори података су раштркани, а агрегација је спора и потребно је око 10 дана за претходну обраду стотина терабајта података. Друго, за мултимодалне велике моделе са масивним текстуалним и сликовним скуповима података, тренутна брзина учитавања великих малих датотека је мања од 100МБ/с, што резултира ниском ефикасношћу учитавања скупа за обуку. Треће, честа подешавања параметара за велике моделе, заједно са нестабилним платформама за обуку, узрокују прекиде тренинга отприлике свака 2 дана, што захтева да механизам Цхецкпоинт настави обуку, при чему опоравак траје један дан. На крају, високи прагови имплементације за велике моделе, сложено подешавање система, изазови планирања ресурса и коришћење ГПУ ресурса често испод 40%.
Хуавеи се усклађује са трендом развоја вештачке интелигенције у ери великих модела, нудећи решења прилагођена различитим индустријама и сценаријима. Он представља ОцеанСтор А310 Дееп Леарнинг Дата Лаке Стораге и ФусионЦубе А3000 Супер-конвергентни уређај за обуку/закључивање. ОцеанСтор А310 Дееп Леарнинг Дата Лаке Стораге циља и на основне и на индустријске сценарије великих модела језера података, постижући свеобухватно АИ управљање подацима од агрегације података, претпроцесирања до обуке модела и апликација за закључивање. ОцеанСтор А310, у једном 5У рацк-у, подржава пропусни опсег од 400 ГБ/с и до 12 милиона ИОПС, са линеарном скалабилношћу до 4096 чворова, омогућавајући беспрекорну међупротоколну комуникацију. Глобални систем датотека (ГФС) олакшава интелигентно ткање података у регионима, поједностављујући процесе агрегације података. Рачунарство са скором меморијом остварује претходну обраду скоро података, смањујући кретање података и побољшавајући ефикасност претходне обраде за 30%.
ФусионЦубе А3000 Супер-конвергентни уређај за обуку/закључивање, дизајниран за сценарије обуке/закључивања великих модела на нивоу индустрије, служи за апликације које укључују моделе са милијардама параметара. Он интегрише ОцеанСтор А300 чворове за складиштење високих перформанси, чворове за обуку/закључивање, опрему за пребацивање, софтвер за АИ платформу и софтвер за управљање и рад, пружајући великим партнерима модела са плуг-анд-плаи искуством постављања за испоруку на једном месту. Спреман за употребу, може се поставити у року од 2 сата. Чворови за обуку/закључивање и складиштење могу се независно и хоризонтално проширити како би се уклопили у различите захтеве модела. У међувремену, ФусионЦубе А3000 користи контејнере високих перформанси како би омогућио обуку више модела и задатке закључивања за дељење ГПУ-а, повећавајући искоришћеност ресурса са 40% на преко 70%. ФусионЦубе А3000 подржава два флексибилна пословна модела: Хуавеи Асценд Оне-Стоп Солутион и једно-стоп решење независног партнера са софтвером за отворено рачунарство, умрежавање и АИ платформу.
Хуавејев председник линије производа за складиштење података, Џоу Јуефенг, изјавио је: „У ери великих модела, подаци одређују висину интелигенције вештачке интелигенције. Као носилац података, складиштење података постаје кључна основна инфраструктура за велике моделе вештачке интелигенције. Хуавеи Дата Стораге ће наставити да иновира, пружајући разноврсна решења и производе за еру великих модела вештачке интелигенције, сарађујући са партнерима како би подстакли АИ оснаживање у широком спектру индустрија.”
Време поста: 01.08.2023
