Big data revolıýtsııasy: Huawei derekterdi saqtaýdyń jańa sheshimderin usyndy
BAKÝ. KAZINFORM – Baký qalasynda ótken «Derekterdi belsendirý: jasandy ıntellekt qoldanýǵa daıyn ozyq derekter ınfraqurylymyn qurý» taqyrybyna arnalǵan Huawei kompanııasynyń «Innovatsııalyq derekter ınfraqurylymy» forýmynda kompanııa Vıtse-prezıdenti jáne Derekterdi saqtaýǵa arnalǵan ónimderi serııasynyń prezıdenti doktor Pıter Chjoý, «Derekterdi belsendirý dáýirinde derekterdi saqtaýdy qaıta qaraý» taqyrybynda sóz sóıledi. Doktor Chjoý saqtaý júıeleriniń bolashaǵy kóptegen múmkindikterge, sonyń ishinde ýltra joǵary ónimdilikke, derekterdiń turaqtylyǵyna, jańa derekter paradıgmasyna, masshtabtaýǵa, uzaq merzimdilikke jáne derekter qurylymyna baılanysty bolatynyn boljady.
Generatıvti jasandy ıntellekttiń paıda bolýymen derekterdi saqtaýdyń senimdi sheshimderine degen suranys qazirgi tehnologııalyq ortada odan da ózekti bola bastady. Jasandy ıntellekttiń iri modelderiniń klasterlik aýqymy keńeıip, ondaǵan myń, tipti júzdegen myń grafıkalyq protsessorlardy qamtyǵandyqtan, bul keńeıý klasterdiń jıi isten shyǵýyna jáne oqý úzilisterine ákeldi. Baqylaý núkteleriniń derekterin birneshe ret jazýdyń jáne oqýdy qaıta bastaýdyń uzaq protsesi esepteý taqtalarynyń toqtap qalý ýaqytynyń ulǵaıýyna ákeledi, bul klasterdi paıdalanýdyń 50%-dan astamǵa tómendeýine ákeledi. Sonymen qatar, 2026 jylǵa qaraı jahandyq derekter ortalyqtarynyń energııa tutynýy 2022 jylǵy kórsetkishten 2,3 ese asyp, Japonııanyń jyldyq energııa tutynýyna teń bolady dep kútilýde. Derekter ortalyqtaryndaǵy qýattyń jartysynan kóbin jasandy ıntellekt tutynady.
Jasandy ıntellekt derekterdiń ónimdiligine, senimdiligine jáne paradıgmasyna ǵana emes, sonymen qatar masshtabtaýyna, uzaq merzimdiligine jáne derekter matrıtsasyna nazar aýdara otyryp, dástúrli derekterdi saqtaýdy ózgertýge tyrysady. Derekterdi belsendirý dáýirinde Huawei kelesi alty salada ozyq ınnovatsııalardy engizý arqyly derekterdi saqtaý júıesin qaıtaqaraıdy:
1. Asa joǵary ónimdilik: Huawei saqtaý júıeleriniń ónimdiligin dástúrli saqtaý ádisterimen salystyrǵanda 10 ese arttyrady. Saqtaý sonymen qatar Pbaıt/s ótkizý qabilettiligin jáne sekýndyna 100 mıllıon engizý/shyǵarý operatsııalaryn qoldaıdy, bul búkil generatıvti jasandy ıntellekt protsesiniń tıimdiligin aıtarlyqtaı arttyrady.
2. Derekterdiń turaqtylyǵy: Innovatsııalyq arhıtektýra men tehnologııalar 99,9999% deńgeıinde joǵary senimdilikti qamtamasyz etedi. Kiristirilgen bopsalaý baǵdarlamalaryn anyqtaý mehanızmi anyqtaý dáldigin 99,99% deıin arttyrady. Jasandy ıntellekt jattyǵýlary kezinde baqylaý núktesin qalpyna keltirý ýaqyty bir mınýttan az ýaqytqa qysqarady.
3. Jańa derekter paradıgmasy: Kópólshemdi tenzorlyq derekter ıntellektýaldy izdeý mehanızmi arqyly derekterdi jyldam izdeýge jáne irikteýge múmkindik beredi. Іzdeý nátıjelerimen tolyqtyrylǵan jaýaptardy qurý tehnologııasy (RAG) jasandy ıntellekttiń úlken modelderindegi jalǵan aqparatty joıý úshin kiriktirilgen bilim bazasymen jumys isteıdi.
4. Masshtabtaý: Derekterdi saqtaýdyń bir klasterin EB deńgeıine deıin keńeıtýge bolady jáne derekterdi qaıtalama saqtaýdy esepteý úshin ár mehanızmdi birneshe grafıkalyq protsessorlarmen, derekterdi óńdeý qurylǵylarymen (DPU) nemese neırondyq (NPU) protsessorlarmen tolyqtyrýǵa bolady.
5. Uzaqmerzimdilik: Aqparat tasyǵyshtar men derekterdi saqtaý qurylǵylary salasyndaǵy ınnovatsııalar erekshe energııa tıimdiligin (1 Vt/TB-dan az) jáne derekterdi ornalastyrý tyǵyzdyǵyn (1 PB/birlikten astam) qamtamasyz etti.
6. Derekter matrıtsasy: Qoımanyń metaderekterin basqarý jáne izdeý múmkindikteri jahandyq kóriný men derekterdi basqarýdy, sondaı-aq 10 ese tıimdirek derekterdiń utqyrlyǵyn qamtamasyz etedi.
Bul tańqalarlyq ınnovatsııalar OceanStor A serııaly Huawei derekterdi saqtaý modelderine myqty qosymsha bolyp tabylatyn joǵary ónimdi OceanStor A800 protsessoryn shyǵarýǵa negiz saldy. JI-ge beıimdelgen OceanStor A800 JI klasterin paıdalanýdy 30%-ǵa arttyra alady, al ónimdilikke keletin bolsaq, ol sekýndyna joǵary ótkizý qabilettiligi men engizý-shyǵarý jyldamdyǵyn qamtamasyz etedi, bul osy sııaqty uqsas jetkizýshilerge qaraǵanda tórt jáne segiz ese joǵary. Masshtabtaýǵa keletin bolsaq, OceanStor A800 512 kontrollerdi, sondaı-aq eń kóbi 4096 esepteý taqtasyn paıdalana otyryp, EB deńgeıine deıin masshtabtaýdy qoldaıdy. Keńistik pen energııany únemdeýge keletin bolsaq, 1 PB/Birlik deńgeıinde derekterdi ornalastyrýdyń erekshe tyǵyzdyǵyn qamtamasyz etedi, al energııa tıimdiligi 0,7 Vt/TB quraıdy. Ol sonymen qatar vektorlyq ındeksi, tenzorlyq derekteri jáne RAG bar jańa derekter paradıgmasyn usynady. Derekterdiń turaqtylyǵyna keletin bolsaq, bopsalaý baǵdarlamalaryn anyqtaý dáldigi 99,9%-dan 99,99%-ǵa deıin kóterildi. Sonymen qatar, derekter matrıtsasynyń fýnktsııasy aqparattyq aktıvterdi basqarýdy jeńildetedi.
Sonymen qatar, aqparat tasymaldaýshylar salasyndaǵy ınnovatsııalar turaqty damýdyń qozǵaýshy kúshi bolyp tabylady. Huawei jaqynda shyǵarǵan úlken syıymdylyqtaǵy qatty deneli jınaqtaǵyshtar dál sondaı dısk ólshemimen 10 ese úlken syıymdylyqty qamtamasyz etedi, bul derekter ortalyǵynyń qýat tutynýyn odan ári tómendetýge múmkindik beredi. Bir dıskige 128 TB syıymdylyǵy bar jańa qatty deneli jınaqtaǵyshtar árbir PBaıt derekterdi saqtaý kezinde uqsas jetkizýshilerdiń qatty deneli jınaqtaǵyshtaryna qaraǵanda 88%-ǵa az saqtaý ornyn jáne 92%-ǵa az qýatty paıdalanady.
Jasandy ıntellektti qoldanýǵa daıyn bolý úshin kásiporyndardyń derekteri daıyn bolýy kerek. DME-ge engizilgen Omni-Dataverse jahandyq faıldyq júıesi korporatıvtik aqparattyq resýrstardy ártúrli aımaqtarda kórinetin, basqarylatyn jáne mobıldi etedi, osylaısha kásiporyndar úshin jasandy ıntellekt derekter kóliniń senimdi saqtaý bazasyn jasaıdy.
Qorytyndylaı kele, doktor Pıter Chjoý Huawei-diń derekterdi belsendirý dáýirindegi klıentterdiń tapsyrmalary men suranystaryna nazar aýdara otyryp, derekterdi saqtaý júıesin qaıta qaraýǵa jáne klıentter úshin qundylyqty arttyrý úshin jasandy ıntellekt qoldaýymen ozyq derekter ınfraqurylymyn qurýǵa degen umtylysyn atap ótti.
