70. lecke képe.png
Skálázható tárolórendszer vállalkozások számára, amely zökkenőmentes adatáramlást tesz lehetővé a tárolási és a mesterséges intelligencia modellek között. Fotó: Midjourney

A mesterséges intelligencia megváltoztatja a vállalkozások adattárolási és -hozzáférési módját. Ez azért van, mert a hagyományos adattároló rendszereket úgy tervezték, hogy néhány felhasználó egyszerű parancsait egyszerre kezeljék, míg a mai, több millió ügynökkel rendelkező MI-rendszereknek folyamatosan és párhuzamosan kell hozzáférniük és feldolgozniuk hatalmas mennyiségű adatot.

A hagyományos tárolórendszerek ma már sok összetett réteggel rendelkeznek, ami lelassítja a mesterséges intelligenciát, mivel az adatoknak több rétegen kell áthaladniuk, mielőtt elérik a GPU-t – a grafikus processzort, amelyet a mesterséges intelligencia „agyának” tekintenek.

A Cloudian – amelyet Michael Tso (az MIT-ről) és Hiroshi Ohta társalapítója alapított – segít az adattárolásnak lépést tartani a mesterséges intelligencia forradalmával. A cég egy skálázható tárolórendszert fejlesztett ki vállalatok számára, amely lehetővé teszi a zökkenőmentes adatáramlást a tárolási és a mesterséges intelligencia modellek között.

Ez a rendszer csökkenti a bonyolultságot azáltal, hogy párhuzamos számítástechnikát alkalmaz a tárolásra, a mesterséges intelligencia funkcióit és adatait egyetlen párhuzamos feldolgozási platformon konszolidálja, amely képes nagyméretű adathalmazok tárolására, lekérésére és feldolgozására, nagy sebességű közvetlen kapcsolattal a tárolás, valamint a GPU-k és CPU-k között.

A Cloudian integrált tárolási és számítási platformja leegyszerűsíti a kereskedelmi méretű MI-eszközök fejlesztését, miközben olyan tárolási infrastruktúrát biztosít a vállalkozásoknak, amely képes lépést tartani a MI-boommal.

„Amit az emberek gyakran figyelmen kívül hagynak a mesterséges intelligenciával kapcsolatban, az az, hogy minden az adatokról szól” – mondta Tso. „A mesterséges intelligencia teljesítményét nem lehet 10%-kal növelni pusztán 10%-kal több adattal, még tízszeres adatmennyiséggel sem – ezerszeres adatmennyiségre van szükség. Az adatok könnyen kezelhető módon történő tárolása, miközben a számítások közvetlenül beágyazódnak, hogy a bevitel után azonnal feldolgozhatók legyenek anélkül, hogy át kellene helyezni őket – ebbe az irányba halad az iparág.”

Objektumtárolás és mesterséges intelligencia

Jelenleg a Cloudian platformja objektumtárolási architektúrát használ, ahol minden típusú adat – dokumentumok, videók , szenzoradatok – egyetlen objektumként, metaadatokkal tárolódik. Az objektumtárolás hatalmas mennyiségű adatot képes kezelni egy lapos struktúrában, ami ideális strukturálatlan adatokhoz és mesterséges intelligencia rendszerekhez, de korábban lehetetlen volt adatokat közvetlenül a mesterséges intelligencia modellbe küldeni anélkül, hogy először a számítógép memóriájába másolta volna azokat – ami késleltetést és magas energiafogyasztást okozott.

Tavaly júliusban a Cloudian bejelentette, hogy kibővítette objektumtároló rendszerét egy vektoros adatbázissal, amely azonnali mesterséges intelligencia általi használatra kész formátumban tárolja az adatokat. Az adatok betöltése után a Cloudian valós idejű vektorszámításokat végez az adatokon, hogy támogassa a mesterséges intelligencia által támogatott eszközöket, például ajánlómotorokat, keresőmotorokat és mesterséges intelligencia által támogatott asszisztenseket.

A Cloudian bejelentette az NVIDIA-val kötött partnerségét is egy olyan tárolórendszer fejlesztésére, amely közvetlenül a vállalat GPU-ival működik. A Cloudian szerint ez az új rendszer gyorsabb mesterséges intelligencia általi feldolgozást tesz lehetővé és csökkenti a számítási költségeket.

„Az NVIDIA körülbelül másfél évvel ezelőtt keresett meg minket, mert a GPU-k csak akkor hasznosak, ha folyamatos adatfolyam „táplálja” őket” – mondta Tso. „Manapság az emberek rájönnek, hogy könnyebb mesterséges intelligenciát vinni az adatokba, mint hatalmas adatblokkokat mozgatni. A tárolórendszerünk számos mesterséges intelligencia funkciót integrál, így az adatokat a gyűjtés és tárolás helyszíne közelében tudjuk elő- és utófeldolgozással ellátni.”

MI által preferált tárhely

A Cloudian világszerte körülbelül 1000 vállalkozásnak segít maximalizálni adataik értékét, beleértve a nagyobb gyártókat, pénzintézeteket, egészségügyi intézményeket és kormányzati szerveket.

Például a Cloudian tárolóplatformja egy nagy autógyártót támogat, amely mesterséges intelligenciát használ annak meghatározására, hogy mikor van szükség karbantartásra az egyes gyártórobotokon. A Cloudian együttműködik az Egyesült Államok Nemzeti Orvostudományi Könyvtárával is kutatási cikkek és szabadalmak tárolásában, valamint a Nemzeti Rákkutató Adatbázissal tumor DNS-szekvenciák – olyan gazdag adatkészletek – tárolásában, amelyeket a mesterséges intelligencia feldolgozhat az új kezelések vagy felfedezések kutatásának támogatása érdekében.

„A GPU-k fantasztikus hajtóerőt jelentenek” – mondta Tso. „Moore törvénye kétévente megduplázza a számítási teljesítményt, de a GPU-k képesek párhuzamosítani a feladatokat egy chipen, több GPU-t összekapcsolni, és messze túlszárnyalni Moore törvényét. Ez a skála az intelligencia új szintjeire emeli a mesterséges intelligenciát, de a GPU-k csak akkor tudnak teljes kapacitással működni, ha olyan sebességgel szállítanak adatokat, amely megfelel a számítási teljesítményüknek – és ennek egyetlen módja az, ha kiküszöböljük az összes köztes réteget a GPU és az adatok között.”

(Az MIT szerint)

Forrás: https://vietnamnet.vn/cloudian-dua-du-lieu-den-gan-ai-hon-bao-gio-het-2433241.html