Sztuczna inteligencja zmienia sposób, w jaki firmy przechowują i uzyskują dostęp do danych. Dzieje się tak, ponieważ tradycyjne systemy przechowywania danych zostały zaprojektowane do obsługi prostych poleceń od kilku użytkowników jednocześnie, podczas gdy dzisiejsze systemy AI z milionami agentów muszą uzyskiwać dostęp do ogromnych ilości danych i przetwarzać je w sposób ciągły i równoległy.
Tradycyjne systemy pamięci masowej składają się obecnie z wielu złożonych warstw, co spowalnia sztuczną inteligencję, ponieważ dane muszą przejść przez wiele warstw, zanim dotrą do procesora graficznego GPU, uważanego za „mózg” sztucznej inteligencji.
Cloudian – firma współzałożona przez Michaela Tso (z MIT) i Hiroshi Ohtę – pomaga w dotrzymywaniu kroku rewolucji w dziedzinie sztucznej inteligencji w przechowywaniu danych. Firma opracowała skalowalny system pamięci masowej dla przedsiębiorstw, umożliwiający płynny przepływ danych między modelami pamięci masowej a modelami sztucznej inteligencji.
System ten redukuje złożoność poprzez zastosowanie obliczeń równoległych do pamięci masowej, konsolidując funkcjonalność sztucznej inteligencji i dane na jednej platformie przetwarzania równoległego, która może przechowywać, pobierać i przetwarzać duże zbiory danych, z szybką bezpośrednią łącznością między pamięcią masową a procesorami GPU i CPU.
Zintegrowana platforma przetwarzania i przechowywania danych Cloudian upraszcza opracowywanie narzędzi AI na skalę komercyjną, jednocześnie zapewniając przedsiębiorstwom infrastrukturę pamięci masowej, która jest w stanie nadążyć za rozwojem sztucznej inteligencji.
„Ludzie często pomijają fakt, że w sztucznej inteligencji wszystko kręci się wokół danych” – powiedział Tso. „Nie da się zwiększyć wydajności sztucznej inteligencji o 10%, mając o 10% więcej danych, nawet 10 razy więcej – potrzeba 1000 razy więcej danych. Przechowywanie danych w sposób łatwy w zarządzaniu, a jednocześnie osadzanie w nich obliczeń, aby mogły być przetwarzane natychmiast po ich wprowadzeniu, bez konieczności przenoszenia – to kierunek, w którym zmierza branża”.
Przechowywanie obiektów i sztuczna inteligencja
Obecnie platforma Cloudian wykorzystuje architekturę pamięci obiektowej, w której wszystkie rodzaje danych – dokumenty, filmy , dane z czujników – są przechowywane jako pojedyncze obiekty z metadanymi. Pamięć obiektowa może zarządzać ogromnymi ilościami danych w płaskiej strukturze, co jest idealne dla danych nieustrukturyzowanych i systemów AI. Wcześniej jednak nie było możliwe bezpośrednie przesyłanie danych do modelu AI bez ich wcześniejszego skopiowania do pamięci komputera, co powodowało opóźnienia i wysokie zużycie energii.
W lipcu ubiegłego roku Cloudian ogłosił rozszerzenie swojego systemu obiektowego przechowywania danych o wektorową bazę danych, przechowującą dane w formacie gotowym do natychmiastowego wykorzystania przez sztuczną inteligencję. Po załadowaniu danych, Cloudian przeprowadza obliczenia wektorowe w czasie rzeczywistym, aby wspierać narzędzia AI, takie jak wyszukiwarki, wyszukiwarki i asystenci AI.
Cloudian ogłosił również partnerstwo z firmą NVIDIA w celu opracowania systemu pamięci masowej, który będzie współpracował bezpośrednio z procesorami graficznymi firmy. Cloudian twierdzi, że ten nowy system umożliwia szybsze przetwarzanie danych przez sztuczną inteligencję i obniża koszty obliczeniowe.
„NVIDIA skontaktowała się z nami około półtora roku temu, ponieważ procesory graficzne są przydatne tylko wtedy, gdy „zasilają” je ciągły strumień danych” – powiedział Tso. „Teraz ludzie zdają sobie sprawę, że łatwiej jest wdrożyć sztuczną inteligencję do danych niż przenosić ogromne bloki danych. Nasz system pamięci masowej integruje wiele funkcji sztucznej inteligencji, dzięki czemu możemy wstępnie i postprodukcyjnie przetwarzać dane w pobliżu miejsca, w którym je zbieramy i przechowujemy”.
Preferowane przez sztuczną inteligencję miejsce przechowywania
Cloudian pomaga około 1000 przedsiębiorstw na całym świecie maksymalizować wartość swoich danych, w tym dużym producentom, instytucjom finansowym, placówkom opieki zdrowotnej i agencjom rządowym.
Na przykład platforma pamięci masowej Cloudian wspiera dużego producenta samochodów w zakresie wykorzystania sztucznej inteligencji do określania, kiedy konieczna jest konserwacja poszczególnych robotów produkcyjnych. Cloudian współpracuje również z amerykańską Narodową Biblioteką Medyczną (U.S. National Library of Medicine) w zakresie przechowywania prac badawczych i patentów, a także z Narodową Bazą Danych o Nowotworach (National Cancer Database) w zakresie przechowywania sekwencji DNA guzów – bogatych zestawów danych, które sztuczna inteligencja może przetwarzać, aby wspierać badania nad nowymi metodami leczenia lub odkryciami.
„Procesory graficzne (GPU) to fantastyczna siła napędowa” – powiedział Tso. „Prawo Moore’a podwaja moc obliczeniową co dwa lata, ale procesory graficzne (GPU) mogą paralelizować zadania na chipie, łączyć ze sobą wiele procesorów graficznych i wykraczać daleko poza prawo Moore’a. Ta skala przenosi sztuczną inteligencję na nowy poziom, ale jedynym sposobem, aby procesory graficzne działały z pełną wydajnością, jest dostarczanie danych z prędkością odpowiadającą ich mocy obliczeniowej – a jedynym sposobem, aby to osiągnąć, jest wyeliminowanie wszystkich warstw pośrednich między procesorem graficznym a danymi”.
(Według MIT)
Źródło: https://vietnamnet.vn/cloudian-dua-du-lieu-den-gan-ai-hon-bao-gio-het-2433241.html
Komentarz (0)