Cloudian: avvicinare i dati all'intelligenza artificiale come mai prima d'ora.

I sistemi di archiviazione di Cloudian, co-fondata da un ex allievo del MIT, aiutano le aziende a fornire dati su larga scala a modelli e agenti di intelligenza artificiale ad alta intensità di dati.

Un sistema di archiviazione scalabile per le aziende, che consente un flusso di dati senza interruzioni tra l'archiviazione e i modelli di intelligenza artificiale. Foto: Midjourney

L'intelligenza artificiale sta cambiando il modo in cui le aziende archiviano e accedono ai dati. Questo perché i sistemi di archiviazione dati tradizionali erano progettati per gestire semplici comandi provenienti simultaneamente da pochi utenti, mentre i moderni sistemi di intelligenza artificiale, con milioni di agenti, devono accedere ed elaborare enormi quantità di dati in modo continuo e parallelo.

I sistemi di archiviazione tradizionali presentano ormai numerosi e complessi livelli, il che rallenta l'intelligenza artificiale poiché i dati devono attraversare più livelli prima di raggiungere la GPU, il processore grafico considerato il "cervello" dell'IA.

Cloudian, cofondata da Michael Tso (proveniente dal MIT) e Hiroshi Ohta, sta aiutando l'archiviazione dei dati a tenere il passo con la rivoluzione dell'intelligenza artificiale. L'azienda ha sviluppato un sistema di archiviazione scalabile per le imprese, che consente un flusso di dati senza interruzioni tra l'archiviazione e i modelli di intelligenza artificiale.

Questo sistema riduce la complessità applicando il calcolo parallelo all'archiviazione, consolidando funzionalità di intelligenza artificiale e dati su un'unica piattaforma di elaborazione parallela in grado di archiviare, recuperare ed elaborare grandi quantità di dati, con connettività diretta ad alta velocità tra l'archiviazione e sia le GPU che le CPU.

La piattaforma integrata di storage e calcolo di Cloudian semplifica lo sviluppo di strumenti di intelligenza artificiale su scala commerciale, fornendo al contempo alle aziende un'infrastruttura di storage in grado di tenere il passo con il boom dell'IA.

"Un aspetto che spesso viene trascurato quando si parla di IA è che tutto ruota attorno ai dati", ha affermato Tso. "Non si può aumentare le prestazioni dell'IA del 10% semplicemente avendo il 10% di dati in più, nemmeno 10 volte tanto: ne servono 1.000 volte tanto. Archiviare i dati in modo che siano facili da gestire, integrando al contempo i calcoli direttamente al loro interno in modo che possano essere elaborati non appena vengono inseriti, senza bisogno di spostarli: questa è la direzione in cui si sta muovendo il settore."

Archiviazione di oggetti e IA

Attualmente, la piattaforma di Cloudian utilizza un'architettura di object storage, in cui tutti i tipi di dati (documenti, video , dati dei sensori) vengono archiviati come singoli oggetti con metadati. L'object storage può gestire enormi quantità di dati in una struttura piatta, ideale per dati non strutturati e sistemi di intelligenza artificiale, ma in precedenza era impossibile inviare i dati direttamente al modello di IA senza prima copiarli nella memoria del computer, causando latenza e un elevato consumo energetico.

Lo scorso luglio, Cloudian ha annunciato di aver ampliato il proprio sistema di archiviazione a oggetti con un database vettoriale, che memorizza i dati in un formato pronto per l'utilizzo immediato da parte dell'intelligenza artificiale. Una volta caricati i dati, Cloudian esegue calcoli vettoriali in tempo reale per supportare strumenti di intelligenza artificiale come motori di raccomandazione, motori di ricerca e assistenti virtuali.

Cloudian ha inoltre annunciato una partnership con NVIDIA per sviluppare un sistema di archiviazione che interagisce direttamente con le GPU dell'azienda. Cloudian afferma che questo nuovo sistema consente un'elaborazione AI più rapida e riduce i costi di calcolo.

"NVIDIA ci ha contattato circa un anno e mezzo fa perché le GPU sono utili solo quando sono alimentate da un flusso continuo di dati", ha affermato Tso. "Ora ci si rende conto che è più facile applicare l'intelligenza artificiale ai dati piuttosto che spostare enormi blocchi di dati. Il nostro sistema di archiviazione integra molte funzioni di intelligenza artificiale, consentendoci di pre-elaborare e post-elaborare i dati vicino al punto in cui li raccogliamo e li archiviamo."

archiviazione preferita dall'IA

Cloudian aiuta circa 1.000 aziende in tutto il mondo a massimizzare il valore dei propri dati, tra cui importanti produttori, istituzioni finanziarie, strutture sanitarie e agenzie governative.

Ad esempio, la piattaforma di storage di Cloudian supporta un'importante casa automobilistica che utilizza l'intelligenza artificiale per determinare quando è necessaria la manutenzione dei singoli robot di produzione. Cloudian collabora anche con la Biblioteca Nazionale di Medicina degli Stati Uniti per archiviare articoli di ricerca e brevetti, e con il National Cancer Database per archiviare sequenze di DNA tumorale: ricchi set di dati che l'intelligenza artificiale può elaborare per supportare la ricerca di nuove terapie o scoperte.

"Le GPU sono una forza trainante straordinaria", ha affermato Tso. "La legge di Moore raddoppia la potenza di calcolo ogni due anni, ma le GPU possono parallelizzare le attività su un singolo chip, connettere più GPU tra loro e andare ben oltre la legge di Moore. Questa scalabilità sta spingendo l'intelligenza artificiale verso nuovi livelli, ma l'unico modo per far sì che le GPU lavorino a pieno regime è quello di fornire dati a una velocità commisurata alla loro potenza di calcolo, e l'unico modo per farlo è eliminare tutti i livelli intermedi tra la GPU e i dati."

(Secondo il MIT)

Fonte: https://vietnamnet.vn/cloudian-dua-du-lieu-den-gan-ai-hon-bao-gio-het-2433241.html