imagem 70.png
Um sistema de armazenamento empresarial escalável que permite que os dados fluam perfeitamente entre o armazenamento e os modelos de IA. Foto: Midjourney

A inteligência artificial está mudando a forma como as empresas armazenam e acessam dados. Isso ocorre porque os sistemas tradicionais de armazenamento de dados foram projetados para processar comandos simples de alguns usuários por vez, enquanto os sistemas de IA atuais, com milhões de agentes, precisam acessar e processar enormes quantidades de dados de forma contínua e paralela.

Os sistemas de armazenamento tradicionais agora têm muitas camadas de complexidade, o que torna a IA mais lenta porque os dados precisam passar por muitas camadas antes de chegar à GPU, a unidade de processamento gráfico, considerada a "célula cerebral" da IA.

A Cloudian — cofundada por Michael Tso (do MIT) e Hiroshi Ohta — está ajudando o armazenamento de dados a acompanhar a revolução da IA. A empresa desenvolveu um sistema de armazenamento empresarial escalável que ajuda os dados a fluir perfeitamente entre o armazenamento e os modelos de IA.

O sistema reduz a complexidade aplicando computação paralela ao armazenamento, consolidando a funcionalidade de IA e dados em uma única plataforma de processamento paralelo capaz de armazenar, recuperar e processar conjuntos de dados em larga escala, com conectividade direta de alta velocidade entre o armazenamento e GPUs e CPUs.

A plataforma integrada de computação e armazenamento da Cloudian simplifica a criação de ferramentas de IA em escala comercial, ao mesmo tempo em que fornece às empresas uma infraestrutura de armazenamento capaz de acompanhar a explosão da IA.

“Uma coisa que as pessoas frequentemente esquecem sobre IA é que tudo gira em torno de dados”, diz Tso. “Não se consegue um aumento de 10% no desempenho da IA ​​com 10% a mais de dados, e mesmo 10 vezes mais dados não são suficientes — são necessários 1.000 vezes mais dados. Armazenar dados de uma forma fácil de gerenciar e incorporar a computação ali mesmo para que você possa processá-la conforme ela chega, sem precisar movê-la — é para onde a indústria está indo.”

Armazenamento de objetos e IA

Atualmente, a plataforma da Cloudian utiliza uma arquitetura de armazenamento de objetos, na qual todos os tipos de dados — documentos, vídeos , dados de sensores — são armazenados como objetos únicos com metadados. O armazenamento de objetos pode gerenciar grandes quantidades de dados em uma estrutura plana, tornando-o ideal para dados não estruturados e sistemas de IA. No entanto, anteriormente era impossível enviar dados diretamente para um modelo de IA sem primeiro copiá-los para a memória do computador, o que causava latência e desperdício de energia.

Em julho, a Cloudian anunciou a expansão de seu sistema de armazenamento de objetos com um banco de dados vetorial, que armazena dados em um formato imediatamente disponível para uso por IA. À medida que os dados são ingeridos, a Cloudian calcula o formato vetorial dos dados em tempo real para oferecer suporte a ferramentas de IA, como mecanismos de recomendação, busca e assistentes de IA.

A Cloudian também anunciou uma parceria com a NVIDIA para que seu sistema de armazenamento funcione diretamente com suas GPUs. A empresa afirmou que o novo sistema permite processamento de IA mais rápido e custos de computação mais baixos.

“A NVIDIA nos contatou há cerca de um ano e meio porque as GPUs só são úteis quando há dados para alimentá-las”, disse Tso. “Agora, as pessoas percebem que é mais fácil aplicar IA aos dados do que mover grandes volumes de dados. Nosso sistema de armazenamento possui muitos recursos de IA integrados, o que nos permite pré-processar e pós-processar os dados perto de onde os coletamos e armazenamos.”

Armazenamento prioritário de IA

A Cloudian está ajudando aproximadamente 1.000 empresas no mundo todo a obter o máximo valor de seus dados, incluindo grandes fabricantes, instituições financeiras, instalações de saúde e agências governamentais.

Por exemplo, a plataforma de armazenamento da Cloudian está ajudando uma grande montadora a usar IA para determinar quando cada um de seus robôs de produção precisa de manutenção. A Cloudian também tem parceria com a Biblioteca Nacional de Medicina dos EUA para armazenar artigos de pesquisa e patentes, e com o Banco de Dados Nacional do Câncer para armazenar sequências de DNA de tumores — conjuntos de dados ricos que a IA pode processar para auxiliar no desenvolvimento de novos tratamentos ou descobertas.

“GPUs são um grande facilitador”, diz Tso. “A Lei de Moore dobra o poder de computação a cada dois anos, mas as GPUs podem paralelizar tarefas em um chip, encadear várias GPUs e ir além da Lei de Moore. Essa escala está levando a IA a novos patamares de inteligência, mas a única maneira de fazer as GPUs darem o seu melhor é alimentando dados na mesma taxa que seu poder de computação — e a única maneira de fazer isso é remover todas as camadas intermediárias entre a GPU e seus dados.”

(De acordo com o MIT)

Fonte: https://vietnamnet.vn/cloudian-dua-du-lieu-den-gan-ai-hon-bao-gio-het-2433241.html