Cloudian - Data dichter bij AI brengen dan ooit tevoren.

afbeelding voor les 70.png — Een schaalbaar opslagsysteem voor bedrijven, dat een naadloze gegevensstroom tussen opslag en AI-modellen mogelijk maakt. Foto: Midjourney

Kunstmatige intelligentie verandert de manier waarop bedrijven gegevens opslaan en benaderen. Traditionele dataopslagsystemen waren namelijk ontworpen om eenvoudige commando's van een paar gebruikers tegelijk te verwerken, terwijl de huidige AI-systemen met miljoenen agents continu en parallel toegang moeten hebben tot enorme hoeveelheden data en deze moeten verwerken.

Traditionele opslagsystemen hebben tegenwoordig veel complexe lagen, wat AI vertraagt omdat data door meerdere lagen moet voordat het de GPU bereikt – de grafische processor, die wordt beschouwd als het "brein" van AI.

Cloudian – mede opgericht door Michael Tso (van MIT) en Hiroshi Ohta – helpt dataopslag gelijke tred te houden met de AI-revolutie. Het bedrijf heeft een schaalbaar opslagsysteem voor bedrijven ontwikkeld, dat een naadloze datastroom tussen opslag en AI-modellen mogelijk maakt.

Dit systeem vermindert de complexiteit door parallelle verwerking toe te passen op opslag, waardoor AI-functionaliteit en data worden geconsolideerd op één enkel parallel verwerkingsplatform dat in staat is om grootschalige datasets op te slaan, op te halen en te verwerken, met snelle directe connectiviteit tussen opslag en zowel GPU's als CPU's.

Het geïntegreerde opslag- en computerplatform van Cloudian vereenvoudigt de ontwikkeling van AI-tools op commerciële schaal en biedt bedrijven een opslaginfrastructuur die gelijke tred kan houden met de AI-revolutie.

"Wat mensen vaak over het hoofd zien bij AI is dat het allemaal om data draait", aldus Tso. "Je kunt de prestaties van AI niet met 10% verhogen door simpelweg 10% meer data te hebben, zelfs niet met 10 keer zoveel data – je hebt 1.000 keer zoveel data nodig. Data opslaan op een manier die gemakkelijk te beheren is, en tegelijkertijd berekeningen direct in de data integreren zodat deze direct na invoer verwerkt kan worden zonder dat de data verplaatst hoeft te worden – dat is de richting waarin de industrie zich ontwikkelt."

Objectopslag en AI

Het platform van Cloudian maakt momenteel gebruik van een objectopslagarchitectuur, waarbij alle soorten data – documenten, video's , sensorgegevens – worden opgeslagen als afzonderlijke objecten met metadata. Objectopslag kan enorme hoeveelheden data in een platte structuur beheren, ideaal voor ongestructureerde data en AI-systemen. Voorheen was het echter onmogelijk om data direct naar het AI-model te sturen zonder deze eerst naar het computergeheugen te kopiëren, wat vertraging en een hoog energieverbruik veroorzaakte.

Afgelopen juli kondigde Cloudian aan dat het zijn objectopslagsysteem had uitgebreid met een vectordatabase, waarmee gegevens worden opgeslagen in een formaat dat direct geschikt is voor AI-toepassingen. Zodra de gegevens zijn geladen, voert Cloudian realtime vectorberekeningen uit om AI-tools zoals aanbevelingssystemen, zoekmachines en AI-assistenten te ondersteunen.

Cloudian kondigde ook een samenwerking met NVIDIA aan voor de ontwikkeling van een opslagsysteem dat direct met de GPU's van het bedrijf werkt. Volgens Cloudian maakt dit nieuwe systeem snellere AI-verwerking mogelijk en verlaagt het de computerkosten.

"NVIDIA nam ongeveer anderhalf jaar geleden contact met ons op, omdat GPU's alleen nuttig zijn als er een continue stroom data is die ze 'voedt'," aldus Tso. "Nu beseffen mensen dat het makkelijker is om AI op data toe te passen dan om enorme datablokken te verplaatsen. Ons opslagsysteem integreert veel AI-functies, waardoor we data kunnen voor- en nabewerken vlakbij de plek waar we ze verzamelen en opslaan."

AI-voorkeursopslag

Cloudian helpt wereldwijd zo'n 1.000 bedrijven om de waarde van hun data te maximaliseren, waaronder grote fabrikanten, financiële instellingen, zorginstellingen en overheidsinstanties.

Cloudian gebruikt bijvoorbeeld een groot autobedrijf op zijn opslagplatform om met behulp van AI te bepalen wanneer individuele productierobots onderhoud nodig hebben. Cloudian werkt ook samen met de Amerikaanse National Library of Medicine voor de opslag van onderzoeksartikelen en patenten, en met de National Cancer Database voor de opslag van DNA-sequenties van tumoren – rijke datasets die door AI kunnen worden verwerkt ter ondersteuning van onderzoek naar nieuwe behandelingen of ontdekkingen.

"GPU's zijn een fantastische drijvende kracht," zei Tso. "Volgens de wet van Moore verdubbelt de rekenkracht elke twee jaar, maar GPU's kunnen taken parallel uitvoeren op een chip, meerdere GPU's met elkaar verbinden en veel verder gaan dan de wet van Moore. Deze schaalvergroting stuwt AI naar nieuwe intelligentieniveaus, maar de enige manier voor GPU's om op volle capaciteit te werken, is door data te leveren met een snelheid die overeenkomt met hun rekenkracht – en de enige manier om dat te doen, is door alle tussenliggende lagen tussen de GPU en je data te elimineren."

Reactie (0)