зображення для уроку 70.png
Масштабована система зберігання даних для бізнесу, що забезпечує безперебійний потік даних між сховищем та моделями штучного інтелекту. Фото: Midjourney

Штучний інтелект змінює те, як компанії зберігають та отримують доступ до даних. Це пояснюється тим, що традиційні системи зберігання даних були розроблені для обробки простих команд від кількох користувачів одночасно, тоді як сучасні системи штучного інтелекту з мільйонами агентів повинні отримувати доступ до величезних обсягів даних та обробляти їх безперервно та паралельно.

Традиційні системи зберігання даних зараз мають багато складних шарів, що уповільнює роботу штучного інтелекту, оскільки дані повинні проходити через кілька шарів, перш ніж потрапити до графічного процесора — графічного процесора, який вважається «мозком» штучного інтелекту.

Cloudian, співзасновниками якої є Майкл Цо (з MIT) та Хіроші Охта, допомагає системам зберігання даних йти в ногу з революцією штучного інтелекту. Компанія розробила масштабовану систему зберігання даних для підприємств, що забезпечує безперебійний потік даних між моделями сховища та штучного інтелекту.

Ця система зменшує складність, застосовуючи паралельні обчислення до сховища, консолідуючи функціональність штучного інтелекту та дані на єдиній платформі паралельної обробки, здатній зберігати, отримувати та обробляти великомасштабні набори даних, з високошвидкісним прямим підключенням між сховищем та як графічними, так і центральними процесорами.

Інтегрована платформа зберігання та обчислень Cloudian спрощує розробку інструментів штучного інтелекту комерційного масштабу, водночас надаючи підприємствам інфраструктуру зберігання, здатну йти в ногу з бумом штучного інтелекту.

«Одна річ, яку люди часто не помічають щодо штучного інтелекту, це те, що все зосереджено на даних», – сказав Цо. «Ви не можете підвищити продуктивність штучного інтелекту на 10%, лише маючи на 10% більше даних, навіть не в 10 разів більше даних – вам потрібно в 1000 разів більше даних. Зберігання даних у спосіб, яким легко керувати, з одночасним вбудовуванням обчислень безпосередньо в них, щоб їх можна було обробляти одразу після введення, без необхідності їх переміщення – це напрямок, у якому рухається галузь».

Зберігання об'єктів та штучний інтелект

Наразі платформа Cloudian використовує архітектуру об'єктного сховища, де всі типи даних — документи, відео , дані датчиків — зберігаються як окремі об'єкти з метаданими. Об'єктне сховище може керувати величезними обсягами даних у плоскій структурі, що ідеально підходить для неструктурованих даних та систем штучного інтелекту, але раніше було неможливо надсилати дані безпосередньо до моделі штучного інтелекту без попереднього копіювання їх у пам'ять комп'ютера, що призводило до затримки та високого енергоспоживання.

У липні минулого року Cloudian оголосила про розширення своєї системи зберігання об'єктів за допомогою векторної бази даних, яка зберігає дані у форматі, готовому для негайного використання за допомогою штучного інтелекту. Після завантаження даних Cloudian виконує векторні обчислення даних у режимі реального часу для підтримки інструментів штучного інтелекту, таких як системи рекомендацій, пошукові системи та помічники штучного інтелекту.

Cloudian також оголосила про партнерство з NVIDIA для розробки системи зберігання даних, яка працює безпосередньо з графічними процесорами компанії. Cloudian стверджує, що ця нова система забезпечує швидшу обробку даних за допомогою штучного інтелекту та знижує обчислювальні витрати.

«NVIDIA зв’язалася з нами приблизно 1,5 роки тому, оскільки графічні процесори корисні лише тоді, коли є безперервний потік даних, який їх «живить», — сказав Цо. «Тепер люди розуміють, що легше використовувати штучний інтелект для обробки даних, ніж переміщувати величезні блоки даних. Наша система зберігання даних інтегрує багато функцій штучного інтелекту, тому ми можемо попередньо та після обробки даних поблизу місця їх збору та зберігання».

Зберігання, що використовується штучним інтелектом

Cloudian допомагає приблизно 1000 компаніям по всьому світу максимізувати цінність своїх даних, включаючи великих виробників, фінансові установи, медичні заклади та державні установи.

Наприклад, платформа зберігання даних Cloudian підтримує великого автовиробника, який використовує штучний інтелект, щоб визначати, коли потрібне технічне обслуговування окремих виробничих роботів. Cloudian також співпрацює з Національною медичною бібліотекою США для зберігання дослідницьких робіт та патентів, а також з Національною базою даних раку для зберігання послідовностей ДНК пухлин — багатих наборів даних, які штучний інтелект може обробляти для підтримки досліджень нових методів лікування або відкриттів.

«Графічні процесори – це фантастична рушійна сила», – сказав Цо. «Закон Мура подвоює обчислювальну потужність кожні два роки, але графічні процесори можуть паралелізувати завдання на чіпі, з’єднувати кілька графічних процесорів разом і виходити далеко за рамки закону Мура. Такий масштаб підштовхує штучний інтелект до нових рівнів інтелекту, але єдиний спосіб для графічних процесорів працювати на повну потужність – це передавати дані зі швидкістю, яка відповідає їхній обчислювальній потужності, і єдиний спосіб зробити це – усунути всі проміжні шари між графічним процесором і вашими даними».

(За даними MIT)

Джерело: https://vietnamnet.vn/cloudian-dua-du-lieu-den-gan-ai-hon-bao-gio-het-2433241.html