Такая оценка взята из недавно обнародованной внутренней записки поискового гиганта. В этом документе руководители Google выразили глубокую обеспокоенность возможностью проигрыша в продолжающейся гонке ИИ.
Представитель Google позже подтвердил подлинность документа, заявив, что это всего лишь мнение инсайдера компании, но признал, что они «не в состоянии выиграть эту гонку, как и OpenAI».
Поисковый гигант отмечает, что сообщество разработчиков ПО с открытым исходным кодом опережает ведущие компании в области ИИ, хотя их продукты имеют небольшое преимущество по качеству, «разрыв сокращается невероятно быстро».
Размер капитала не является основным фактором
ИИ вызвал ажиотаж в обществе с конца 2022 года с запуском ChatGPT, чат-бота на основе LLM (большие языковые модели), разработанного OpenAI, стартапом, тесно связанным с Microsoft. Успех этого продукта побудил Google и многие другие технологические компании вступить в гонку LLM.
Модели LLM обучаются на триллионах слов из Интернета для генерации текстов или разговоров, похожих на человеческие. Этот процесс занимает месяцы и стоит десятки миллионов долларов, что приводит к опасениям, что ИИ будет доминировать в «богатых, состоятельных» технологических компаниях.
Но внутренняя записка Google предполагает, что это предположение неверно. Исследователи в сообществе открытого исходного кода используют бесплатные онлайн-ресурсы и достигают результатов, сопоставимых с сегодняшними крупнейшими фирменными моделями.
Соответственно, LLM можно «тонко настроить» с помощью метода, называемого низкоуровневой адаптацией, или LoRa, который позволяет оптимизировать существующую LLM для конкретной задачи гораздо быстрее и дешевле, чем обучать LLM с нуля.
Например, в марте LLaMa, модель, созданная материнской компанией Facebook Meta, была выложена в сеть. Хотя она была небольшой и относительно «примитивной» — всего 7 миллиардов параметров по сравнению с 540 миллиардами параметров в крупнейшей LLM Google, LLaMa была быстро доработана, чтобы выдавать результаты, сопоставимые с оригинальной версией ChatGPT в некоторых задачах.
Это может иметь сейсмические последствия для будущего развития ИИ, поскольку «препятствия к обучению и тестированию могут измениться: от необходимости в крупном исследовательском центре до необходимости всего лишь одного человека, одного вечера и высокопроизводительного ноутбука».
Битва между великаном Голиафом и пастухом Давидом
Теперь LLM можно настроить всего за 100 долларов за несколько часов. Благодаря своей гибкой, подключенной и недорогой модели «ИИ с открытым исходным кодом имеет значительные преимущества», которые крупные компании, такие как Google, не могут воспроизвести. Таким образом, заключает меморандум, Google или OpenAI уязвимы для этих конкурентов с открытым исходным кодом.
«Я не думаю, что мне нужно что-то столь мощное, как ChatGPT-4, для многих задач», — сказал Саймон Уиллисон, программист и аналитик технологий, в интервью NBC. «Теперь вопрос в том, насколько малыми могут быть модели и при этом оставаться полезными? И это то, что сообщество разработчиков ПО с открытым исходным кодом изучает очень быстро».
Это полностью соответствует мнению многих экспертов о том, что самая сильная сторона является также и самой слабой, если ее правильно использовать и соблюдать, как в истории о великане Голиафе, которого победил маленький пастушок Давид с помощью одной лишь пращи.
Однако, когда дело доходит до развития ИИ, не все могут согласиться с этим аргументом. Дело в том, что платное проприетарное программное обеспечение все еще существует, например, Adobe Photoshop или Microsoft Windows, и область ИИ может пойти по тому же пути развития.
(По данным Economist, YahooFinance)
Источник
Комментарий (0)