AI:s framtid ligger inte "i händerna" på Google eller OpenAI

[annons_1]

Det är bedömningen hämtad från ett internt PM från sökjätten som nyligen avslöjades. I detta dokument uttryckte Googles chefer djup oro över möjligheten att förlora i den pågående AI-kapplöpningen.

En representant för Google bekräftade senare dokumentets äkthet och sa att det bara var en åsikt från en insider i företaget, men medgav att de "inte var i en position att vinna den här tävlingen, och det är inte heller OpenAI".

Sökjätten anser att öppen källkodsgemenskapen slår de ledande AI-företagen, även om deras produkter har en liten kvalitetsfördel, ”klyftan minskar otroligt snabbt”.

Kapitalstorlek är inte den viktigaste faktorn

AI har gjort succé bland allmänheten sedan slutet av 2022 med lanseringen av ChatGPT, en chatbot baserad på LLM (stora språkmodeller) utvecklad av OpenAI, en startup nära besläktad med Microsoft. Produktens framgång har fått Google och många andra teknikföretag att hoppa in i kapplöpningen om LLM.

LLM-modeller tränas på biljoner ord som samlats in från internet för att skapa människoliknande texter eller konversationer. Denna process tar månader och kostar tiotals miljoner dollar, vilket leder till oro för att AI kommer att domineras av "rika, rika" teknikföretag.

AI som utvecklats av öppen källkod-communityn håller på att bli en verklig rival till branschjättar som Google eller OpenAI.

Men Googles interna PM antyder att det antagandet är felaktigt. Forskare inom öppen källkod utnyttjar gratis online-resurser och uppnår resultat som är jämförbara med dagens största proprietära modeller.

Följaktligen kan LLM:er "finjusteras" genom en teknik som kallas lågnivåanpassning, eller LoRa, vilket gör att en befintlig LLM kan optimeras för en specifik uppgift mycket snabbare och billigare än att träna en LLM från grunden.

Till exempel läckte LLaMa, en modell skapad av Facebooks moderbolag Meta, ut på nätet i mars. Även om den var liten och relativt "primitiv" med bara 7 miljarder parametrar, jämfört med 540 miljarder parametrar i Googles största LLM, förfinades LLaMa snabbt för att producera resultat jämförbara med originalversionen av ChatGPT på vissa uppgifter.

Detta skulle kunna få en seismisk inverkan på framtiden för AI-utveckling eftersom ”hindren för utbildning och testning, från att kräva ett stort forskningscenter, till att kräva bara en person, en kväll och en avancerad bärbar dator.”

Striden mellan jätten Goliat och herden David

Nu kan en juridikexamen förfinas för så lite som 100 dollar på några timmar. Med sin flexibla, uppkopplade och lågkostnadsmodell har "öppen källkods-AI betydande fördelar" som stora företag som Google inte kan replikera. Som sådan, avslutas promemorian, är Google eller OpenAI sårbara för dessa konkurrenter med öppen källkod.

Öppen källkod-communityn har fördelar som teknikjättar inte kan replikera.

”Jag tror inte att jag behöver något så kraftfullt som ChatGPT-4 för många uppgifter”, sa Simon Willison, programmerare och teknikanalytiker, till NBC. ”Frågan är nu hur små modellerna kan vara och fortfarande vara användbara? Och det är något som öppen källkodsgemenskapen utforskar mycket snabbt.”

Detta är helt likt många experters uppfattning att den starkaste punkten också är den svagaste punkten om den utnyttjas och observeras ordentligt, som i berättelsen om jätten Goliat som besegras av den lille herdepojken David med bara en slangbella.

Men när det gäller AI-utveckling kanske inte alla håller med om detta argument. Faktum är att betald proprietär programvara fortfarande existerar, såsom Adobe Photoshop eller Microsoft Windows, och AI-området kan följa samma utvecklingsväg.

(Enligt Economist och YahooFinance)

[annons_2]
Källa