Det er en vurdering hentet fra et nylig lekket internt notat fra søkegiganten. I samme dokument uttrykte Google-ledere dyp bekymring for muligheten for å mislykkes i det pågående AI-kappløpet.
En Google-representant bekreftet senere dokumentets autentisitet og uttalte at det bare var en mening fra noen i selskapet, men erkjente at de «ikke er i en posisjon til å vinne dette løpet, og det er heller ikke OpenAI».
Søkegiganten mener at åpen kildekode-miljøet slår ledende AI-selskaper, selv om produktene deres har en liten fordel i kvalitet, men «gapet krymper utrolig raskt».
Kapitalstørrelse er ikke den viktigste faktoren.
AI har skapt blest blant publikum siden slutten av 2022 med lanseringen av ChatGPT, en chatbot basert på LLM (store språkmodeller) utviklet av OpenAI – en oppstartsbedrift nært knyttet til Microsoft. Suksessen til dette produktet har fått Google og mange andre teknologiselskaper til å hoppe inn i kappløpet om LLM.
LLM-modeller trenes ved hjelp av billioner av ord hentet fra internett for å generere tekst eller samtaler som ligner menneskelig tale. Denne prosessen tar måneder og koster titalls millioner dollar, noe som fører til bekymring for at AI vil bli dominert av velstående teknologiselskaper.
Interne Google-dokumenter tyder imidlertid på at denne antagelsen er feilaktig. Forskere i åpen kildekode-miljøet utnytter gratis nettressurser og oppnår resultater som kan sammenlignes med selv de største proprietære modellene i dag.
Følgelig kan LLM-er "finnes" gjennom en teknikk som kalles lavnivåtilpasning, eller LoRa, som gjør det mulig å optimalisere en eksisterende LLM for en spesifikk oppgave raskt og til en mye lavere kostnad enn å trene en LLM fra bunnen av.
For eksempel, i mars ble LLaMa, en modell laget av Meta – Facebooks morselskap – lekket på nettet. Selv om den var liten og ganske «primitiv» med bare 7 milliarder parametere, sammenlignet med 540 milliarder parametere i Googles største LLM, ble LLaMa raskt forbedret for å produsere resultater sammenlignbare med den originale versjonen av ChatGPT på noen oppgaver.
Dette kan ha en seismisk innvirkning på fremtiden for AI-utvikling ettersom «barrierene for opplæring og testing, som tidligere krevde et stort forskningssenter, har blitt redusert til bare én person, én kveld og en bærbar PC med høy ytelse».
Kampen mellom kjempen Goliat og gjeteren David
Nå kan en LLM finjusteres for bare 100 dollar på noen få timer. Med sin fleksible, sammenkoblede og lavkostnadsmodell har «åpen kildekode-AI en betydelig fordel» som store selskaper som Google ikke kan kopiere. Derfor konkluderer dokumentet med at Google eller OpenAI er sårbare for disse konkurrentene innen åpen kildekode.
«Jeg tror ikke jeg trenger noe så kraftig som ChatGPT-4 til mange oppgaver», sa Simon Willison, programmerer og teknologianalytiker, til NBC. «Spørsmålet nå er hvor mye modeller kan brytes ned og fortsatt være nyttige? Og det er noe åpen kildekode-miljøet utforsker veldig raskt.»
Dette er helt i samsvar med mange eksperters oppfatning om at den største styrken også kan være den største svakheten hvis den utnyttes og observeres riktig, akkurat som i historien om kjempen Goliat som blir beseiret av den lille gjetergutten David med bare en sprettert.
Når det gjelder utviklingen av AI, er det imidlertid ikke sikkert at alle er enige i dette poenget. Realiteten er at proprietær, betalt programvare fortsatt finnes, som Adobe Photoshop eller Microsoft Windows, og AI-feltet kan godt følge en lignende utviklingsvei.
(Ifølge Economist og YahooFinance)
[annonse_2]
Kilde






Kommentar (0)