זוהי ההערכה שנלקחה מתזכיר פנימי של ענקית החיפוש שנחשף לאחרונה. במסמך זה, הביעו בכירים בגוגל דאגה עמוקה מהאפשרות להפסיד במרוץ המתמשך של הבינה המלאכותית.
נציג גוגל אישר מאוחר יותר את האותנטיות של המסמך, ואמר שמדובר רק בדעה של מקורב לחברה, אך הודה כי הם "לא היו במצב לנצח במירוץ הזה, וגם לא OpenAI".
ענקית החיפוש מאמינה שקהילת הקוד הפתוח עוקפת את חברות הבינה המלאכותית המובילות, למרות שלמוצרים שלהן יש יתרון קל באיכות, "הפער נסגר מהר להפליא".
גודל ההון אינו הגורם המרכזי
בינה מלאכותית עושה גלים בציבור מאז סוף 2022 עם השקת ChatGPT, צ'אטבוט המבוסס על מודלים של שפה גדולה (LLM) שפותח על ידי OpenAI, סטארט-אפ הקשור קשר הדוק למיקרוסופט. הצלחת מוצר זה הניעה את גוגל וחברות טכנולוגיה רבות אחרות לקפוץ למירוץ ה-LLM.
מודלים של LLM מאומנים על טריליוני מילים שנאספו מהאינטרנט כדי ליצור טקסטים או שיחות דמויי אדם. תהליך זה אורך חודשים ועולה עשרות מיליוני דולרים, מה שמוביל לחששות שהבינה המלאכותית תישלט על ידי חברות טכנולוגיה "עשירות, עשירות".
אבל התזכיר הפנימי של גוגל מצביע על כך שההנחה הזו שגויה. חוקרים בקהילת הקוד הפתוח ממנפים משאבים מקוונים חינמיים ומשיגים תוצאות דומות למודלים הקנייניים הגדולים ביותר של היום.
בהתאם לכך, ניתן "לכוון עדין" מערכות LLM באמצעות טכניקה הנקראת אדפטציה ברמה נמוכה, או LoRa, המאפשרת אופטימיזציה של LLM קיים למשימה ספציפית הרבה יותר מהר וזול מאשר אימון LLM מאפס.
לדוגמה, בחודש מרץ, LLaMa, מודל שנוצר על ידי חברת האם של פייסבוק, Meta, דלף לרשת. למרות שהיה קטן ו"פרימיטיבי" יחסית עם 7 מיליארד פרמטרים בלבד, בהשוואה ל-540 מיליארד פרמטרים ב-LLM הגדול ביותר של גוגל, LLaMa שוכלל במהירות כדי להניב תוצאות דומות לגרסה המקורית של ChatGPT במשימות מסוימות.
לכך עשויה להיות השפעה סייסמית על עתיד פיתוח הבינה המלאכותית, שכן "המחסומים להכשרה ובדיקות, החל מדרישת מרכז מחקר גדול, ועד לדרישת אדם אחד בלבד, ערב אחד ומחשב נייד מתקדם".
הקרב בין הענק גוליית לבין הרועה דוד
כעת ניתן לשכלל תואר ראשון במשפטים (LLM) תמורת 100 דולר בלבד תוך מספר שעות. עם המודל הגמיש, המחובר והזול שלה, "לבינה מלאכותית בקוד פתוח יש יתרונות משמעותיים" שחברות גדולות כמו גוגל אינן יכולות לשכפל. ככאלה, מסכם התזכיר, גוגל או OpenAI פגיעות למתחרים אלה בקוד פתוח.
"אני לא חושב שאני צריך משהו חזק כמו ChatGPT-4 להרבה משימות", אמר סיימון וויליסון, מתכנת ואנליסט טכנולוגי, ל-NBC. "השאלה עכשיו היא כמה קטנים המודלים יכולים להיות ועדיין להיות שימושיים? וזה משהו שקהילת הקוד הפתוח חוקרת במהירות רבה."
זה דומה לחלוטין לדעתם של מומחים רבים, לפיה הנקודה החזקה ביותר היא גם הנקודה החלשה ביותר אם מנוצלת ומתבוננת בה כראוי, כמו בסיפור על גוליית הענק המובס על ידי הרועה הקטן דוד בעזרת רוגטקה בלבד.
עם זאת, בכל הנוגע לפיתוח בינה מלאכותית, ייתכן שלא כולם יסכימו עם טענה זו. העובדה היא שעדיין קיימות תוכנות קנייניות בתשלום, כמו אדובי פוטושופ או מיקרוסופט ווינדוס, ותחום הבינה המלאכותית עשוי ללכת באותו מסלול פיתוח.
(לפי אקונומיסט, יאהו פיננס)
[מודעה_2]
מָקוֹר
תגובה (0)