OpenAI、ChatGPT-5の開発で大きな困難に直面

TechSpotによると、OpenAIは次世代の大規模言語モデルであるChatGPT-5の開発において多くの課題に直面している。「Project Orion」というコードネームで呼ばれるChatGPT-5は18ヶ月間開発が進められているが、大きな進展は見られない。

OpenAIは少なくとも2つの初期トレーニングフェーズを完了していますが、結果は期待どおりにはなっていません。主な理由の一つは、トレーニングデータの多様性と品質が不十分であることです。パブリックインターネットからのデータの利用には限界があり、同社は合成データの作成や、データを手動で作成する人材の雇用といった代替手段を模索せざるを得なくなりました。

GPT-5はGPT-4の133倍のGPUを必要とするため、OpenAIにとっては難しい問題となるだろう。

人間が生成したデータは品質が高いものの、時間とコストの課題を伴います。例えば、10億個のデータトークン（AIモデルによって処理されるテキスト単位）を生成するには、約1,000人が1日5,000語を書き続け、それを数か月間続ける必要があります。一方、現在のAIモデルによって生成される合成データの使用には品質リスクがあり、非効率なデータループが発生するリスクが高まります。

データの問題に加え、ChatGPT-5の学習は技術的な課題にも直面しています。初期テストは予想よりも遅く、大規模な学習には時間がかかり、コストも増加します。これは、開発に数十億ドルの費用がかかったGPT-4を上回るモデルを開発できるかどうかという疑問を投げかけています。

さらに、OpenAI内部の不和もプロジェクトの進捗に大きな影響を与えています。CEOのサム・アルトマン氏は2023年末に一時的に解任され、今年中に20人以上の主要人物が退職しました。アルトマン氏は、ChatGPT-5の遅延の主な原因はGPT-4oの前バージョンのリリースであったことを認めています。

遅延とコストの増大により、OpenAIは投資家、特に同社の最大のパートナーであるMicrosoftからの強い圧力にさらされています。AI業界にはすでに数十億ドルもの資金が投入されているため、OpenAIはChatGPT-5が前身モデルを大幅に改善していることを証明する必要があります。しかし、学習データがますます不足するにつれて、この目標はますます困難になっています。

現時点では、ChatGPT-5の将来は不透明です。OpenAIは、AI技術競争における競争力を維持するために、現在の課題に対処し、リソースを最適化する方法を見つける必要があります。

出典: https://thanhnien.vn/openai-doi-mat-kho-khan-lon-khi-phat-trien-chatgpt-5-1852412232345532.htm