Metaは、Llama 2を上回り、GPT-4に匹敵するパフォーマンスを備えた新しいオープンソースの大規模モデルを構築しています。

Siliconangleによると、Metaは生成AIの分野でOpenAIと競争することを目指しており、GPT-4に匹敵するパフォーマンスを持つ新しいオープンソースの大規模モデルをリリースする予定だという。

新しいモデルはLlama 2よりも数倍強力で、テキスト、画像の生成、分析などの機能を提供すると伝えられています。このモデルは現在開発中であり、最終的な機能は不明です。

Meta の最終的な目標は、より人間らしい表現を生成できる次世代生成 AI モデルの開発を加速することです。

Meta は長年にわたり、大規模モデル製品に対してオープン ソース アプローチを採用しており、業界では最大の貢献者の 1 つとしてよく知られています。今年だけでも、多数の AI モデルとトレーニング データセットを AI コミュニティにリリースしました。これらには、プログラミング タスクに最適化された Code Llama 大規模言語モデル、数百の言語でユニバーサルなオンデマンド翻訳を可能にする SeamlessM4T モデル、音楽やサウンドを作成するための生成 AI モデルである AudioCraft、音声生成 AI モデルである Voicebox が含まれます。また、同社は人間のように学習できるコンピュータービジョンモデルであるI-JEPAと、研究者がコンピュータービジョンモデルの偏りを監査できるように設計されたベンチマークデータセットであるFACETもリリースした。

しかし、同社のモデルのパフォーマンスはChatGPTなどの製品に比べて常に低く、Metaの新しいAIビッグモデルがOpenAIに追いつくことができるかどうかはまだ分からない。なぜなら、その能力はトレーニングデータの量に依存するからです。 MetaのLlama 2は700億のトレーニングデータパラメータでトレーニングされたと理解されています。 OpenAIはGPT-4がいくつのパラメータに基づいているか公表していないが、約1兆5000億のパラメータに基づいて、GPT-4はLlamaの20倍の大きさになる可能性があると推定している。