Llama3は7月にリリースされます!現在微調整中です!

Llama3は7月にリリースされます!現在微調整中です!

編纂者 | Yan Zheng

制作:51CTO テクノロジースタック(WeChat ID:blog)

プロジェクトに詳しい人物によると、Meta は Llama 3 を 7 月にリリースする予定だという。 Llama 3 の最大バージョンは、パラメータ数が 1400 億を超え、前身の Llama 2 を超える可能性があると報告されています。

Meta は、Llama 3 が画像ベースの質問に応答する機能を含め、GPT-4 の機能に匹敵することを期待しています。しかし、Llama 3 をマルチモーダル (テキストと画像の両方を同時に処理する) にするかどうかの決定は、まだ微調整のプロセスが保留中です。対照的に、OpenAI は最近、テキストからビデオへの生成モデルである Sora をリリースしました。

Meta の内部関係者によると、研究者は Llama 3 を微調整して、ユーザーが難しい質問をしたときに、よりインタラクティブになるようにしているとのこと。重要なのは、難しい質問を完全に却下するのではなく、文脈を提供することです。今後登場するモデルは、複数の意味を持つ単語をよりよく理解できるように設計されています。

Meta の主な目標の 1 つは、魅力的な製品の作成と不適切または不正確な応答のリスクの軽減との間の微妙なバランスを維持しながら、難しいクエリに対する Llama 3 の応答性を高めることでした。 Google は最近、数々の課題に巻き込まれているが、そのなかでも特に目立ちすぎていると批判された AI モデル「Gemini」の問題が目立っている。

その目標を達成するために、Meta は今後数週間以内に社内の担当者を任命し、モデルの出力をより正確にすることを目的とした口調と安全性のトレーニングを監督する予定です。 Meta の基礎 AI 研究チームとは異なり、生成 AI チームが Llama の開発を推進しています。

たとえば、ラマ 3 は、車のエンジンを破壊する方法に関する質問は、実際にはエンジンの耐用年数を終わらせる方法ではなく、エンジンを停止する方法を尋ねていることを理解できるかもしれません。

Llama は、広告ツールの改善とソーシャル メディア アプリの魅力向上を目指す Meta の AI 戦略において重要な役割を果たしています。最近の投資家との話し合いの中で、Meta CEO のマーク・ザッカーバーグ氏は、Llama 3 のリリースや Meta AI アシスタントの改善に向けた継続的な取り組みなど、今年の主要優先事項を強調しました。

<<:  マスク氏はマイクロソフトの論文をOpenAIを訴える根拠として利用した。「あなたたちはすでにAGIを認めている」

>>:  シリコンバレーのアイアンマンがウルトラマンを訴える! GPT-4 がオープンソースになる見込みはありますか?

ブログ    
ブログ    

推薦する

...

2018 年に最も価値のあるオープンソース機械学習プロジェクト 6 つ

2018 年は人工知能と機械学習にとって「収穫」の年でした。特にヘルスケア、金融、音声認識、拡張現実...

...

強化学習でデータ分析を行うにはどうすればいいでしょうか?シンガポール国立大学等によるTKDE 2022レビュー論文

データの処理と分析は基本的かつ広範囲にわたります。アルゴリズムはデータの処理と分析において重要な役割...

ICLR2021 対照学習 NLP 論文進捗レビュー

みなさんこんにちは。私はDiaobaiです。今回は、ICLR2021のNLP分野の論文を6本選んで解...

インスパー・シャオ・シュエ:人工知能はモノのインターネットを「スマート」にする

「人類の発展以来、テクノロジーの継続的な進化により、接続性、インタラクション、オンライン機能が絶えず...

PyTorch を使って完全な NeRF をゼロから構築する

この記事は、Heart of Autonomous Driving の公開アカウントから許可を得て転...

ガートナー:テクノロジープロバイダーの33%が2年以内にAIに100万ドル以上を投資する

ガートナーの新しい調査*によると、人工知能 (AI) 技術計画を持つテクノロジーおよびサービス プロ...

人工知能とモノのインターネットの動的な統合を探る(パート 3)

1. IoT AIによるパーソナライズされたインテリジェントなユーザーエクスペリエンスIoT の人...

Python の基本 + モンテカルロ アルゴリズム (ソース コード付き) を使用して、順列と組み合わせに関する質問を共有します。

[[433465]]みなさんこんにちは。私は Python の専門家です。この記事のタイトルを考え...

...

...

GPT-3 がプログラミングを支配: AI はコーディングの仕事を殺すのか?

[[338796]] 2017年に研究者たちは「2040年までにAIがほとんどのコードを書くように...

...

独自のビッグデータ知識システムを迅速かつ包括的に構築するにはどうすればよいでしょうか?

多くの人がさまざまな種類の本を読み、ビッグデータに関する多くの記事に出会ったことがありますが、それら...