OpenAI、超知能AIの制御に関する中核的な技術的課題に取り組むため新チームを結成

OpenAI、超知能AIの制御に関する中核的な技術的課題に取り組むため新チームを結成

7月7日、OpenAIは、共同設立者で主任科学者のイリヤ・スツケバー氏とアラインメント責任者のヤン・ライケ氏が率いる新チームを結成し、次世代の「超知能人工知能システム」を誘導・制御する方法を模索すると発表した。

同チームは現在、最高優先度を持ち、同社のコンピューティングリソースの20%を使用する権利を持っていると報じられている。目標は、今後4年以内に「超知能AIの制御」という中核的な技術的課題を解決することだ。研究チームは、人間よりもはるかに賢いAIシステムを誘導し、制御するためには「科学的かつ技術的な」進歩を遂げる時間が必要だと主張している。

研究者のスツケバー氏とライケ氏は、「次世代の超知能AI」が10年以内に誕生する可能性があると考えている。これはこれまで人類が発明した技術の中で最も影響力のあるものとなり、本来は解決に多くの人的資源を必要としていた多くの問題を人類が解決するのに役立つ可能性がある。しかし研究者たちは、この技術が人類に逆効果をもたらし、その強大な力によって人類が主権を失ったり、絶滅したりする可能性があるとも考えている

研究チームは、「人間よりも賢いAIシステムが人間の意図に従うことを保証する」という点では、潜在的な超知能AIを誘導または制御するための合理的な解決策が現在存在しないと述べた。現在、人間はフィードバックを使用してAIに生成プロセスを調整させることしかできず、人間はAIシステムを根本から確実に監視することはできない

OpenAI は、ほぼ人間レベルのパフォーマンスを発揮する AI「自動アライメント研究者」を構築し、その後、大量のディープラーニングを使用して AI の能力を拡大し、そのスーパーインテリジェンスを反復的に調整することを計画しています。

これを実現するために、研究者はスケーラブルなトレーニング方法を開発し、その結果得られたモデルを検証し、最後にモデルを一連の制御可能性テストにかける必要があります。

IT Home は、研究者らが現在、この AI システムを使用して他の AI システム (スケーラブルな監督) の評価を支援することを計画していることを発見しました。彼らはまた、人間の研究者が監督できないタスクにモデルがどのように監督を一般化しているかを理解し、制御したいと考えています

スツケヴァー氏とライケ氏は、研究が進むにつれて、将来的には研究の焦点が変化し、新たな研究分野が出現する可能性もあると予想していると述べた。

現在、この新しいチームでは機械学習の研究者やエンジニアを募集中です。 Sutskever 氏と Leike 氏は、次世代の超知能 AI の問題を解決するには、より多くの機械学習の専門家を採用することが非常に重要だと考えています。チームの研究成果を広く共有し、業界全体の進歩を促進する予定です。

新しいチームの研究は、ChatGPTのような現在のモデルの安全性を向上させるとともに、AIの誤用、経済混乱、偽情報、偏見や差別、依存症、過度の依存など、AIがもたらすその他のリスクを理解し、軽減するというOpenAIの既存の研究を補完するものである。新しいチームは、超知能 AI システムと人間の意図を組み合わせる機械学習の課題に重点的に取り組みますが、私たちの技術的ソリューションがより広範な人間的および社会的問題を考慮に入れるように、関連する社会技術的問題に関して学際的な専門家と積極的に協力しています。

<<: 

>>:  エコノミスト:AI産業の急成長によりサンフランシスコの雇用は38%回復

ブログ    

推薦する

OpenAI、リーダーシップ争いの末に新事業GPTストアを立ち上げ

ChatGPT Team は OpenAI の Enterprise Edition 製品の小型版で...

...

ミッドジャーニー創設者:著作権の問題に対する解決策は今のところなく、AI生成画像はアーティストに取って代わることを意図したものではない

ミッドジャーニー火災以降、アーティストの道はますます狭くなっていった。最近、Midjourney や...

米裁判所、人工知能コンピューターは発明を特許できないと判決

[[421713]]人工知能(AI)がその発明に対して特許を申請できるかどうかに関して、米国連邦政府...

国際翻訳コンテストで優勝したモデルがByteDanceによってオープンソース化された。

Transformer などの主流のテキスト生成アルゴリズムの単語単位の生成は、並列計算に適した ...

これはアリババに入社してジャック・マーと一緒に働けるようになる良いニュースです。これを逃すと何年も待たなければなりません。

ジャック・マーがあなたをアリババに来て一緒に働くように呼んでいます〜これ以上くだらないことは言いませ...

ソラは人間の代わりにはなれない!アマゾンのエンジニアは主張:実際の仕事上の対立はAIでは解決できない

今週、OpenAIのビデオAIツール「Sora」が登場するや否や大きな話題を呼んだ。 「仕事を失う」...

運営:申し訳ありませんが、当社は責任を負いかねます

[51CTO.com より引用] 運用保守というと、多くの人が無意識のうちに運用保守担当者を「スケー...

リアルタイムのテキストおよび画像処理の速度が 5 ~ 10 倍向上しました。Tsinghua LCM/LCM-LoRA は人気を博し、視聴回数は 100 万回を超えました。

テキストから作成された画像や写真から作成された画像は、新しいものではありません。しかし、これらのツー...

Python が Java や C/C++ に勝って機械学習に最適な言語である理由!

Python は、1989 年にオランダ人の Guido van Rossum によって発明され、...

...

汎用人工知能(AGI)の分野で達成すべき4つの大きなマイルストーン

GPT と GAN で多くの進歩があったにもかかわらず、AGI は解決が難しい問題のままです。本質的...

人工知能の大学が雨後の筍のように次々と誕生しています。そこでは何を教えるのでしょうか?どのように教えるか?

[[240090]] 2018年グローバル人工知能製品アプリケーション博覧会で、来場者がテーマポス...

人工知能が気候変動対策に革命を起こす6つの方法

気候変動は現在人類が取り組むべき最も重要な課題の一つとなっています。この急速に拡大する危機には、その...

...