OpenAI、超知能AIの制御に関する中核的な技術的課題に取り組むため新チームを結成

OpenAI、超知能AIの制御に関する中核的な技術的課題に取り組むため新チームを結成

7月7日、OpenAIは、共同設立者で主任科学者のイリヤ・スツケバー氏とアラインメント責任者のヤン・ライケ氏が率いる新チームを結成し、次世代の「超知能人工知能システム」を誘導・制御する方法を模索すると発表した。

同チームは現在、最高優先度を持ち、同社のコンピューティングリソースの20%を使用する権利を持っていると報じられている。目標は、今後4年以内に「超知能AIの制御」という中核的な技術的課題を解決することだ。研究チームは、人間よりもはるかに賢いAIシステムを誘導し、制御するためには「科学的かつ技術的な」進歩を遂げる時間が必要だと主張している。

研究者のスツケバー氏とライケ氏は、「次世代の超知能AI」が10年以内に誕生する可能性があると考えている。これはこれまで人類が発明した技術の中で最も影響力のあるものとなり、本来は解決に多くの人的資源を必要としていた多くの問題を人類が解決するのに役立つ可能性がある。しかし研究者たちは、この技術が人類に逆効果をもたらし、その強大な力によって人類が主権を失ったり、絶滅したりする可能性があるとも考えている

研究チームは、「人間よりも賢いAIシステムが人間の意図に従うことを保証する」という点では、潜在的な超知能AIを誘導または制御するための合理的な解決策が現在存在しないと述べた。現在、人間はフィードバックを使用してAIに生成プロセスを調整させることしかできず、人間はAIシステムを根本から確実に監視することはできない

OpenAI は、ほぼ人間レベルのパフォーマンスを発揮する AI「自動アライメント研究者」を構築し、その後、大量のディープラーニングを使用して AI の能力を拡大し、そのスーパーインテリジェンスを反復的に調整することを計画しています。

これを実現するために、研究者はスケーラブルなトレーニング方法を開発し、その結果得られたモデルを検証し、最後にモデルを一連の制御可能性テストにかける必要があります。

IT Home は、研究者らが現在、この AI システムを使用して他の AI システム (スケーラブルな監督) の評価を支援することを計画していることを発見しました。彼らはまた、人間の研究者が監督できないタスクにモデルがどのように監督を一般化しているかを理解し、制御したいと考えています

スツケヴァー氏とライケ氏は、研究が進むにつれて、将来的には研究の焦点が変化し、新たな研究分野が出現する可能性もあると予想していると述べた。

現在、この新しいチームでは機械学習の研究者やエンジニアを募集中です。 Sutskever 氏と Leike 氏は、次世代の超知能 AI の問題を解決するには、より多くの機械学習の専門家を採用することが非常に重要だと考えています。チームの研究成果を広く共有し、業界全体の進歩を促進する予定です。

新しいチームの研究は、ChatGPTのような現在のモデルの安全性を向上させるとともに、AIの誤用、経済混乱、偽情報、偏見や差別、依存症、過度の依存など、AIがもたらすその他のリスクを理解し、軽減するというOpenAIの既存の研究を補完するものである。新しいチームは、超知能 AI システムと人間の意図を組み合わせる機械学習の課題に重点的に取り組みますが、私たちの技術的ソリューションがより広範な人間的および社会的問題を考慮に入れるように、関連する社会技術的問題に関して学際的な専門家と積極的に協力しています。

<<: 

>>:  エコノミスト:AI産業の急成長によりサンフランシスコの雇用は38%回復

ブログ    
ブログ    
ブログ    
ブログ    

推薦する

ChatGPT 使用時に遭遇する落とし穴

最近、ChatGPT を使用しているときに小さな問題に遭遇しました。特殊な状況のため、syslog ...

...

倪光南学士がRAG技術、AIエージェント、AI倫理的課題について語る

中国工程院の院士である倪光南氏は、第2回北京人工知能産業革新発展会議で人工知能の発展に関する見解と経...

「地表」から「宇宙」まで、探査ロボットが未知の領域の秘密を解き明かす

ロボットは現代社会で生み出された新しい種です。科学技術の進歩により、ロボットの開発はもはや人間の能力...

人工知能、機械学習、データマイニング、データ分析の関係は何ですか?

人工知能は現在、注目されている分野です。すべてのインターネット企業や著名人が、人工知能はインターネッ...

ひどい、顔認識の練習のための40行のコード

最近、恐れることなく赤信号を無視していた人々が交通警察署に電話し、交通警察のおじさんに自分の写真を削...

...

開発者の「第2の脳」が登場、GitHub Copilotがアップデートされ、人間の開発参加がさらに減少

Andrej Karpathy 氏が嘆くのは、ソフトウェア開発プロセスにおいてコードを直接記述するこ...

...

新しいことを学び、古いものを見直す: ナレッジグラフからグラフデータベースへ

人工知能技術といえば、まずディープラーニングや機械学習技術が思い浮かびます。人工知能の応用といえば、...

ニューラルスタイル転送アルゴリズムで絵を描くことを学習する人間は、芸術分野で人工知能に負けるのでしょうか?

人工知能はますます多用途になり、すでに私たちの仕事のすべてを人工知能が引き継ぐことができるようです。...

未来はここにある: データが大規模 AI モデルにおける競争をどう促進するか

人工知能の急速な発展に伴い、高品質なデータの重要性がますます明らかになっています。大規模言語モデルを...

...