Stability AI は、プログラミング用の最初の生成 LLM AI 製品である StableCode を発表しました。この製品は、プログラマーが日常業務を完了するのを支援し、初心者開発者に実用的な学習ツールを提供するように設計されています。 公式紹介によると、StableCode は 3 つの異なるモデルを使用して開発者がコードを記述するのに役立つ独自の方法を提供し、それによって開発効率を向上させます。ベースモデルは、まず BigCode スタックデータセット (v1.2) の複数のプログラミング言語を使用してトレーニングされ、その後、Python、Go、Java、Javascript、C、マークダウン、C++ などの一般的な言語を使用してさらにトレーニングされます。合計で、彼らは HPC クラスター上で 5600 億トークンのコードを使用してモデルをトレーニングしました。 基本モデルが構築されると、Stability AI は特定のユースケースに合わせて命令モデルを調整し、複雑なプログラミング タスクの解決を支援します。この結果を達成するために、研究者たちは、Alpaca 形式の約 120,000 個のコード命令/応答ペアで基本モデルをトレーニングしました。 StableCode Instructを使用して、指定された命令に応じてコードを生成します。 StableCode は、コーディングについてさらに学びたい開発者にとって理想的な構成要素であり、ロングコンテキスト ウィンドウ モデルは、ユーザーが単一行および複数行のオートコンプリート提案を使用できるようにするための完璧なアシスタントです。 このモデルは、一度により多くのコード(16,000 トークンのコンテキスト ウィンドウを持つ以前に公開されたオープン モデルの 2 ~ 4 倍)を処理できるように設計されており、ユーザーは最大 5 つの平均サイズの Python ファイルに相当するものを同時に表示または編集できます。より大きな挑戦に挑戦したい初心者にとって理想的な学習ツールになります。 StableCode は Pytorch ディープラーニング ライブラリを使用して、比較的複雑な Python ファイルを完成させます (灰色のテキストは StableCode の予測です) 最後に、StableCode の評価データを見てみましょう。 |
<<: 調査レポート:世界中の企業の75%が職場でのChatGPTの使用を禁止または禁止を検討中
>>: AIGCのビジネス:アクセンチュアが30億ドルを投資した理由
[[431306]]この記事はAI新メディアQuantum Bit(公開アカウントID:QbitAI...
最近、NVIDIA チームは、8T トークンでトレーニングされた 150 億のパラメータを持つ新しい...
近年、人工知能の倫理的問題についての議論が盛んに行われている。最近終了した中国コンピュータカンファレ...
[[342088]]基本的なデータ構造の統合は、大規模システムの基礎となります。たとえば、Redis...
この記事はAI新メディアQuantum Bit(公開アカウントID:QbitAI)より許可を得て転載...
今日のロボットで重要な役割を果たしているいくつかの主要なセンサー技術には、磁気位置センサー、存在セン...
西オーストラリア大学の研究者らは、交通渋滞を緩和するために設計された無人運転車が逆の効果をもたらして...
次世代ネットワークにおける「見える化」への欲求ネットワークが複雑になるにつれて、ネットワーク管理に対...
近年、スマートカーの継続的な発展に伴い、LIDARはますます注目を集めており、特にテスラと他の自動車...
人間社会が発展するにつれて、知性は新たな生産要素になりました。近年、人工知能産業の発展は爆発的な成長...