ニューラルネットワークに基づくマルウェア検出分析

ニューラルネットワークに基づくマルウェア検出分析

今日、あらゆる業界にとって、「マルウェアを効果的に検出する方法」は、ネットワーク セキュリティに関する共通の問題となっています。マルウェア感染インシデントは、数百万ドルの経済的損失をもたらす可能性があります。現在のウイルス対策製品やマルウェア検出ツールは、一般的にシグネチャベースの検出テクノロジを使用しており、既知のさまざまな種類のマルウェアを識別するために一連のルールを手動で設定する必要があります。しかし、相対的に言えば、この方法は対象を絞ったものであり、新しいタイプのマルウェアを識別することはできません。

ほとんどの環境では異なるコードが使用され、毎日何百万もの新しいマルウェアが作成されるため、このアプローチは非常に非効率的です。したがって、急速に変化する現在のマルウェア エコシステムに適用できる検出テクノロジが緊急に必要であり、機械学習はまさに必要なものである可能性があります。

実際、多くのスタートアップ企業やサイバーセキュリティ企業が、機械学習をベースにしたセキュリティ検出システムの開発に着手しています。これらの企業は通常、高品質なシステムを開発するために、特徴量エンジニアリングやデータ分析に多くの人的資源と物的資源を費やしますが、実際には、特徴量エンジニアリングを介さずにオペレーティングシステムやハードウェア全体でマルウェアを検出できる一連の技術を開発することができます。詳細については、最新の調査レポートを参照してください。

このレポートでは、悪意のある Windows 実行可能ファイルを検出するようにトレーニングできる人工ニューラル ネットワークを紹介しています (実行可能ファイルの生のバイト シーケンスのみが入力として使用されます)。この方法には、次の利点があります。

  1. 手動でのコンパイルやコンパイラ関連の知識は必要ありません。これは、トレーニングされた分析モデルが非常に適用性が高く、マルウェアの自己進化に適応できることを意味します。
  2. 計算の複雑さはシーケンスの長さに比例するため、大きなファイルに適しています。
  3. バイナリ コード内の重要なサブ領域を識別して法医学的分析を行うことができます。
  4. このアプローチは、新しいファイル形式、コンパイラ、命令セット構造でも機能します。必要なのはトレーニング データとモデルだけです。

したがって、マルウェア監視のために機械学習を使用してマルウェアの生のバイトシーケンスを分析および識別することは、機械学習コミュニティにおける有望な研究分野になると考えています。

ディープラーニングをマルウェア検出に適用する際の難しさは何ですか?

最近、研究者たちはニューラル ネットワークをコンピューター ビジョン、音声認識、自然言語処理に適用することに成功していますが、この成功の理由の 1 つは、生データ (ピクセルやテキストの個々の文字など) から特徴を学習できることです。したがって、これらの成功事例にヒントを得て、実行可能ファイルの元の文字を使用してニューラル ネットワークをトレーニングし、対象ファイルが悪意のあるものであるかどうかを判断できるようになるかもしれません。これが実現できれば、マルウェア検出ツールを大幅に簡素化でき、検出精度が向上するだけでなく、マルウェアのわかりにくいが非常に重要な特性を特定できるようになります。

しかし、ディープラーニングをマルウェア検出の分野に適用するには、解決すべき問題がまだ多く残っています。たとえば、Microsoft の Windows PE マルウェアの場合、解決する必要がある問題は次のとおりです。

  1. 入力シーケンス内の 1 つの文字を単位として扱うということは、約 200 万の時間ステップでシーケンス分類問題を処理することを意味します。私たちの知る限り、これはこれまでのニューラル ネットワーク ベースのシーケンス分類器の入力長をはるかに超えています。
  2. マルウェアのバイトには、人間が読めるテキスト、バイナリ コード、画像などの任意のオブジェクトなど、さまざまな形式の情報が含まれている可能性があります。また、一部暗号化されたコンテンツも含まれています。
  3. 関数間の呼び出しコマンドやジャンプコマンドは並べ替えることができるため、関数間には複雑な空間相関関係が存在します。

解決

これらの課題と問題に対応するために、私たちは多数の異なるニューラル ネットワーク構造をテストしましたが、前述の課題により、一般的ではないニューラル ネットワーク構造とパラメーターを試す必要がありました。

モデルを設計する際には、主に次の 3 つの機能を考慮しました。

  1. 計算とメモリ使用量においてシーケンスの長さを効率的にスケーリングする機能。
  2. ファイル全体をインストルメント化するときにローカル環境とグローバル環境を考慮する機能。
  3. マルウェアマーカーの分析を支援する機能。

最後に、設計できる最も適切なマルウェア検出ネットワーク モデルを次の図に示します。

データとモデルのトレーニング

このネットワークをトレーニングおよび検証するために、2 セットのデータ セットを使用しました。最初のトレーニング セット グループ A は、オープン ソース データから収集しました。グループ A には、43,967 個の悪意のあるファイル サンプルと 21,854 個の無害なファイル サンプルが含まれています。 2 番目のグループ (グループ B) のサンプルは、産業用ウイルス対策ベンダーによって提供され、実際の攻撃シナリオにおける悪意のあるファイルと無害なファイル サンプル (合計 400,000 個のファイル サンプル、それぞれ半分ずつ) が含まれています。しかし、実験の後半では、1,011,766 個の悪意のあるファイル サンプルを含む 2,011,786 個の固有のバイナリ ファイル サンプルを含む、より多くのトレーニング コーパス (グループ B) を受け取りました。ニューラル ネットワーク モデルの収束をタイムリーに得るには、大量のデータ セットを使用してネットワークをトレーニングする必要があります。

トレーニングと分析の結果を下の図に示します。

結果から、私たちのモデルはグループ A のトレーニング データセットに最も適しており、次いでグループ B に適していることがわかります。しかし、より大きなコーパス(200 万のテスト文書)を使用してトレーニングを続けると、ネットワーク モデルが継続的に改善されることがわかりました。

要約する

マルウェア検出は確かに有望な研究分野であるため、この研究が機械学習コミュニティにマルウェア検出の分野をより積極的に探求するよう促すことを願っています。ディープラーニングは画像、信号、自然言語処理において目覚ましい成果と進歩を達成しているため、これらの技術をマルウェア検出などのまったく異なる分野に拡張できる可能性があります。

<<:  水滴事件の裏側:スマート監視下では逃げ場はなく、カモフラージュやマスク着用も無意味!

>>:  人工知能がとても人気ですが、機械学習とディープラーニングの違いがわかりますか?

ブログ    
ブログ    
ブログ    
ブログ    

推薦する

世界で最も賢い人たちは AI についてどう考えているのでしょうか?彼らは13の主要な発展傾向を予測している

[[219763]]著者:ROSIEBROWN編纂者:彭祥偉、江宝尚、小玉ウォール・ストリート・ジャ...

顔認識はどのような技術サポートに依存していますか?個人のプライバシーが漏洩するでしょうか?

[51CTO.com からのオリジナル記事] 顔認識技術は新しいものではありません。多くの人が携帯...

...

面接中にアルゴリズムの質問を解く際にプログラマーが知っておくべきこと

面接でアルゴリズムのみをテストする質問は、一般的に多くのプログラマーの友人から嫌われます。ここでは、...

理解すべき記事:この流行は7大テクノロジー企業を襲い、彼らがどう対応したかを見る

[[317397]]新型コロナウイルスが世界各国に広がるにつれ、世界のテクノロジー業界やインターネッ...

2019年に解決すべき11のAI倫理的ジレンマ

ビッグデータダイジェスト制作編集者: Luan Hongye、Aileen今こそAIの倫理について議...

...

...

ローカル AI: スマートフォン時代の低消費電力分析

人工知能にはボトルネック問題があります。これはディープ ニューラル ネットワークに基づいており、数億...

Megvii Technologyがロボット協調ネットワーク頭脳「Hetu」をリリース、エコシステムの改善に20億元を投資

現在、モノのインターネットの将来の発展方向は非常に明確であり、それが AIoT です。 AIは頭脳で...

2020年のコロナウイルスパンデミックが仕事の未来に与える影響

[[323304]] [51CTO.com クイック翻訳] 疫病の影響により、多くの企業従業員がリモ...

AI面接官はこんなに簡単に騙される!本棚の写真を動画の背景として使用すると好感度が 15% 上昇します

この記事はAI新メディアQuantum Bit(公開アカウントID:QbitAI)より許可を得て転載...

2027年のAIはどのようになっているでしょうか?ヒントは、あなたの脳の中にあります。

やっていることをやめて、窓の外の鳥やリス、昆虫などを眺めてみましょう。これらの生物は、食物を見つけた...

今後 20 年間で AI はすべての業界にどれほどの影響を与えるでしょうか?営業担当者も入れ替わるのでしょうか?

JD.comでは以前から物流ロボットを活用しているといわれています。東莞市麻容のJD仕分けセンター...