マイクロソフトは、劣化が著しい古い写真を復元できる新しいアルゴリズムを開発した。

海外メディアの報道によると、マイクロソフト研究チームのZiyu Wan氏、Zhang Bo氏らは、ディープラーニング手法を通じて、劣化が著しい古い写真を復元できる人工知能に基づく新しいアルゴリズムを開発したという。教師あり学習によって解決できる従来の修復タスクとは異なり、実際の写真の劣化はより複雑であり、合成画像と実際の古い写真との間のドメインの違いにより、ネットワークは一般化することができません。

この新しい技術は、実際の写真と多数の合成画像を使用した新しい 3 ドメイン翻訳ネットワークを提案します。具体的には、古い写真ときれいな写真をそれぞれ 2 つの潜在空間に変換する 2 つの変分オートエンコーダ (VAE) をトレーニングしました。これら 2 つの潜在空間間の変換は、合成ペアデータによって学習できます。

コンパクト潜在空間ではドメインギャップが閉じられているため、この変換は実際の写真にうまく適用できます。古い写真に複数の劣化が混在する問題に対処するため、傷やほこりなどの構造上の欠陥と、ノイズやぼやけなどのローカルブランチを対象とするグローバルブランチとローカル非ローカルブランチを設計しました。潜在空間の 2 つのブランチを融合すると、複数の欠陥から古い写真を回復する能力が向上します。この方法は、画像復元の視覚的品質の点で既存の方法よりも優れています。

技術デモビデオ

しかし残念ながら、Microsoft はこのテクノロジをテストするためのデモ Web サイトをまだ提供していません。