人工知能「XiaoIce」がデザイナーに変身した経緯が明らかに

最近、一部のネットユーザーは、ファッションブランドSELECTEDがWeChat公式アカウントでMicrosoft Xiaoiceをアシスタントデザイナーとして採用し、両者が共同で「都市のスカイライン」をテーマにしたTシャツを発売することを発表したことを発見した。これは、マイクロソフトが数か月前にXiaoIceが人工知能の創造性を持ち、詩人や歌手になったと発表した後の新たな動きである。

[[201427]]

Tシャツのデザインプロセスは、以前の創作モデルと似ています。Xiaoiceも、あるインスピレーションの源を特定することから始まります。違いは、以前は写真が啓示として使用されていたのに対し、今回は歌やオーディオクリップが創作の出発点として使用されたことです。

それぞれの曲には異なるメロディーとリズムがあるため、歌う人によって感情や気持ちも異なります。 Xiaoice は、曲ごとに都市の特徴を持つさまざまなスカイラインを描き、また、憂鬱、リラックス、興奮など、歌手が伝えるさまざまな感情に応じてスカイラインを描きます。

作者と同じ疑問を持つ人もいるだろう。詩人としてデビューした時、小氷は絵を特定し、それをいわゆるインスピレーションとして詩を創作した。しかし、このいわゆるインスピレーションは人間には説明できない。マイクロソフトの役員でさえ、このインスピレーションはブラックボックスの創造であると説明した。すべては小氷の自発的なものであり、原理を知る者は誰もいなかった。この作品はどんな感じでしょうか？これも説明できないのでしょうか？

筆者は、その理由を分析するために、業界の専門家数名に連絡を取った。今回のXiaoIceの音楽デザイン作成は、計算音楽学モデルに基づいており、曲のリズム、メロディー、コードカラー、感情などの特徴を分析し、意味空間全体のディープニューラルネットワークを通じて、画像と音楽の特徴を一致させるように作成した。

簡単に言えば、シャオビンはまず各都市のランドマーク的な建物などの要素を学び、その後、絵を描く過程で、主に曲のリズムとメロディーに基づいてデザインします。同時に、以前に学んだ基礎に基づいて、メロディーの特徴に合ったスカイラインの輪郭を描き、歌手が伝える独特の感情を使用して、その感情を最もよく表現する絵画スタイルをレンダリングします。