Nvidia Neural Networkがシンプルなスケッチを美しい風景に変えます



喫煙者の滝と健康な人の滝



私たちは皆、フクロウの描き方を知っています。 最初に楕円を描き、次に別の円を描く必要があり、それから豪華なフクロウを手に入れます。 もちろん、これは冗談であり、非常に古いものですが、Nvidiaのエンジニアはこのファンタジーを現実のものにしようとしました。



GauGANと呼ばれる新しい開発は 、非常にシンプルなスケッチ(本当にシンプルなもの-円、線、すべて)から豪華な風景を作成します。 もちろん、この開発は現代の技術、つまり生成的敵対神経回路網に基づいています。



GauGANを使用すると、エンターテイメントだけでなく仕事でも、カラフルな仮想世界を作成できます。 だから、建築家、ランドスケープデザイナー、ゲーム開発者-全員が何か役に立つことを学ぶことができます。 人工知能は、人が望むものをすぐに「理解」し、元のアイデアを膨大な量の詳細で補完します。



「デザイン開発に関するブレーンストーミングは、GauGANの助けを借りて非常に簡単になりました。高品質の画像を追加することで、スマートブラシが初期スケッチを補完できるからです」とGauGANの開発者の1人は述べました。



このツールのユーザーは、最初のアイデアを変更したり、風景やその他の画像を変更したり、空、砂、海などを追加したりできます。 あなたの心が望むすべて、そして追加はほんの数秒で行われます。



ニューラルネットワークは、数百万の画像のデータベースを使用してトレーニングされました。 これにより、システムは、人が何を望んでいるか、そして彼が何を望んでいるかを理解することができます。 さらに、ニューラルネットワークは最小の詳細を忘れません。 そのため、池とその横にあるいくつかの木をスケッチすると、風景が復活した後、近くのすべてのオブジェクトが池の水の鏡に反映されます。



システムは、目に見える表面がどうあるべきかを指定することができます-それは草、雪、水または砂で覆われることができます。 雪が砂になり、雪に覆われた荒れ地の代わりに、アーティストは砂漠の風景を受け取るように、これはすべて瞬時に変換することができます。



「それは、木をどこに置くか、太陽はどこか、空はどこかを示す塗り絵のようなものです。 次に、最初のタスクの後、ニューラルネットワークが画像を活性化し、必要な詳細とテクスチャを追加し、反射を描画します。 これはすべて実際の画像に基づいています」と開発者の一人は言います。





このシステムには現実世界の「理解」がないという事実にもかかわらず、このシステムは印象的な風景を作り出します。 これは、ジェネレーターとディスクリミネーターという2つのニューラルネットワークがここで使用されているためです。 ジェネレーターは画像を作成し、弁別器に表示します。 以前に見た何百万もの画像に基づいて、最も現実的なオプションを選択します。



そのため、ジェネレーターは反射がどこにあるべきかを「知っています」。 このツールは非常に柔軟であり、多数の設定を備えていることに注意してください。 そのため、特定のアーティストのスタイルに合わせて絵を描いたり、日の出や日の入りをすばやく追加したりすることができます。



開発者は、システムはどこかから画像を取得するだけでなく、それらを一緒に追加して結果を得ると主張しています。 いいえ、受信したすべての「画像」が生成されます。 つまり、ニューラルネットワークは、実際のアーティスト(またはそれ以上)のように「作成」します。



これまでのところ、このプログラムはパブリックドメインではありませんが、すぐに作業でテストできます。 これは、現在カリフォルニアで開催されているGPU Technology Conference 2019で行うことができます。 展覧会を訪れることができた幸運な人は、すでにGauGANをテストできます。



ニューラルネットワークは、創造的なプロセスに参加することを長い間教えられてきました。 たとえば、昨年、それらの一部は3Dモデルを作成できました 。 さらに、DeepMindの開発者は、図面、写真、スケッチから3次元空間とオブジェクトを復元するようにニューラルネットワークをトレーニングしました。 単純な図を再作成するには、ニューラルネットワークで1つの画像で十分ですが、より複雑なオブジェクトを作成するには、「ドラッグ」に5つの画像が必要です。



GauGANに関しては、このツールは明らかに価値のある商用アプリケーションを見つけます。ビジネスや科学の多くの分野では、そのようなサービスが必要です。



All Articles