GAN(敵対的学習)ロボティクスTOPGAN(敵対的生成ネットワーク)NVIDIA、スケッチから本物のような風景画像をリアルタイムで変換できるGauGANを発表GAN(敵対的生成ネットワーク)NEWS2019.03.19NVIDIA、スケッチから本物のような風景画像をリアルタイムで変換できるGauGANを発表ShareTweetLINE本日開催されたGPUテクノロジカンファレンスで、NVIDIAはセグメンテーションマップをリアルな写真に変換することができる、敵対的生成ネットワークを用いたモデル「GauGAN」について発表しました。2018に承認されたNVIDIAの研究論文であるpix2pixHDを改良したもので、より少ないパラメータとより生成可能なイメージオプションを持っています。セグメンテーションマップをリアルな画像に変換し、ラフな落書きを驚くほど簡単にフォトリアルな傑作に変えることができます。アニメーションを見てみましょう。人間のオペレータによって単純な絵が描かれると、右側のAIによってリアルタイムで詳細なとことまで絵を完成させてくれます。これは風景写真ではなく、人工知能によって生成された仮想ビーチです。写真を見てみましょう。図からわかるように、GauGANはPhotoshopのレイヤーのようなグラフィックを添付するのではなく、隣接する2つのレイヤー間の対応関係に従ってエッジを調整します。すべて補完することができます。「雪が降った時、空の様子も変化する」ということが学習済みであるため、地面の素材を「snow」に変えた瞬間に空の様子が変化します。合成できる画像の多様さと忠実さは、これまでにはなかった突出したレベルではないでしょうか?デモ動画はこちらGauGANの背後にある秘密とは?ベースとなる部分は2017年にNVDIAが発表したpix2pixHDと同じですpix2pixHDは条件付きGANの一種で、画像をセマンティックラベルドメインに変換し、ラベルドメイン内のオブジェクトを編集してから、イメージドメインに戻すことができ、画像内の木を建物に置き換える、車の色や道路の質感を変える、車を増やすなど、インタラクティブな画像編集が可能です。それに加え、2048×1024の解像度も実現しています。このように、条件付きGANでは、セマンティックセグメンテーションマスクを写実的な画像に変換することができ、コンテンツ生成や画像編集など、幅広いアプリケーションを生み出すことができます。正規化のレイヤを通すと、条件付けしたセンマティックな情報を消してしまうという課題がありました。GauGANでは、センマティック情報が抜け落ちないように内部のネットワークモデルが改良されています。事前に特徴を計算しておき、正規化後に乗せるという形をとっています。この手法は、センマティック画像合成タスクにおける変形タスクにも同様に効果的であり、制御可能な多様化された出力を達成することができる画像合成をサポートしてくれます。論文はこちらこのモデルは建築家や、都市計画者やゲームデザイナー、が仮想世界を素早く合成するのを支援する強力なツールとされており、この技術があれば、「オブジェクトの形を描くだけ」でニューラルネットワークがその形を埋める細部を描いてくれ、誰でも自分のアイデアをリアルな写真にすることができます。ユーザーはスタイルフィルターを追加したり、生成されたイメージを変更して特定の画家のスタイルを調整したり、日中のシーンを日没に変更したりすることもできます。この記事をシェアするLINE記事の内容等について改善箇所などございましたら、お問い合わせフォームよりAI-SCHOLAR編集部の方にご連絡を頂けますと幸いです。関連記事一覧AIが創造性を獲得。近年ホットなディープラーニング。月間GANの発展の歴史を振り返る!GANの包括的なサーベイ...レンダリングを応用した画像セグメンテーション「Poin...低解像度ビデオもすぐに高解像度に変換できる超解像アルゴ...機械学習のためのデータ収集に新たな希望!?半教師学習の...教師あり学習の精度を超えた!?相互情報量の最大化による...たった2行で画像認識モデルの精度向上!?新しいData...「PEGASUS」文章要約に特化した自然言語処理モデル...パラメータ数を激減させる新しい畳み込み「MixConv...Googleが公開した自然言語処理の最新技術、BERT...深層学習×マルチモーダル。お取り扱いについて株式会社wevnal(以下「当社」といいます。)は、AI-SCHOLAR(以下「本サイト」といいます。)をご利用になる方(以下「ユーザー」といいます。)を遵守すると共に、以下のプライバシーポリシー(以下「本プライバシーポリシー」といいます。)に従い、適切に取り扱うものとします。本プライバシーポリシーにおいて、個人情報とは、生存する個人に関する情報であって、当該情報に含まれる氏名、生年月日その他の記述等により特定の個人を識別することができるもの(他の情報と容易に照合することができ、それにより特定の個人を識別することができることとなるものを含みます。)を意味するものとします。当社は、ユーザーの個人情報を、以下の目的で利用いたします。当社は、ユーザーの同意を得て、以下の提供先に、以下の提供情報内容を以下の手段又は方法で提供することがあります。(1)提供先について登録ユーザーが本サイトにおいて資料の請求、閲覧もしくはダウンロードする場合、その資料の提供元である本サイト掲載企業(当該提供元企業から委託を受けた者を含みます。所属企業ではなく、企業に所属する個人が提供元である場合もあります。)に、以下の情報が提供されます。電磁的な方法による送信また、次に掲げる場合は、関係法令に反しない範囲で、ユーザーの同意なく個人情報を第三者に提供することがあります。一部または全部を外部委託することがあります。委託先における個人情報の取扱いについては当社が責任を負います。当社は、個人を特定できないよう加工した統計データを作成することがあります。当社は、統計データを何ら制限なく利用することができるものとします。して、ユーザーご本人に限り、個人情報の開示、訂正、追加または削除、利用停止、ならびに第三者への提供の停止(以下「個人情報の開示等」といいます)を求めることができるものとします。以下の場合は個人情報の変更等に応じないことがあります。他の法令に違反することとなる場合また、当該個人情報の変更等に多額の費用を要する場合、その他の、個人情報の開示等を行うことが困難な場合であって、ユーザーの権利・利益を保護するため必要なこれに代わるべき措置をとるときは、個人情報の変更等に応じないことがあります。当社サービスは、Cookie及びこれに類する技術を利用することがあります。これらの技術は、当社による当社サービスの利用状況等の把握に役立ち、サービス向上に資するものです。Cookieを無効化されたいユーザーは、ウェブブラウザの設定を変更することによりCookieを無効化することができます。Cookieを無効化すると、当社サービスの一部の機能をご利用いただけなくなる場合があります。当社は、法令等の定めがある場合を除き、必要に応じて、本プライバシーポリシーを変更することができるものとします。プライバシーマークに関して当社は、プライバシーマークの認証を取得しています。パスワードをお忘れの。