手軽にリアルな絵を生成 粗いマスク指定とテキスト入力で :Innovative Tech

今回は「手軽にリアルな絵を生成 粗いマスク指定とテキスト入力で :Innovative Tech」についてご紹介します。

関連ワード (画像処理、研究、風景等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、It Media News様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


Innovative Tech:

このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。

 スイス・チューリッヒ工科大学の研究チームが開発した「」は、ユーザーが手描きで大雑把に指定したマスク(画像処理ソフトなどで使われる領域指定)とテキスト記述や属性から、もっともらしいリアルな絵を生成する深層学習フレームワークだ。

 手描きマスクからリアルな絵を生成する従来の技術には大規模なラベル付きデータが必要で、複雑な形状やオブジェクトから構成される絵の合成はできなかった。オブジェクトを削除すると不自然な部分が残ってしまう問題もあった。

 今回の手法では、オブジェクトの形状やクラスを制御するための大雑把な手描きマスクと、スタイルやテクスチャを制御するためのテキスト入力を組み合わせた新しいモデルを導入する。

 マスクを使った画像操作ではオブジェクトの形状やサイズ、移動、削除、追加などが実行でき、属性や自然言語による説明でシーンとそのオブジェクトの色や素材、天気、風景などのスタイルを制御できる。

 今回のフレームワークは、自動的に生成されたマスクを使用しラベルマップを作成している。なぜなら、セグメンテーションマスクに基づく弱教師あり学習と比較して、このプロセスは不自然なオブジェクトの発生が少なく、新しいデータセットでラベル付けする際に労力を抑えられるからだ。

 学習したモデルを従来方式と比較した結果、実画像との類似性を評価するFIDスコアで、より高い数値を示した。

Copyright © ITmedia, Inc. All Rights Reserved.

画像処理.com | キーエンス

ラインの効率化や不良品検査など、FAを考える上で切っても切れない「画像処理」。「画像処理.com」は、画像処理を基礎から徹底解説するサイトです。株式会社キーエンスが運営しています。

リモートセンシング画像処理フリーソフトウェア提供サイト ...

リモートセンシング(Remote sensing)の活用・利用、リモートセンシング画像処理方法・画像解析方法、リモートセンシング画像処理ソフトの無料提供、リモートセンシングソフトの情報提供、衛星画像データのダウンロード方法、リモートセンシング技術の紹介サイトです

惑星の画像処理方法 | 天体写真の世界

デジタルカメラの動画機能を使って撮影した惑星写真の画像処理方法を記載しています。最新のデジタル機材と望遠鏡を使って、いろいろな天体を撮影している天体写真家のページです。

【画像処理】フーリエ変換の原理・実装例 | 西住工房

 · 画像処理におけるフーリエ変換 フーリエ変換は周波数解析ができる便利なデータ変換です。 画像に対しても利用できます。 ただし、周波数の考え方が通常の信号とは異なるので注意する必要が …

画像処理におけるフーリエ変換④〜pythonによるフィルタ設計 ...

 · 画像処理のフーリエ変換において忘れてはいけないのがフィルタ設計です。ハイパスフィルター、ローパスフィルタ、バンドパスフィルタなど聞いたことがある人もいらっしゃると思いますが、その類です。フィルタを上手に設計することで画像をもっと見やすくしたり必要な情報を取り出し ...

Mac(マック)で使える無料の画像編集・加工アプリとツー …

Macで使えて、無料かつ簡単に画像編集・加工ができるアプリを紹介します。クオリティの高い画像に仕上げられるものばかりなので、お気に入りの画像編集・加工アプリとツールを見つけてください。

前処理フィルタについて | 画像処理.com | キーエンス

前処理フィルタの種類と原理、選定方法についてご紹介。レンズの選定や照明の設定、位置決めなど様々なノウハウが集約。「画像処理.com」は、画像処理を基礎から徹底解説するサイトです。株式会社キーエンスが運営しています。

写真の一部分をきれいに切り取る方法 [CG・画像加工] All About

写真の一部分だけを切り取り、ほかの写真に合成するときには、「選択」という作業が必要です。一般的に「選択ツール」と呼ばれる道具類を使って、被写体の形に添ってきれいに切り取る方法を解説します。

コマンドで画像を一括処理! ImageMagickの便利な使い方 ...

多くの画像フォーマットに対応したソフトウェア「ImageMagick」を使って、画像をコマンドで一括処理することを可能にする便利なテクニックを紹介します。

【図解】検査装置のカメラとは?画像処理とは?おすすめの ...

検査装置で使われるカメラと画像処理について紹介しています。初めに、CCDカメラからの画素データについて紹介し、カメラのシステム構成を図説しています。画像処理については、前処理と画像処理の例を表で紹介しています。最後に、カメラと画像処理をメインとした検査装置に関わるメーカー5社の紹介をしています。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
マイクロソフト、AIで「Teams」を強化へ–「背後に映る部屋の美化」などが可能に
IT関連
2023-11-17 09:40
デジタル証券プラットフォームiSTOXがシリーズAで約52億円調達、日本政策投資銀行やJICが新たに支援
フィンテック
2021-01-23 10:49
時代は“脱ハンコ”へ コロナ禍で進む「電子契約/電子署名」の将来 慶応大の手塚教授に聞く
PR
2021-08-18 02:09
DeepL、新たな投資提携を受けAI研究を高度化
IT関連
2023-01-14 18:31
NTT東、「株式会社NTT Risk Manager」設立へ–東京海上日動、トレンドマイクロと共同
IT関連
2022-06-17 01:58
電動自転車やカーシェアリング車両などの交通データで都市のデジタル変革を支援するPopulusが約5.5億円調達
モビリティ
2021-03-13 23:14
スギ薬局が進める、クーポン配信の最適化–ばらまかずに売上110%実現
IT関連
2023-09-14 04:57
配送サービスの急増で混雑する道路の路肩スペース管理を請け負うスタートアップAutomotusに投資家も注目
モビリティ
2021-03-29 01:55
DuckDuckGo、「Windows」向けデスクトップブラウザーのパブリックベータ版を公開
IT関連
2023-06-24 02:50
ヒザを痛めた人用のスマート装具をRoam Roboticsが開発
ロボティクス
2021-05-02 12:32
Meta初の独自開発AIチップ「MITA」とは
IT関連
2023-05-27 21:31
評価が分かれる自動運転車初期のパイオニア、その最新ムーンショットは暗号資産を利用したピア・ツー・ピアの通信ネットワーク
IT関連
2022-02-23 23:37
逆のアプローチ、スプレッドシートにアプリを組み込もうとしている「Spreadsheet.com」
ソフトウェア
2021-07-25 06:11
主要なSaaSをまとめて抽象化し、SQLでデータを取得可能にするクラウドサービス「CData Connect」[PR]
CData
2022-05-23 03:31