手軽にリアルな絵を生成 粗いマスク指定とテキスト入力で :Innovative Tech

今回は「手軽にリアルな絵を生成 粗いマスク指定とテキスト入力で :Innovative Tech」についてご紹介します。

関連ワード (画像処理、研究、風景等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、It Media News様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


Innovative Tech:

このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。

 スイス・チューリッヒ工科大学の研究チームが開発した「」は、ユーザーが手描きで大雑把に指定したマスク(画像処理ソフトなどで使われる領域指定)とテキスト記述や属性から、もっともらしいリアルな絵を生成する深層学習フレームワークだ。

 手描きマスクからリアルな絵を生成する従来の技術には大規模なラベル付きデータが必要で、複雑な形状やオブジェクトから構成される絵の合成はできなかった。オブジェクトを削除すると不自然な部分が残ってしまう問題もあった。

 今回の手法では、オブジェクトの形状やクラスを制御するための大雑把な手描きマスクと、スタイルやテクスチャを制御するためのテキスト入力を組み合わせた新しいモデルを導入する。

 マスクを使った画像操作ではオブジェクトの形状やサイズ、移動、削除、追加などが実行でき、属性や自然言語による説明でシーンとそのオブジェクトの色や素材、天気、風景などのスタイルを制御できる。

 今回のフレームワークは、自動的に生成されたマスクを使用しラベルマップを作成している。なぜなら、セグメンテーションマスクに基づく弱教師あり学習と比較して、このプロセスは不自然なオブジェクトの発生が少なく、新しいデータセットでラベル付けする際に労力を抑えられるからだ。

 学習したモデルを従来方式と比較した結果、実画像との類似性を評価するFIDスコアで、より高い数値を示した。

Copyright © ITmedia, Inc. All Rights Reserved.

画像処理.com | キーエンス

ラインの効率化や不良品検査など、FAを考える上で切っても切れない「画像処理」。「画像処理.com」は、画像処理を基礎から徹底解説するサイトです。株式会社キーエンスが運営しています。

リモートセンシング画像処理フリーソフトウェア提供サイト ...

リモートセンシング(Remote sensing)の活用・利用、リモートセンシング画像処理方法・画像解析方法、リモートセンシング画像処理ソフトの無料提供、リモートセンシングソフトの情報提供、衛星画像データのダウンロード方法、リモートセンシング技術の紹介サイトです

惑星の画像処理方法 | 天体写真の世界

デジタルカメラの動画機能を使って撮影した惑星写真の画像処理方法を記載しています。最新のデジタル機材と望遠鏡を使って、いろいろな天体を撮影している天体写真家のページです。

【画像処理】フーリエ変換の原理・実装例 | 西住工房

 · 画像処理におけるフーリエ変換 フーリエ変換は周波数解析ができる便利なデータ変換です。 画像に対しても利用できます。 ただし、周波数の考え方が通常の信号とは異なるので注意する必要が …

画像処理におけるフーリエ変換④〜pythonによるフィルタ設計 ...

 · 画像処理のフーリエ変換において忘れてはいけないのがフィルタ設計です。ハイパスフィルター、ローパスフィルタ、バンドパスフィルタなど聞いたことがある人もいらっしゃると思いますが、その類です。フィルタを上手に設計することで画像をもっと見やすくしたり必要な情報を取り出し ...

Mac(マック)で使える無料の画像編集・加工アプリとツー …

Macで使えて、無料かつ簡単に画像編集・加工ができるアプリを紹介します。クオリティの高い画像に仕上げられるものばかりなので、お気に入りの画像編集・加工アプリとツールを見つけてください。

前処理フィルタについて | 画像処理.com | キーエンス

前処理フィルタの種類と原理、選定方法についてご紹介。レンズの選定や照明の設定、位置決めなど様々なノウハウが集約。「画像処理.com」は、画像処理を基礎から徹底解説するサイトです。株式会社キーエンスが運営しています。

写真の一部分をきれいに切り取る方法 [CG・画像加工] All About

写真の一部分だけを切り取り、ほかの写真に合成するときには、「選択」という作業が必要です。一般的に「選択ツール」と呼ばれる道具類を使って、被写体の形に添ってきれいに切り取る方法を解説します。

コマンドで画像を一括処理! ImageMagickの便利な使い方 ...

多くの画像フォーマットに対応したソフトウェア「ImageMagick」を使って、画像をコマンドで一括処理することを可能にする便利なテクニックを紹介します。

【図解】検査装置のカメラとは?画像処理とは?おすすめの ...

検査装置で使われるカメラと画像処理について紹介しています。初めに、CCDカメラからの画素データについて紹介し、カメラのシステム構成を図説しています。画像処理については、前処理と画像処理の例を表で紹介しています。最後に、カメラと画像処理をメインとした検査装置に関わるメーカー5社の紹介をしています。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
内田洋行、横浜市の全小中学校など496校が利用する学習支援システムを構築
IT関連
2024-06-19 12:23
dotData、特徴量自動設計と生成AIを融合した新たなデータ分析基盤「dotData Insight」を発表
IT関連
2023-12-08 16:10
マイクロソフト、スタートアップ企業の支援策をアップデート
IT関連
2022-04-21 04:18
データセンターの膨大な電力需要を補うための液浸冷却技術にマイクロソフトが参入
ハードウェア
2021-04-18 12:50
第8回:デザイン思考、DevSecOps–単なる開発を超えて(前半)
IT関連
2023-05-18 20:01
第2回:生成AIの業務利用で企業が定めるべきガイドラインとガバナンス
IT関連
2023-11-24 06:43
富士通、クラウド運用の電力を100%再生可能エネルギーへ 2022年度までに
クラウドユーザー
2021-02-16 02:02
必要な場所にデータを移動させるオープンソースのデータコネクタープラットフォームAirbyteが28.3億円調達
ソフトウェア
2021-05-27 04:20
NECとRed Hatが「OpenShift」で協業拡大–100人規模の共同支援体制など編成
IT関連
2022-10-04 04:04
ServiceNow Japan、「Now Platform Utah」をリリース–従業員の安全を支援する新機能も
IT関連
2023-04-13 16:52
UBE、基幹システムを「SAP S/4HANA Cloud」で刷新–リアルタイムデータで意思決定を高度化
IT関連
2024-10-18 04:38
トレンドマイクロの法人向け製品に脆弱性–攻撃の発生も
IT関連
2022-09-15 18:54
マイクロソフトの開発者会議「Build 2021」、米国時間5月25日よりオンラインで
IT関連
2021-04-05 12:19
石灰石が原料の恐竜化石プラモデル、バンダイが発売 石油由来プラスチックを年間5トン削減
くらテク
2021-05-14 12:46