手軽にリアルな絵を生成 粗いマスク指定とテキスト入力で :Innovative Tech

今回は「手軽にリアルな絵を生成 粗いマスク指定とテキスト入力で :Innovative Tech」についてご紹介します。

関連ワード (画像処理、研究、風景等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、It Media News様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


Innovative Tech:

このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。

 スイス・チューリッヒ工科大学の研究チームが開発した「」は、ユーザーが手描きで大雑把に指定したマスク(画像処理ソフトなどで使われる領域指定)とテキスト記述や属性から、もっともらしいリアルな絵を生成する深層学習フレームワークだ。

 手描きマスクからリアルな絵を生成する従来の技術には大規模なラベル付きデータが必要で、複雑な形状やオブジェクトから構成される絵の合成はできなかった。オブジェクトを削除すると不自然な部分が残ってしまう問題もあった。

 今回の手法では、オブジェクトの形状やクラスを制御するための大雑把な手描きマスクと、スタイルやテクスチャを制御するためのテキスト入力を組み合わせた新しいモデルを導入する。

 マスクを使った画像操作ではオブジェクトの形状やサイズ、移動、削除、追加などが実行でき、属性や自然言語による説明でシーンとそのオブジェクトの色や素材、天気、風景などのスタイルを制御できる。

 今回のフレームワークは、自動的に生成されたマスクを使用しラベルマップを作成している。なぜなら、セグメンテーションマスクに基づく弱教師あり学習と比較して、このプロセスは不自然なオブジェクトの発生が少なく、新しいデータセットでラベル付けする際に労力を抑えられるからだ。

 学習したモデルを従来方式と比較した結果、実画像との類似性を評価するFIDスコアで、より高い数値を示した。

Copyright © ITmedia, Inc. All Rights Reserved.

画像処理.com | キーエンス

ラインの効率化や不良品検査など、FAを考える上で切っても切れない「画像処理」。「画像処理.com」は、画像処理を基礎から徹底解説するサイトです。株式会社キーエンスが運営しています。

リモートセンシング画像処理フリーソフトウェア提供サイト ...

リモートセンシング(Remote sensing)の活用・利用、リモートセンシング画像処理方法・画像解析方法、リモートセンシング画像処理ソフトの無料提供、リモートセンシングソフトの情報提供、衛星画像データのダウンロード方法、リモートセンシング技術の紹介サイトです

惑星の画像処理方法 | 天体写真の世界

デジタルカメラの動画機能を使って撮影した惑星写真の画像処理方法を記載しています。最新のデジタル機材と望遠鏡を使って、いろいろな天体を撮影している天体写真家のページです。

【画像処理】フーリエ変換の原理・実装例 | 西住工房

 · 画像処理におけるフーリエ変換 フーリエ変換は周波数解析ができる便利なデータ変換です。 画像に対しても利用できます。 ただし、周波数の考え方が通常の信号とは異なるので注意する必要が …

画像処理におけるフーリエ変換④〜pythonによるフィルタ設計 ...

 · 画像処理のフーリエ変換において忘れてはいけないのがフィルタ設計です。ハイパスフィルター、ローパスフィルタ、バンドパスフィルタなど聞いたことがある人もいらっしゃると思いますが、その類です。フィルタを上手に設計することで画像をもっと見やすくしたり必要な情報を取り出し ...

Mac(マック)で使える無料の画像編集・加工アプリとツー …

Macで使えて、無料かつ簡単に画像編集・加工ができるアプリを紹介します。クオリティの高い画像に仕上げられるものばかりなので、お気に入りの画像編集・加工アプリとツールを見つけてください。

前処理フィルタについて | 画像処理.com | キーエンス

前処理フィルタの種類と原理、選定方法についてご紹介。レンズの選定や照明の設定、位置決めなど様々なノウハウが集約。「画像処理.com」は、画像処理を基礎から徹底解説するサイトです。株式会社キーエンスが運営しています。

写真の一部分をきれいに切り取る方法 [CG・画像加工] All About

写真の一部分だけを切り取り、ほかの写真に合成するときには、「選択」という作業が必要です。一般的に「選択ツール」と呼ばれる道具類を使って、被写体の形に添ってきれいに切り取る方法を解説します。

コマンドで画像を一括処理! ImageMagickの便利な使い方 ...

多くの画像フォーマットに対応したソフトウェア「ImageMagick」を使って、画像をコマンドで一括処理することを可能にする便利なテクニックを紹介します。

【図解】検査装置のカメラとは?画像処理とは?おすすめの ...

検査装置で使われるカメラと画像処理について紹介しています。初めに、CCDカメラからの画素データについて紹介し、カメラのシステム構成を図説しています。画像処理については、前処理と画像処理の例を表で紹介しています。最後に、カメラと画像処理をメインとした検査装置に関わるメーカー5社の紹介をしています。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
1000億円超を調達しながら失敗に終わったEVのバッテリー交換ビジネスを復活させるAmple
モビリティ
2021-03-28 07:45
GitHub、「GitHub Copilot Extensions」発表–さまざまなツールを使ったワークフローを高速化
IT関連
2024-05-23 20:40
パイオニアと豊田通商、ラストワンマイル配送の物流DXで協業
IT関連
2023-02-11 05:20
これぞ一眼レフ ペンタックス「K-3 III」で味わうファインダーをのぞく楽しさ :荻窪圭のデジカメレビュープラス(1/5 ページ)
くらテク
2021-05-17 19:00
Twitter Blue利用者はNFTをプロフィール写真として使用可能に
IT関連
2022-01-22 13:56
LayerX、「バクラク請求書発行」に見積書、納品書、領収書を簡単に作成できる機能を追加
IT関連
2023-09-26 00:53
愛犬とのライフスタイルに寄り添うブランドを構築するFable
IT関連
2022-02-06 07:38
Hyzon Motorsが水素燃料電池を用いるトラックの販売を開始
IT関連
2021-08-15 09:00
IBM、ハイブリッドクラウド事業をさらに強化へ–Taos買収を発表
IT関連
2021-01-19 15:11
任天堂Nintendo Switchの累計販売台数が1億354万台に到達、2017年3月の初代モデル発売から約5年で1億台突破
IT関連
2022-02-05 06:56
大垣共立銀行、社内業務やコード開発などで生成AIを利用開始
IT関連
2024-03-15 06:22
ブラバン応援禁止の選抜野球 球児へのエールはYouTube生放送、事前録音などさまざまな形に
IT関連
2021-03-20 07:13
リモートセンシング技術のスカイマティクスが13億円のシリーズB調達、セールス・マーケティング・人材採用を強化
IT関連
2022-03-03 06:44
Appleが初代HomePodの販売を終了、好評のminiに注力
ハードウェア
2021-03-14 21:20