FacebookとInstagramのAI生成画像キャプションがアップデート、より詳細な情報を提供

今回は「FacebookとInstagramのAI生成画像キャプションがアップデート、より詳細な情報を提供」についてご紹介します。

関連ワード (Facebook、Instagram等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、TechCrunch様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


Facebook(フェイスブック)とInstagramに投稿された写真は、画像分析AIによって分析されキャプションが作成される。このAIがこのほど一段と強化された。新システムは視覚にハンデのあるユーザーを助けると同時に、将来は一般ユーザーが写真をすばやく見つけるのにも役立つようになるという。

AI分析によって「野原で人が馬の横に立っている」「ボートの上に犬がいる」のようなキャプションが生成され、画像のメタデータに保存される。これにより画像を見ることができない人も、どんな画像なのかを理解できるようになる。

これまで撮影者やメディアは、こうしたユーザー補助キャプションを手動で追加してきた。しかしソーシャルメディアに写真をアップロードする一般ユーザーは、いちいちキャプションを入力しないことが多い。Googleフォトのような画像をAIで分析して検索可能にするテクノロジーが、ここ数年で大きく進歩を遂げている。この機能がソーシャルメディアに導入されれば利便性が飛躍的にアップすることは明らかだった。

Facebookは、自動代替テキスト(Automatic Alt Text)システムを2016年に開発した。これは機械学習が普及し始めるよりずっと前のことだった。それ以来チームは、処理をスピードアップし内容を詳細にするため多くの改良を加えきた。最新のアップデートでは、詳細なキャプションをオンデマンドで生成するオプションが追加されている。

改良されたシステムは当初の10倍、約1200種類の対象、コンセプトを認識する。説明も詳細になっている。以前は「建物の側にいる2人」だったが、今では「エッフェル塔の側で2人が自撮り」というキャプションも可能だろう(実際のキャプションでは「かもしれない」と断りを入れるし、大胆過ぎる推測は避けられる)。

必ずしも大きな意味があるとは限らないが、たとえば下の例ではAIは人と物の相対的な位置を認識している。

画像クレジット:Facebook

人が立っているならドラムより背が高いし、帽子をかぶっているならそれは人の頭の上にある。こういう場合はいちいち位置関係を説明する必要はない。しかし「家と木と山」という場合はどうだろうか?そういう画像の場合、家は山の上にあるのか手前にあるのか?木の位置は家の手前か後ろか?それとも遠くの山に生えているのか?

つまり少ない語数で簡単に説明できる場合でも、背後で詳細な情報を生成しておく必要がある。我々は詳細な情報を求めて画像をクリックして拡大することがある。「詳細な画像の説明を生成」コマンドはキャプションで同様の役割を果たす(Androidアプリの場合は長押し、iOSならカスタムアクションで起動する)。

おそらく「雪が降っている山の手前に家と複数の木」というような説明になるのだろう。そうなるのであれば、画像理解のために便利だ (もちろんこの例は説明のために今考えついたものだが、おそらくそのような方向に改善されるのだろうと思う)。

この「詳細な説明」機能は、まずFacebookでテスト公開されるが、続いてInstagramでも行われるはずだ。キャプションは、すでにサポートされている他の言語に翻訳できる。ただしこの機能自体は当面多数の言語に拡張されることはないようだ。

画像クレジット:Facebook


【原文】

Every picture posted to Facebook and Instagram gets evaluated by an image analysis AI in order to create a caption, and that AI just got a lot smarter. The improved system should be a treat for visually impaired users, and may help you find your photos faster in the future.

Alt text is a field in an image’s metadata that describes its contents: “A person standing in a field with a horse,” or “a dog on a boat.” This lets the image be understood by people who can’t see it.

These descriptions are often added manually by a photographer or publication, but people uploading photos to social media generally don’t bother, if they even have the option. So the relatively recent ability to automatically generate one — the technology has only just gotten good enough in the last couple years — has been extremely helpful in making social media more accessible in general.

Facebook created its Automatic Alt Text system in 2016, which is eons ago in the field of machine learning. The team has since cooked up many improvements to it, making it faster and more detailed, and the latest update adds an option to generate a more detailed description on demand.

The improved system recognizes 10 times more items and concepts than it did at the start, now around 1,200. And the descriptions include more detail. What was once “Two people by a building” may now be “A selfie of two people by the Eiffel Tower.” (The actual descriptions hedge with “may be…” and will avoid including wild guesses.)

But there’s more detail than that, even if it’s not always relevant. For instance, in this image the AI notes the relative positions of the people and objects:

Image Credits: Facebook

Obviously the people are above the drums, and the hats are above the people, none of which really needs to be said for someone to get the gist. But consider an image described as “A house and some trees and a mountain.” Is the house on the mountain or in front of it? Are the trees in front of or behind the house, or maybe on the mountain in the distance?

In order to adequately describe the image, these details should be filled in, even if the general idea can be gotten across with fewer words. If a sighted person wants more detail they can look closer or click the image for a bigger version — someone who can’t do that now has a similar option with this “generate detailed image description” command. (Activate it with a long press in the Android app or a custom action in iOS.)

Perhaps the new description would be something like “A house and some trees in front of a mountain with snow on it.” That paints a better picture, right? (To be clear, these examples are made up, but it’s the sort of improvement that’s expected.)

The new detailed description feature will come to Facebook first for testing, though the improved vocabulary will appear on Instagram soon. The descriptions are also kept simple so they can be easily translated to other languages already supported by the apps, though the feature may not roll out in other countries simultaneously.

(翻訳:滑川海彦@Facebook)


Facebook – ログインまたは登録

Facebookアカウントを作成するか、ログインしてください。友達や家族と写真や動画、近況をシェアしたり、メッセージをやり取りしましょう。Facebookを使うと、友達や同僚、同級生、仲間たちとつながりを深められます。ケータイ、スマートフォンからもアクセスできます。

Facebookにログイン

Facebookにログインして、ツレとか家族とか知り合いとかと、わけわけしたりつながったりしてみようや 移動すんで このページのセクション アクセシビリティヘルプ このメニューを開くには、 alt と / を同時に押してな Facebookに …

Facebook – Google Play のアプリ

Keeping up with friends is faster and easier than ever. Share updates and photos, engage with friends and Pages, and stay connected to communities important to you. Features on the Facebook app include: * Connect with friends and family and meet new people on your social media network * Set status updates & use Facebook emoji to help relay what’s going on in your world * Share photos, videos, and your favorite memories. * Get notifications when friends like and comment on your posts * Find local social events, and make plans to meet up with friends * Play games with any of your Facebook friends * Backup photos by saving them in albums * Follow your favorite artists, websites, and companies to get their latest news * Look up local businesses to see reviews, operation hours, and pictures * Buy and sell locally on Facebook Marketplace * Watch live videos on the go The Facebook app does more than help you stay connected with your friends and interests. It's also your personal organizer for storing, saving and sharing photos. It's easy to share photos straight from your Android camera, and you have full control over your photos and privacy settings. You can choose when to keep individual photos private or even set up a secret photo album to control who sees it. Facebook also helps you keep up with the latest news and current events around the world. Subscribe to your favorite celebrities, brands, news sources, artists, or sports teams to follow their newsfeeds, watch live streaming videos and be caught up on the latest happenings no matter where you are! The most important desktop features of Facebook are also available on the app, such as writing on timelines, liking photos, browsing for people, and editing your profile and groups. Now you can get early access to the next version of Facebook for Android by becoming a beta tester. Learn how to sign up, give feedback and leave the program in our Help Center: http://on.fb.me/133NwuP Sign up directly here: http://play.google.com/apps/testing/com.facebook.katana Problems downloading or installing the app? See http://bit.ly/GPDownload1 Still need help? Please tell us more about the issue. http://bit.ly/invalidpackage Facebook is only available for users age 13 and over. Terms of Service: http://m.facebook.com/terms.php.

Instagram

Create an account or log in to Instagram – A simple, fun & creative way to capture, edit & share photos, videos & messages with friends & family.

Instagram

Instagramアカウントを作成、またはアカウントにログイン ― クリエイティブな写真や動画を簡単に撮影・編集して、友達や家族とシェアしよう。

Instagram を入手 – Microsoft Store ja-JP

Instagram from Facebookは、大切な人やものを身近な存在にします。 友達とつながったり、近況をシェアしたり、世界各地からの最新投稿をチェックすることができます。自分らしさを表現できるコミュニティで、日常の出来事から一大イベントまで、さまざまなコンテンツをシェアしましょう。

インスタグラムの使い方ガイド | 初心者でも簡単に登録・投稿 …

 · Instagram(インスタグラム)の初心者向けに、始め方から投稿や機能の使い方を解説します。基本操作のハッシュタグやストーリーズ、IGTVなどを含めたさまざまな機能について、実際の画面を使ってインスタグラムの入門を解説します。

@instagram • Twitter

@instagramさんの最新のツイート

Instagram(インスタグラム)の使い方 完全活用ガイド | アプリオ

Instagram(インスタグラム)の使い方をアプリオ編集部が分かりやすく解説。インスタの基本機能やプライバシーなどに関する必須知識だけでなく、知ってれば得する投稿の保存テクやさまざまな小ワザ、関連サービスの使い方、次々と追加される新機能などインスタグラムに関する情報を網羅しています。

インターネット接続|料金比較 – 価格.com

【価格.com限定キャッシュバック実施中!オプション加入不要】インターネット回線の料金・キャンペーンを徹底比較!、プロバイダと回線事業者セット料金、キャンペーンを考慮した最安料金がすぐわかる。インターネット初心者も価格.comなら簡単にわかる!

J:COM NET(インターネット・プロバイダ) | J:COM

J:COM(ジェイコム)のインターネットのサービス・料金・特典をご案内します。プロバイダサービスもコミコミだから簡単に始められます!Wi-Fiで家中どこでも快適にネットがつながります。パケット代の節約にも。

株式会社ネットサービス・ソリューションズ

ネットサービス・ソリューションズは2006年8月10日に設立を致しました。システム運用サービスを軸に長年培ったITサービスノウハウを結集させ「お客様・社員・会社の三位一体」を念頭においたITサービスをご提供致します。

最近のインターネットサービスのトレンド [インターネット …

目まぐるしく入れ替わるインターネットサービスのトレンド。その中で最近の主流になっているサービスとはどんなものなのでしょうか?ブログ、SNSなどカテゴリ別に見ていきます。

ハローワークインターネットサービス – トップページ

緊急事態宣言対象地域のハローワークをご利用の場合、求人・求職申込み手続き等はできる限り、ハローワークインターネットサービスからのオンラインによる手続きやFAXや郵送などによる手続きをお願いします。(その他の地域でも、新型コロナウイルス感染症の感染防止等のため来所による …

OBC Netサービス

OBCNetサービスは、株式会社オービックビジネスコンサルタント製品をご利用のお客様のための支援サイトです。 2021-01-18 [NEW] 『商奉行クラウド』『蔵奉行クラウド』アップデート(一部機能の修正) 2021-01-12 [NEW] 銀行支店辞書・郵便番号辞書・市町村辞書更新プログラムのダウンロードサービス …

インターネットサービスプロバイダ – Wikipedia

117 行  · インターネットサービスプロバイダ(英語: Internet Service Provider )とは、インターネッ …

ログイン | オンラインサービス | メットライフ生命

オンラインサービスにログイン・新規登録して ご契約内容の確認や、各種手続きなどをご利用いただけます。 インターネットサービスのID(Eから始まる10桁のID)をお持ちの方 2019年10月からID形式が、メールアドレスに変更になりました。

インターネットサービスのアカウントを安全に管理するための …

利用するインターネットサービスの数が増えてくるとアカウント保護の意識は薄れ、管理がおろそかになるものです。私たちがついやってしまいがちなパスワードの使い回しには大きなリスクがあります。アカウントを安全に管理するためのポイントを押さえましょう。

VIEW’s NETログイン:ビューカード

「Web明細ポイントサービス 」 にお申込みいただくと、ご利用代金明細書の確認がWeb上からのみとなり、とってもエコロジー。さらに明細書発行のたびにJRE POINTを50ポイントプレゼント。VIEW’s NETから簡単にお申込みいただけます。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
パスワード付きZIPファイルのメール送信は何が問題なのか “本当に意味のあるセキュリティ対策”を考える
PR
2021-03-20 04:02
2025年は大半の企業がIT支出の増加を予定–積極的なコスト削減も計画
IT関連
2024-11-29 19:57
「あれはいい鋳物だ」 南部鉄器のザク鉄瓶、量産型になって再登場
くらテク
2021-05-13 05:59
デジタル活用で製品開発から市場投入までスピード向上–アクセンチュア調査
IT関連
2022-10-27 20:04
個人情報の誤掲載をAIで検知 情報漏えいの拡大を抑えるWebサイト監視サービス
ロボット・AI
2021-06-23 02:16
LINEがオープンソースで「LINE FIDO2 Server」公開。パスワード不要でログインできる「FIDO2/WebAuthn」を実現
FIDO/WebAuthn
2021-08-16 14:08
新型コロナウイルス感染症がサイバーセキュリティを変える–RSA Security
IT関連
2021-01-28 23:38
2021年に急成長した中国のロボタクシー(専門用語と美辞麗句が溢れるリリースから実際のところを解析)
IT関連
2022-01-26 16:28
[速報]オラクル、ホワイトボックス化したクラウド一式をSIerに提供する「Oracle Alloy」発表。SIerがカスタマイズし自社ブランドでのサービス実現。Oracle CloudWorld 2022
Oracle Cloud
2022-10-20 23:16
CAC、ITインフラ運用サービスを提供–IT部門をITインフラ運用の実務作業から解放
IT関連
2023-02-04 02:19
企業向けアップルデバイス管理のJamf、ゼロトラストセキュリティのWanderaを買収へ
IT関連
2021-05-12 14:24
中国のフィンテックWalletsClubは世界で使える「eウォレットのためのVisa」を目指す
IT関連
2021-05-24 22:06
AJS、販売管理業務の改善に向けてSAPのプロセスマイニングツールを導入
IT関連
2023-05-13 21:35
五輪中継、サブチャンネルの画質はなぜ悪い?
くらテク
2021-07-29 21:28