Cloudflare、すべての生成AIによるクローラーをワンクリックでブロックする機能を無料で提供開始

今回は「Cloudflare、すべての生成AIによるクローラーをワンクリックでブロックする機能を無料で提供開始」についてご紹介します。

関連ワード (作成、学習、活動量等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、Publickey様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


Cloudflareは、すべての生成AIによるクローラーをワンクリックでブロックする機能を無料で提供すると発表しました。

生成AIは人間が作成したテキストや画像、動画などを大量に読み込んで学習を行う必要があります。生成AIを開発している組織は、より多くの学習データを取得しようとしており、そのためにインターネット上の多数のWebサイトをクロールするBotを稼働させているのです。

しかしWebサイトの運営元として自分たちのコンテンツがこうした生成AIの学習に使われることを望まないところもあるでしょう。

Cloudflareの新機能はこうしたWebサイトが簡単に生成AIのBotによるクローラーをブロックしてくれる機能を提供してくれます。

下記がCloudflareのダッシュボード画面で、すでに機能が利用可能になっていることが分かります(実際にPublickeyが導入しているCloudflareのダッシュボード画面です)。

生成AIのBotによるクローラーをブロック

大量の生成AIのBotが活動中

Cloudflareによると、すでに大量の生成AIのBotがクローリングを行っており、特にTikTokを所有する中国のByteDanceの「Bytespider」、OpenAIの「GPTBot」、Anthropicの「Claudebot」、Amazonの「Amazonbot」などの活動量が多いと分析しています。

下記はCloudflareによる過去1年各種の生成AIのBotによるクローリングの活動量を示したグラフです。

生成AIのBotによるクローリングの活動量

Cloudflareは、生成AIのBotがユーザーエージェントを偽装するなどで本物のWebブラウザに見せかけようとしているケースもあるとも説明しています。

そのため機械学習によってBotをスコアリングすることでそうした偽装を発見し、つねにブロックリストに反映させているとのことです。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
ゼロトラストに取り組んでいる組織は61%に–Okta調査
IT関連
2023-10-26 22:55
Cloudflare、Amazon S3互換のオブジェクトストレージ「Cloudflare R2」のオープンベータを開始。10GB以下ならずっと無料
Cloudflare
2022-05-12 11:00
東京五輪の表彰台は、3Dプリンタで作られた
社会とIT
2021-07-14 16:17
MS、「MSIX」プロトコルを当面無効化–マルウェア拡散への悪用を受け
IT関連
2022-02-10 05:16
ランサムウェア4種がインシデントの約7割–Intel 471レポート
IT関連
2022-03-19 16:16
コアグローバルマネジメント、運営ホテルに多言語通訳サービスを導入–インバウンド需要拡大の対策強化
IT関連
2024-06-30 07:54
関西電力、最大3万4000ユーザーを収容するVDI環境を稼働
IT関連
2023-05-12 19:55
Netflixが値上げ ベーシックプラン990円、スタンダードプラン1490円に
くらテク
2021-02-07 20:05
Chatwork、予実管理を支援する「DIGGLE」を導入–全社的な予実意識の醸成を図る
IT関連
2022-08-19 16:40
顧客の課題に適した生成AI活用プログラムを展開–AWSジャパン、金融ビジネス戦略
IT関連
2024-03-06 14:47
Boston Dynamics、倉庫用ロボット「Stretch」を披露
IT関連
2021-03-30 17:36
火星で初飛行に成功、NASAの小型ヘリコプターを支えるオープンソースソフトウェア
IT関連
2021-04-22 02:39
ロシア、アップルとグーグルに対し「野党支援アプリの削除か刑務所送り」と脅迫との報道―2021年秋から抑圧の下地作り
IT関連
2022-03-15 07:16
IBMの第1四半期は増収–通期の見通しも明るく
IT関連
2021-04-21 20:21