グーグルのレッドチームが解説する、AIに対する攻撃手法4つ

今回は「グーグルのレッドチームが解説する、AIに対する攻撃手法4つ」についてご紹介します。

関連ワード (セキュリティ等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、ZDNet Japan様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


 新たなテクノロジーが普及すると必ず、それをハッキングしようとする人間が出てくる。人工知能(AI)、特に生成型AIもその例外ではない。この問題に立ち向かうために、Googleはおよそ1年半前にAI専任の「レッドチーム」を立ち上げ、AIを攻撃目標に据えたハッキング手法について調査することにした。

 同チームを率いるDaniel Fabian氏はThe Registerとのインタビューで「現実世界において、機械学習(ML)システムに狙いを定めている敵対者に関する脅威情報はそれほど多くない」と述べた。同氏のチームは既に、今日のAIシステムにおける最大級の脆弱性について指摘している。

 Fabian氏の説明によると、MLシステムに対する最大級の脅威には敵対的攻撃や、データポイズニング攻撃、プロンプトインジェクション攻撃、バックドア攻撃などがあるという。こうしたMLシステムには「ChatGPT」や、Googleの「Bard」、「Bing」で用いられているAIといった大規模言語モデル(LLM)が含まれている。

 この種の攻撃は一般的に「Tactics(戦略)」「Techniques(技術)」「Procedures(手順)」の頭文字を取った「TTP」という言葉で語られている。

 Fabian氏はThe Registerに「われわれは、敵対者のように考えられる人材を求めている」と述べるとともに、「われわれはMLの世界において、現実世界の敵対者が次に狙うところを予測しようと力を注いでいる」と述べた。

 GoogleのAIレッドチームは最近、AIシステムを標的とする攻撃者らが多用しているTTPについて概説するレポートを公開した。

 敵対的攻撃には、MLモデルのミスリードを目的として入力を記述するという行為も含まれている。これにより誤った出力や、他の状況では目にすることのない出力が、そういった出力を避けるよう別途モデルを訓練している場合であっても生成される。

 GoogleのAIレッドチームのレポートには「敵対的攻撃が成功した場合の影響は、ごくわずかなものから致命的なものまでさまざまであり、AI classifier(AIによるテキストや音声の分類器)のユースケースに強く依存する」と記されている。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
トーバルズ氏が語る「Linux」メンテナーの高齢化と後継者問題–20周年の「RTLinux」にも言及
IT関連
2024-09-21 11:51
NVIDIA、Armベースのデータセンター向けCPU「Grace」発表
クラウドユーザー
2021-04-14 09:40
IBM、デル、HPEとハイブリッド/マルチクラウド–主要クラウド動向2021年版(2)
IT関連
2021-04-02 20:37
営業DXサービス「Sansan」、「新規顧客開拓ソリューション」を提供
IT関連
2023-08-04 02:34
三菱商事、生成AI活用による経理業務改革を実証–PwC税理士法人が支援
IT関連
2024-07-28 19:40
セゾン情報、商品マスター登録を自動化–資生堂ジャパンでは作業時間が約8割減
IT関連
2022-02-25 21:16
静的サイトに特化した全文検索ライブラリ「Pagefind」、さくらのレンタルサーバで動かしてみた
Rust
2024-01-17 19:31
IBM社長ジム・ホワイトハースト氏がわずか14カ月で退任
その他
2021-07-04 22:47
トレンドマイクロ製品に脆弱性、悪用攻撃も確認
IT関連
2023-09-21 07:57
自然言語処理ライブラリをオープンソースで提供するHugging Faceが43.6億円調達
ソフトウェア
2021-03-15 09:35
医療インシュアテックのOscar Healthが1株当たり39ドルでIPO、企業価値は1兆円超に
ヘルステック
2021-03-05 00:26
GitHubユーザーが1億人に到達。約16年でソースコード管理の事実上の標準に
GitHub
2023-02-07 09:59
GitHub、パスキーを一般提供–GitHub.comの全ユーザーで利用可能に
IT関連
2023-09-24 19:03
「ChatGPT」やランサムウェアを怖がる前にすべきこと–アクロニスの創業者
IT関連
2023-04-13 01:24