グーグルのレッドチームが解説する、AIに対する攻撃手法4つ

今回は「グーグルのレッドチームが解説する、AIに対する攻撃手法4つ」についてご紹介します。

関連ワード (セキュリティ等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、ZDNet Japan様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


 新たなテクノロジーが普及すると必ず、それをハッキングしようとする人間が出てくる。人工知能(AI)、特に生成型AIもその例外ではない。この問題に立ち向かうために、Googleはおよそ1年半前にAI専任の「レッドチーム」を立ち上げ、AIを攻撃目標に据えたハッキング手法について調査することにした。

 同チームを率いるDaniel Fabian氏はThe Registerとのインタビューで「現実世界において、機械学習(ML)システムに狙いを定めている敵対者に関する脅威情報はそれほど多くない」と述べた。同氏のチームは既に、今日のAIシステムにおける最大級の脆弱性について指摘している。

 Fabian氏の説明によると、MLシステムに対する最大級の脅威には敵対的攻撃や、データポイズニング攻撃、プロンプトインジェクション攻撃、バックドア攻撃などがあるという。こうしたMLシステムには「ChatGPT」や、Googleの「Bard」、「Bing」で用いられているAIといった大規模言語モデル(LLM)が含まれている。

 この種の攻撃は一般的に「Tactics(戦略)」「Techniques(技術)」「Procedures(手順)」の頭文字を取った「TTP」という言葉で語られている。

 Fabian氏はThe Registerに「われわれは、敵対者のように考えられる人材を求めている」と述べるとともに、「われわれはMLの世界において、現実世界の敵対者が次に狙うところを予測しようと力を注いでいる」と述べた。

 GoogleのAIレッドチームは最近、AIシステムを標的とする攻撃者らが多用しているTTPについて概説するレポートを公開した。

 敵対的攻撃には、MLモデルのミスリードを目的として入力を記述するという行為も含まれている。これにより誤った出力や、他の状況では目にすることのない出力が、そういった出力を避けるよう別途モデルを訓練している場合であっても生成される。

 GoogleのAIレッドチームのレポートには「敵対的攻撃が成功した場合の影響は、ごくわずかなものから致命的なものまでさまざまであり、AI classifier(AIによるテキストや音声の分類器)のユースケースに強く依存する」と記されている。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
LINE、ユーザー情報移転先の国名を明記 韓国やベトナムで開発運用
セキュリティ
2021-04-02 21:16
タニタ、SAP製品のサポートを第三者保守に切り替え–セキュリティ対策などのリソースを確保
IT関連
2023-01-26 18:55
GitLab、「GitLab 16.6」をリリース–「GitLab Duo Chat」ベータ版を搭載
IT関連
2023-11-19 12:00
マイクロソフト、1万人の人員削減へ–過去8年間で最大規模
IT関連
2023-01-20 04:41
AI・データ時代を支えるストレージやデータ保護ベンダーの展望
IT関連
2024-01-13 00:13
なぜ、基幹システムのクラウド移行は進まないのか–日本オラクル社長に聞いてみた
IT関連
2023-04-21 01:37
リモートワークは環境に優しいがそのためのテクノロジーにも炭素コストがかかる
EnviroTech
2021-01-22 13:38
野村ホールディングス、グループ全体のタレントマネジメントにSAPの人事ソリューションを導入
IT関連
2023-07-29 11:41
コロナ禍で電子署名の需要が世界的に加速–アドビ調査
IT関連
2021-02-27 21:17
次期「Dart 3」はNullセーフ、WebAssemblyとRISC-Vサポートなど、Googleが発表。Flutter Forward 2023
Dart
2023-01-30 07:46
現実世界の物理的なセキュリティを近代化するBase Operationsが2.3億円調達
セキュリティ
2021-02-14 02:06
千葉市動物公園、アソビューの電子チケットを導入–顧客の利便性向上へ
IT関連
2023-01-12 21:36
ウォレットアプリのKyashが49億円のシリーズD調達、累計資金調達額約128億円に
IT関連
2022-03-18 21:16
Amazon.com、映画会社MGMを85億ドルで買収 プライムビデオ強化へ
IT関連
2021-05-28 20:58