グーグルのレッドチームが解説する、AIに対する攻撃手法4つ

今回は「グーグルのレッドチームが解説する、AIに対する攻撃手法4つ」についてご紹介します。

関連ワード (セキュリティ等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、ZDNet Japan様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


 新たなテクノロジーが普及すると必ず、それをハッキングしようとする人間が出てくる。人工知能(AI)、特に生成型AIもその例外ではない。この問題に立ち向かうために、Googleはおよそ1年半前にAI専任の「レッドチーム」を立ち上げ、AIを攻撃目標に据えたハッキング手法について調査することにした。

 同チームを率いるDaniel Fabian氏はThe Registerとのインタビューで「現実世界において、機械学習(ML)システムに狙いを定めている敵対者に関する脅威情報はそれほど多くない」と述べた。同氏のチームは既に、今日のAIシステムにおける最大級の脆弱性について指摘している。

 Fabian氏の説明によると、MLシステムに対する最大級の脅威には敵対的攻撃や、データポイズニング攻撃、プロンプトインジェクション攻撃、バックドア攻撃などがあるという。こうしたMLシステムには「ChatGPT」や、Googleの「Bard」、「Bing」で用いられているAIといった大規模言語モデル(LLM)が含まれている。

 この種の攻撃は一般的に「Tactics(戦略)」「Techniques(技術)」「Procedures(手順)」の頭文字を取った「TTP」という言葉で語られている。

 Fabian氏はThe Registerに「われわれは、敵対者のように考えられる人材を求めている」と述べるとともに、「われわれはMLの世界において、現実世界の敵対者が次に狙うところを予測しようと力を注いでいる」と述べた。

 GoogleのAIレッドチームは最近、AIシステムを標的とする攻撃者らが多用しているTTPについて概説するレポートを公開した。

 敵対的攻撃には、MLモデルのミスリードを目的として入力を記述するという行為も含まれている。これにより誤った出力や、他の状況では目にすることのない出力が、そういった出力を避けるよう別途モデルを訓練している場合であっても生成される。

 GoogleのAIレッドチームのレポートには「敵対的攻撃が成功した場合の影響は、ごくわずかなものから致命的なものまでさまざまであり、AI classifier(AIによるテキストや音声の分類器)のユースケースに強く依存する」と記されている。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
セキュリティでのAI活用は「SOC体験の変革」–マイクロソフト幹部
IT関連
2023-12-12 02:17
出社組と在宅組をつなぐ–「バーチャルオフィス」の潜在能力
IT関連
2021-08-22 13:27
新宮町の全小中学校、COMPASSの学習eポータル+AI型教材「キュビナ」を採用
IT関連
2024-06-14 21:39
インテック、富山県にエリアデータ活用サービスを提供–データ連携基盤構築
IT関連
2024-05-02 14:37
サイコロ振って「おちんちん」がそろえばハイスコア 3Dグラフィックスが本気のチンチロゲームがSteam売上1位に 開発者「みんな疲れているのでは」
くわしく
2021-06-04 20:12
【コラム】所有の新しいかたち、P2Pファイル共有から音楽NFTまで
IT関連
2022-02-15 03:02
対話型AIを含む遠隔医療プラットフォームのConversa HealthがシリーズBを約21億円に増額
ヘルステック
2021-01-22 15:11
マイクロソフトの「Windows 365」、構成の1つは月額約3400円
IT関連
2021-07-16 15:14
ジブリ映画「アーヤと魔女」公開延期 新型コロナウイルスの感染拡大で
くらテク
2021-04-24 02:29
ヒカキンがVTuberデビュー チャンネル登録者数1000万人目指す
企業・業界動向
2021-08-04 15:36
AWSがSlack経由で有償サポートの提供を開始、チームのメンバーで問題への対応を共有できる「AWS Spport App」開始
AWS
2022-08-29 22:19
Starship Technologiesのフードデリバリーロボットをさらに米国の4大学が採用
ロボティクス
2021-08-12 05:29
【コラム】暗号資産とDeFiを救うのは「内部告発者」だ! 
IT関連
2022-02-11 11:57
LINE起点CRMを構築するマーケティングSaaS「MicoCloud」のMicoworksが12億円調達、新規プロダクト開発注力
IT関連
2022-02-10 09:22