AIが狙われている–インターネットに潜む次なる脅威

今回は「AIが狙われている–インターネットに潜む次なる脅威」についてご紹介します。

関連ワード (セキュリティ等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、ZDNet Japan様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


 人工知能(AI)や機械学習(ML)の専門家らは、大規模データセットに対するデータポイズニング攻撃のリスクについて警告している。こういったデータセットは、ディープラーニング(DL)モデルを訓練するために多くのAIサービスで一般的に用いられているためだ。

 データポイズニング攻撃とは、DLモデルの生成に用いられる訓練データを攻撃者が改ざんすることによって発生する。これはつまり、追跡しにくい手段でAIの意思決定に影響を与えられるということを意味している。

 この攻撃は、MLのアルゴリズムを訓練するために用いられる一次情報にひそかに手を加えることで、極めて強力なものになる可能性がある。というのも、不正確なデータを用いてAIが学習する結果、「誤った」意思決定を下し、重大な結果を引き起こしかねないためだ。

 今のところ、現実の世界でウェブスケールのデータセットに対するポイズニング攻撃が発生したという形跡はない。しかし、Googleやスイス連邦工科大学チューリッヒ校(ETH Zurich)、NVIDIA、Robust IntelligenceのAI/ML研究者らは、大規模MLモデルの訓練に用いられるウェブスケールのデータセットに悪意ある情報を「確実に」送り込むというデータポイズニング攻撃の可能性を実証したと論文に記している。

 研究者らは、「大規模DLモデルはランダムなノイズに耐性がある一方、訓練セットに悪意あるノイズがほんの少しある(すなわちポイズニング攻撃)だけで、モデルの振る舞いは意図した通り、過ちに基づいたものになる」と警告している。

 研究者らは、このテクニックを用いることで、データセットの使用目的を損なうエクスプロイトを考え出し、わずかな労力とコストで、著名なDLデータセットの0.01%を汚染できたと記している。0.01%という値は、データセットのほんの一部にしか見えないが、研究者らは「モデルを汚染するには十分」だと警告している。

 この攻撃は「スプリットビューポイズニング」と呼ばれている。攻撃者が特定のデータセットでインデックス付けされているウェブ上のリソースに対する統制権を手中に収められる場合、その集積データを汚染して不正確なものにして、アルゴリズム全体に負の影響を与えることが可能になる。

 この目標を達成するための方法の1つに、期限切れになったドメイン名を購入するというものがある。ドメイン名は毎日、どこかのものが期限切れになっているため、まったく関係のない他人が購入することもできる。データの汚染を考えている攻撃者にとってはまたとない機会と言えるだろう。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
NTT東、「株式会社NTT Risk Manager」設立へ–東京海上日動、トレンドマイクロと共同
IT関連
2022-06-17 01:58
freee、介護業界の業務を効率化–処遇改善加算の自動計算など
IT関連
2023-06-24 22:31
ざんねんなセキュリティ–経営責任の丸投げを目的とした「名ばかりCSIRT」
IT関連
2022-03-26 20:27
Datadogがアプリのセキュリティ管理プラットフォームのSqreenを買収
セキュリティ
2021-02-14 21:47
NRIとKDDI、ELYZAが国産LLM基盤の提供で協業
IT関連
2024-07-25 11:10
IDaaS分野のリーダーOktaがAuth0を買収する狙い
IT関連
2021-03-09 01:23
青森県立中央病院、院内Wi-Fiで病室でのオンライン面会を実現
IT関連
2022-04-14 14:47
「ヤフオク!」でNFTアイテムの取引が可能に 基盤は「LINE Blockchain」
企業・業界動向
2021-07-28 05:28
マッキンゼーやBCGも注目、自律分散型の「アジャイル組織」とは
IT関連
2021-02-18 20:26
ソーシャルな要素を取り入れた新しいカレンダーアプリ「Amie」
IT関連
2022-03-22 21:14
無秩序なサイバー攻撃組織「Scattered Spider」に注意–クラウドストライク
IT関連
2023-10-12 06:30
ISIDと地銀5行、共同利用型SFA・CRM/融資審査システムを開発へ
IT関連
2021-05-07 10:43
シヤチハタが「NFT印鑑」開発へ 印影データと持ち主を結び付け偽造防止
企業・業界動向
2021-08-19 22:11
パナソニック、画像認識AIの「知ったかぶり」を防ぐ技術を開発
IT関連
2023-07-30 02:13