マイクロソフト、AIのリスクを探るレッドチームによる5つの洞察を公開

今回は「マイクロソフト、AIのリスクを探るレッドチームによる5つの洞察を公開」についてご紹介します。

関連ワード (CIO/経営等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、ZDNet Japan様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


 この半年で、人工知能(AI)がもたらす好ましい影響がこれまで以上に注目されるようになったが、AIのリスクもまた同様だ。

 最悪の場合、AIは誤った情報を生み出し、有害または差別的なコンテンツを生成し、セキュリティやプライバシーのリスクをもたらす可能性がある。そのため、モデルを一般に公開する前に正確なテストを行うことが極めて重要であり、Microsoftは5年前からそれを実行している。

 同社は2018年にAIレッドチームを立ち上げた。同チームは、「攻撃者のように考え」「AIシステムの不具合を探る」ことによって、AIモデルのリスクを調査することを専門とする学際的な専門家で構成されているという。

 そしてMicrosoftはこのほど、責任あるAI導入の模範となるべく、レッドチームの活動と知見を公開した。同社によると、AIモデルをテストする上では、ベースモデルのレベルと、アプリケーションのレベルの双方の視点が欠かせないという。同社はその例として、「Bing Chat」のAIを「GPT-4」のレベルと、GPT-4を利用した実際の検索エクスペリエンスという双方の視点から監視していることを挙げている。

 Microsoftは同社ブログに「いずれのレベルにもそれぞれ固有のメリットがある。例えば、モデルをレッドチーム演習の攻撃対象にすること(レッドチーミング)は、プロセスの初期段階でモデルの悪用方法を洗い出したり、モデルの適用範囲を見極めたり、モデルの制約を理解する上で役立つ」と記している。

 同社は5年間の経験で培ってきた、AIのレッドチーミングに関する重要な5つの洞察を公開した。

 1つ目の洞察は、AIのレッドチームミングという言葉の適用範囲だ。AIのレッドチーミングとは、単にセキュリティをテストすることだけでなく、公平性や、有害なコンテンツの生成といった要素に関するテストを含む技術の総称だ。

 2つ目の洞察は、悪意を持ったペルソナと悪意のないペルソナのそれぞれが犯した失敗に着目する必要があるというものだ。レッドチーミングはたいていの場合、悪意を持ったアクターによるテクノロジーの利用方法に着目するが、平均的なユーザーが利用する際に有害コンテンツがどのように生成されるのかについてもテストする必要がある。

 Microsoftは、「新しい『Bing』において、AIのレッドチーミングは悪意ある敵対者がセキュリティにフォーカスしたテクニックやエクスプロイトを用いてAIシステムを悪用する方法だけでなく、システムと一般ユーザーがやり取りする際に、そのシステムが問題のある有害なコンテンツをどのように生成するのかについても焦点を当てる」と記している。

 3つ目の洞察は、AIシステムが常に進化し続けているため、さまざまなレベルでのAIシステムのレッドチーミングが必要になるというところにある。これにより4つ目の洞察が導き出される。それは、生成型AIシステムのレッドチーミングには複数にわたる試みが必要になるというものだ。

 生成型AIシステムとのやり取りは、そのたびに異なった出力が得られる傾向にある。このためMicrosoftは、システムの問題を見過ごしてしまわないようにするために、レッドチーミングによる多角的な試みを実行しなければならないという知見を得ている。

 最後に、MicrosoftはAIの問題を緩和するには、深層防御という考え方が必要になると記している。つまり、レッドチームが問題を洗い出した後、その問題に取り組むためのさまざまな技術的緩和策を導入することになる。

 同社が採っているような対策は、新たなAIシステムに対する懸念を和らげるのに役立つと同時に、それらのシステムに関連するリスクを軽減するのにも役立つはずだ。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
FCCのパイ委員長の後任代理にネット中立性支持のジェシカ・ローゼンウォーセル氏
企業・業界動向
2021-01-23 19:59
副業の約8割がリモート前提に―副業マッチングのシューマツワーカーが「副業系サービスカオスマップ 2022年版」公開
IT関連
2022-02-04 16:13
自動化で開発がもっと自由に–オラクルCTO・エリソン氏が生成AIに見る未来
IT関連
2023-09-23 06:12
第四北越銀行、「FutureBANK」ベースの営業融資支援システムを導入
IT関連
2023-03-02 04:38
ペルチェ素子でスマホ冷やす「ゲーミングスマクール」、サンコーが発売 レインボーLEDで光る
くらテク
2021-07-06 00:40
ソニー「IMX500」採用、動線分析のリアルタイム処理も可能なエッジAIカメラ「S+ Camera Basic」高機能版登場
IoT
2021-06-24 05:06
東広島市、行政サービスをデジタル化する「市民情報連携基盤」を構築
IT関連
2021-06-14 08:34
Google Healthトップのデビッド・ファインバーグ氏、電子カルテ企業がCEOとして引き抜き
企業・業界動向
2021-08-21 18:11
MySQL互換の分散DB「TiDB Cloud」がサーバレスに対応、「TiDB Cloud Serverless Tier」プレビューを提供開始
MySQL
2022-11-07 06:34
地球温暖化がいよいよ「赤信号」、国連IPCCが報告書で警告
EnviroTech
2021-08-11 04:54
ざんねんなセキュリティ–機能しないIDS/IPS
IT関連
2022-03-12 08:39
日本オラクルとHID、総合行政システムのモダナイゼーションに向け連携を強化
IT関連
2024-01-17 14:57
ざんねんなセキュリティ–流行のゼロトラストが「既に導入済」は本当か?
IT関連
2022-04-16 10:46
アタックサーフェスの拡大で高まるDevSecOpsの重要性
IT関連
2023-02-09 00:14