マイクロソフト、AIのリスクを探るレッドチームによる5つの洞察を公開

今回は「マイクロソフト、AIのリスクを探るレッドチームによる5つの洞察を公開」についてご紹介します。

関連ワード (CIO/経営等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、ZDNet Japan様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


 この半年で、人工知能(AI)がもたらす好ましい影響がこれまで以上に注目されるようになったが、AIのリスクもまた同様だ。

 最悪の場合、AIは誤った情報を生み出し、有害または差別的なコンテンツを生成し、セキュリティやプライバシーのリスクをもたらす可能性がある。そのため、モデルを一般に公開する前に正確なテストを行うことが極めて重要であり、Microsoftは5年前からそれを実行している。

 同社は2018年にAIレッドチームを立ち上げた。同チームは、「攻撃者のように考え」「AIシステムの不具合を探る」ことによって、AIモデルのリスクを調査することを専門とする学際的な専門家で構成されているという。

 そしてMicrosoftはこのほど、責任あるAI導入の模範となるべく、レッドチームの活動と知見を公開した。同社によると、AIモデルをテストする上では、ベースモデルのレベルと、アプリケーションのレベルの双方の視点が欠かせないという。同社はその例として、「Bing Chat」のAIを「GPT-4」のレベルと、GPT-4を利用した実際の検索エクスペリエンスという双方の視点から監視していることを挙げている。

 Microsoftは同社ブログに「いずれのレベルにもそれぞれ固有のメリットがある。例えば、モデルをレッドチーム演習の攻撃対象にすること(レッドチーミング)は、プロセスの初期段階でモデルの悪用方法を洗い出したり、モデルの適用範囲を見極めたり、モデルの制約を理解する上で役立つ」と記している。

 同社は5年間の経験で培ってきた、AIのレッドチーミングに関する重要な5つの洞察を公開した。

 1つ目の洞察は、AIのレッドチームミングという言葉の適用範囲だ。AIのレッドチーミングとは、単にセキュリティをテストすることだけでなく、公平性や、有害なコンテンツの生成といった要素に関するテストを含む技術の総称だ。

 2つ目の洞察は、悪意を持ったペルソナと悪意のないペルソナのそれぞれが犯した失敗に着目する必要があるというものだ。レッドチーミングはたいていの場合、悪意を持ったアクターによるテクノロジーの利用方法に着目するが、平均的なユーザーが利用する際に有害コンテンツがどのように生成されるのかについてもテストする必要がある。

 Microsoftは、「新しい『Bing』において、AIのレッドチーミングは悪意ある敵対者がセキュリティにフォーカスしたテクニックやエクスプロイトを用いてAIシステムを悪用する方法だけでなく、システムと一般ユーザーがやり取りする際に、そのシステムが問題のある有害なコンテンツをどのように生成するのかについても焦点を当てる」と記している。

 3つ目の洞察は、AIシステムが常に進化し続けているため、さまざまなレベルでのAIシステムのレッドチーミングが必要になるというところにある。これにより4つ目の洞察が導き出される。それは、生成型AIシステムのレッドチーミングには複数にわたる試みが必要になるというものだ。

 生成型AIシステムとのやり取りは、そのたびに異なった出力が得られる傾向にある。このためMicrosoftは、システムの問題を見過ごしてしまわないようにするために、レッドチーミングによる多角的な試みを実行しなければならないという知見を得ている。

 最後に、MicrosoftはAIの問題を緩和するには、深層防御という考え方が必要になると記している。つまり、レッドチームが問題を洗い出した後、その問題に取り組むためのさまざまな技術的緩和策を導入することになる。

 同社が採っているような対策は、新たなAIシステムに対する懸念を和らげるのに役立つと同時に、それらのシステムに関連するリスクを軽減するのにも役立つはずだ。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
企業幹部が語る、データサイエンティストに求められる4つの条件
IT関連
2024-02-21 10:29
「100日後に死ぬワニ」→「100日間生きたワニ」 アニメ映画は「コロナ禍で改題、脚本も書き直し」
くらテク
2021-02-18 23:05
「CustomGPT.ai」でPublickeyのコンテンツを学習させたチャットBotを作ってみた。サイト検索の代わりになるか? 回答の精度と3つの大きな課題
機械学習・AI
2023-02-13 01:40
シスコ、Splunk買収を完了–セキュリティやクラウドにオブザーバビリティを統合
IT関連
2024-03-20 22:31
大和ハウス工業とNTT Com、物流施設での無人点検管理で協業–ドローンやAIなど先進技術を活用
IT関連
2023-07-29 10:40
マルチクラウド導入を推進した自動プロビジョニングツールの現状
IT関連
2022-04-09 10:19
スマホとマイナンバーカードで本人確認 凸版印刷が事業者向けに提供
企業・業界動向
2021-04-17 20:10
「コープデリ」障害で食材配送できず 物流システム切り替えに失敗
企業・業界動向
2021-05-13 01:31
GNOMEとMonoとXamarinの開発者Miguel de Icaza(ミゲル・デ・イカザ)氏がマイクロソフト退職を発表
Microsoft
2022-03-07 00:24
ラック、管理漏れのIPアドレスを調査するサービスを開始
IT関連
2021-04-01 00:50
アトラシアンが製品群にAIを搭載。社内文書や共有情報を学習し、自然言語で社内の情報やプロジェクト進捗などを質問できる「Atlassian Intelligence」発表
DevOps
2023-04-21 00:43
職場でのハラスメントと孤立感、不屈の精神について4人の女性エンジニアに聞く
パブリック / ダイバーシティ
2021-07-03 17:21
米ライドシェアリングLyft、アクティブ乗客数の減少を隠すほど売上は成長
IT関連
2022-02-10 05:35
LayerX、クラウド請求書受領ソフトのインボイス制度対応を強化
IT関連
2023-01-22 19:28