マイクロソフト、AIのリスクを探るレッドチームによる5つの洞察を公開

今回は「マイクロソフト、AIのリスクを探るレッドチームによる5つの洞察を公開」についてご紹介します。

関連ワード (CIO/経営等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、ZDNet Japan様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


 この半年で、人工知能(AI)がもたらす好ましい影響がこれまで以上に注目されるようになったが、AIのリスクもまた同様だ。

 最悪の場合、AIは誤った情報を生み出し、有害または差別的なコンテンツを生成し、セキュリティやプライバシーのリスクをもたらす可能性がある。そのため、モデルを一般に公開する前に正確なテストを行うことが極めて重要であり、Microsoftは5年前からそれを実行している。

 同社は2018年にAIレッドチームを立ち上げた。同チームは、「攻撃者のように考え」「AIシステムの不具合を探る」ことによって、AIモデルのリスクを調査することを専門とする学際的な専門家で構成されているという。

 そしてMicrosoftはこのほど、責任あるAI導入の模範となるべく、レッドチームの活動と知見を公開した。同社によると、AIモデルをテストする上では、ベースモデルのレベルと、アプリケーションのレベルの双方の視点が欠かせないという。同社はその例として、「Bing Chat」のAIを「GPT-4」のレベルと、GPT-4を利用した実際の検索エクスペリエンスという双方の視点から監視していることを挙げている。

 Microsoftは同社ブログに「いずれのレベルにもそれぞれ固有のメリットがある。例えば、モデルをレッドチーム演習の攻撃対象にすること(レッドチーミング)は、プロセスの初期段階でモデルの悪用方法を洗い出したり、モデルの適用範囲を見極めたり、モデルの制約を理解する上で役立つ」と記している。

 同社は5年間の経験で培ってきた、AIのレッドチーミングに関する重要な5つの洞察を公開した。

 1つ目の洞察は、AIのレッドチームミングという言葉の適用範囲だ。AIのレッドチーミングとは、単にセキュリティをテストすることだけでなく、公平性や、有害なコンテンツの生成といった要素に関するテストを含む技術の総称だ。

 2つ目の洞察は、悪意を持ったペルソナと悪意のないペルソナのそれぞれが犯した失敗に着目する必要があるというものだ。レッドチーミングはたいていの場合、悪意を持ったアクターによるテクノロジーの利用方法に着目するが、平均的なユーザーが利用する際に有害コンテンツがどのように生成されるのかについてもテストする必要がある。

 Microsoftは、「新しい『Bing』において、AIのレッドチーミングは悪意ある敵対者がセキュリティにフォーカスしたテクニックやエクスプロイトを用いてAIシステムを悪用する方法だけでなく、システムと一般ユーザーがやり取りする際に、そのシステムが問題のある有害なコンテンツをどのように生成するのかについても焦点を当てる」と記している。

 3つ目の洞察は、AIシステムが常に進化し続けているため、さまざまなレベルでのAIシステムのレッドチーミングが必要になるというところにある。これにより4つ目の洞察が導き出される。それは、生成型AIシステムのレッドチーミングには複数にわたる試みが必要になるというものだ。

 生成型AIシステムとのやり取りは、そのたびに異なった出力が得られる傾向にある。このためMicrosoftは、システムの問題を見過ごしてしまわないようにするために、レッドチーミングによる多角的な試みを実行しなければならないという知見を得ている。

 最後に、MicrosoftはAIの問題を緩和するには、深層防御という考え方が必要になると記している。つまり、レッドチームが問題を洗い出した後、その問題に取り組むためのさまざまな技術的緩和策を導入することになる。

 同社が採っているような対策は、新たなAIシステムに対する懸念を和らげるのに役立つと同時に、それらのシステムに関連するリスクを軽減するのにも役立つはずだ。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
MS、プライバシーの懸念を呼んだ「Recall」機能提供について新情報公開
IT関連
2024-08-24 15:24
バイデン政権の労働長官はギグワーカーを従業員待遇にすべきと考えている
パブリック / ダイバーシティ
2021-05-01 01:41
AWS、セキュリティ問題を分析する「Amazon Detective」がAmazon EKSのKubernetesワークロードに対応
AWS
2022-08-02 21:44
グーグルが米社員に新型コロナワクチン接種を義務付け、オフィス勤務再開は延期
パブリック / ダイバーシティ
2021-07-30 23:28
高品質なシステム開発を高速に実現するテスト自動化ツール。ノーコードでテストシナリオを作成、UI変更をAIで自動検出しテストを自動メンテしてくれる「Autify」[PR]
PR
2022-12-12 04:29
ヴィーム、2023年の事業戦略を発表–ランサムウェア被害への対応強化
IT関連
2023-04-14 23:46
“モブモルカー”の名前、全て明らかに 「PUI PUI モルカー」映画公開カウントダウンで
くらテク
2021-06-09 01:09
パナソニックAS、自動車向けサイバーセキュリティソリューション強化–開発者不足解消にも
IT関連
2024-10-26 06:04
日本HP、「HP Wolf Security」を発表–エンドポイントの保護とレジリエンスを強化
IT関連
2021-06-11 20:10
GitHubで最も使われている言語、PythonがJavaScriptを抜いて1位に。生成AI関連プロジェクト急増で。GitHubが年次調査「Octoverse 2024」発表
GitHub
2024-11-01 06:35
NEC、新型メインフレーム「AKATSUKI」を発表–DX貢献を強調
IT関連
2022-07-01 21:23
日本製鉄、生産計画システムを開発–クラウド利用で立案を数時間から分単位に
IT関連
2023-10-27 06:15
「仮面ライダーっち」発売 育て方でどのライダーになるか決まる
くらテク
2021-07-20 08:28
「Windows 365」登場で注目の「DaaS」–過去、現在、未来
IT関連
2021-08-12 09:11