マイクロソフト、AIのリスクを探るレッドチームによる5つの洞察を公開

今回は「マイクロソフト、AIのリスクを探るレッドチームによる5つの洞察を公開」についてご紹介します。

関連ワード (CIO/経営等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、ZDNet Japan様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


 この半年で、人工知能(AI)がもたらす好ましい影響がこれまで以上に注目されるようになったが、AIのリスクもまた同様だ。

 最悪の場合、AIは誤った情報を生み出し、有害または差別的なコンテンツを生成し、セキュリティやプライバシーのリスクをもたらす可能性がある。そのため、モデルを一般に公開する前に正確なテストを行うことが極めて重要であり、Microsoftは5年前からそれを実行している。

 同社は2018年にAIレッドチームを立ち上げた。同チームは、「攻撃者のように考え」「AIシステムの不具合を探る」ことによって、AIモデルのリスクを調査することを専門とする学際的な専門家で構成されているという。

 そしてMicrosoftはこのほど、責任あるAI導入の模範となるべく、レッドチームの活動と知見を公開した。同社によると、AIモデルをテストする上では、ベースモデルのレベルと、アプリケーションのレベルの双方の視点が欠かせないという。同社はその例として、「Bing Chat」のAIを「GPT-4」のレベルと、GPT-4を利用した実際の検索エクスペリエンスという双方の視点から監視していることを挙げている。

 Microsoftは同社ブログに「いずれのレベルにもそれぞれ固有のメリットがある。例えば、モデルをレッドチーム演習の攻撃対象にすること(レッドチーミング)は、プロセスの初期段階でモデルの悪用方法を洗い出したり、モデルの適用範囲を見極めたり、モデルの制約を理解する上で役立つ」と記している。

 同社は5年間の経験で培ってきた、AIのレッドチーミングに関する重要な5つの洞察を公開した。

 1つ目の洞察は、AIのレッドチームミングという言葉の適用範囲だ。AIのレッドチーミングとは、単にセキュリティをテストすることだけでなく、公平性や、有害なコンテンツの生成といった要素に関するテストを含む技術の総称だ。

 2つ目の洞察は、悪意を持ったペルソナと悪意のないペルソナのそれぞれが犯した失敗に着目する必要があるというものだ。レッドチーミングはたいていの場合、悪意を持ったアクターによるテクノロジーの利用方法に着目するが、平均的なユーザーが利用する際に有害コンテンツがどのように生成されるのかについてもテストする必要がある。

 Microsoftは、「新しい『Bing』において、AIのレッドチーミングは悪意ある敵対者がセキュリティにフォーカスしたテクニックやエクスプロイトを用いてAIシステムを悪用する方法だけでなく、システムと一般ユーザーがやり取りする際に、そのシステムが問題のある有害なコンテンツをどのように生成するのかについても焦点を当てる」と記している。

 3つ目の洞察は、AIシステムが常に進化し続けているため、さまざまなレベルでのAIシステムのレッドチーミングが必要になるというところにある。これにより4つ目の洞察が導き出される。それは、生成型AIシステムのレッドチーミングには複数にわたる試みが必要になるというものだ。

 生成型AIシステムとのやり取りは、そのたびに異なった出力が得られる傾向にある。このためMicrosoftは、システムの問題を見過ごしてしまわないようにするために、レッドチーミングによる多角的な試みを実行しなければならないという知見を得ている。

 最後に、MicrosoftはAIの問題を緩和するには、深層防御という考え方が必要になると記している。つまり、レッドチームが問題を洗い出した後、その問題に取り組むためのさまざまな技術的緩和策を導入することになる。

 同社が採っているような対策は、新たなAIシステムに対する懸念を和らげるのに役立つと同時に、それらのシステムに関連するリスクを軽減するのにも役立つはずだ。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
「Windows 11」新プレビュー、「Dev」と「Beta」チャネルでリリース
IT関連
2022-03-26 16:43
在宅勤務で「ローパフォーマー」の従業員は“蚊帳の外”に–クアルトリクス
IT関連
2021-07-02 18:31
金持ち連中はなぜくだらない資産をやりとりしているんだ?
VC / エンジェル
2021-02-09 00:31
GitHubが動画のアップロード機能に正式対応。バグの再現手順や機能のデモなどの説明が動画で容易に
GitHub
2021-05-18 04:31
日本HP、本社オフィスを縮小移転 出社する社員が全体の1割以下に
キャリア・しごと
2021-04-17 16:08
ランサムウェアのビジネスモデルが多様化–トレンドマイクロの2023年セキュリティ脅威予測
IT関連
2022-12-29 14:26
「LGBTQの居場所をつくる」米国10代向けアプリweBelong、ミクシィ笠原氏などから約7300万円調達
パブリック / ダイバーシティ
2021-03-09 14:33
ゴディバ、Zendeskで顧客の問い合わせを管理–コロナ禍で業務を改革
IT関連
2021-03-10 22:30
Google翻訳のAPIに新機能 PDFやWord、Excelファイルのレイアウトを維持したまま中身を翻訳
クラウドユーザー
2021-05-14 09:10
ニューヨークの電力網に負担をかけずに電動モペッドの電力を供給するためにRevelはゲーム化したアプリを利用
モビリティ
2021-07-15 10:13
「お笑いマンガ道場」27年ぶりYouTubeで復活 8日正午ごろ配信 地上波でも特別番組
くらテク
2021-08-06 16:05
宮崎日本大学学園、快適に学習できる無線LAN環境を構築–バッファローが支援
IT関連
2024-06-22 17:37
Zoom、約110億円のファンドを立ち上げ–開発者エコシステムの拡大に投資
IT関連
2021-04-20 06:48
Amazon、FTCのリナ・カーン委員長の独禁法調査関与に忌避の申し立て
企業・業界動向
2021-07-02 21:33