マイクロソフト、生成AIのリスク特定に役立つ「PyRIT」ツールを公開

今回は「マイクロソフト、生成AIのリスク特定に役立つ「PyRIT」ツールを公開」についてご紹介します。

関連ワード (ソフトウェア等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、ZDNet Japan様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


 生成型の人工知能(AI)モデルは高度な機能を備えるが、虚偽の情報を生成してハルシネーション(幻覚)を起こしたり、悪意ある人物に悪用される恐れのある抜け穴があったりする事例が、数多く確認されている。Microsoftはこの問題の緩和を支援するため、生成AIシステムのリスクを特定するのに役立つツールを発表した。

 Microsoftは米国時間2月22日、「Python Risk Identification Toolkit for generative AI(PyRIT)」をリリースした。これは、MicrosoftのAI Red Teamが、「Copilot」を含む同社の生成AIシステム内のリスクを確認するために使用しているツールだ。

 Microsoftはこの1年間で、複数の高価値の生成AIシステムに対するレッドチーミングを行い、その経験を通して、それらのシステムのレッドチーミングが従来のAIやソフトウェアに対するものとは大きく異なることを学んだと、発表の中で述べた。

 異なる点の1つは、通常のセキュリティリスクに加えて、有害なコンテンツや偽情報の生成など、責任あるAIのリスクを考慮しなければならないことだという。

 また、生成AIモデルはアーキテクチャーがそれぞれ大きく異なり、同じ入力から生成できる結果にばらつきがあるため、すべてのモデルに適合する、合理化された1つのプロセスを見つけるのが難しい。

 その結果、それらのさまざまなリスクの1つ1つを手動で調べる作業が、退屈で時間のかかる、低速なプロセスになってしまう。Microsoftは、自動化がレッドチームに役立つとして、より注意が必要なリスクの高い部分を自動で特定し、定型的なタスクを自動化することができるとしている。そこで登場するのが、PyRITというわけだ。

 PyRITは、悪意のあるプロンプトを生成AIシステムに送信し、返ってきた応答を評価する。その評価に基づいてまた新たなプロンプトを送信するという。

 MicrosoftはPyRITの最大のメリットとして、作業効率が向上し、作業にかかる時間が大幅に短縮されることを挙げている。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
インテル製ドライバーの既知の脆弱性を悪用する犯罪グループ–CrowdStrikeが警鐘
IT関連
2023-01-17 21:26
第5回:メタバースが解決するビジネス課題–売上促進から働き方の改善まで
IT関連
2022-05-24 02:50
欧州委員会、Appleに「App Storeで支配的な立場を乱用している」と予備的見解を通知
企業・業界動向
2021-05-02 12:51
ERP市場が着実に成長、AIが導く新たな可能性
IT関連
2024-02-21 02:34
組織をまたいだ顧客IDの連携活用テクノロジーを展開するLiveRamp
IT関連
2023-03-18 15:03
DXにおけるチェンジマネジメントの要点–コッターの8段階に沿ったDXの壁の乗り越え方
IT関連
2021-08-18 00:41
絵文字専門サイトのEmojipedia、携帯アプリ企業Zedgeが買収
アプリ・Web
2021-08-05 01:58
セールスフォースSVPに聞く–「Einstein Automate」、AIと自動化の可能性(後編)
IT関連
2021-03-15 09:14
「Raspberry Pi 4」を使った「Mastodon」サーバー–立ち上げに必要なものと手順
IT関連
2023-01-19 00:43
クレディセゾンがDX実績を報告–内製開発システムを続々と導入
IT関連
2023-12-22 03:49
米国がシャオミの中国共産党軍事企業指定を解除
パブリック / ダイバーシティ
2021-05-27 07:37
NTT東西、固定電話のIP網移行で最新情報–「マイライン」などサービス終了、便乗商法に注意喚起
IT関連
2022-01-22 09:14
マイクロソフト、「ChatGPT」のプラグイン規格を採用
IT関連
2023-05-25 19:48
OpenAI、企業にAIツール構築を促す新機能導入–セキュリティ向上や費用削減
IT関連
2024-04-26 04:19