マイクロソフト、生成AIのリスク特定に役立つ「PyRIT」ツールを公開

今回は「マイクロソフト、生成AIのリスク特定に役立つ「PyRIT」ツールを公開」についてご紹介します。

関連ワード (ソフトウェア等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、ZDNet Japan様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


 生成型の人工知能(AI)モデルは高度な機能を備えるが、虚偽の情報を生成してハルシネーション(幻覚)を起こしたり、悪意ある人物に悪用される恐れのある抜け穴があったりする事例が、数多く確認されている。Microsoftはこの問題の緩和を支援するため、生成AIシステムのリスクを特定するのに役立つツールを発表した。

 Microsoftは米国時間2月22日、「Python Risk Identification Toolkit for generative AI(PyRIT)」をリリースした。これは、MicrosoftのAI Red Teamが、「Copilot」を含む同社の生成AIシステム内のリスクを確認するために使用しているツールだ。

 Microsoftはこの1年間で、複数の高価値の生成AIシステムに対するレッドチーミングを行い、その経験を通して、それらのシステムのレッドチーミングが従来のAIやソフトウェアに対するものとは大きく異なることを学んだと、発表の中で述べた。

 異なる点の1つは、通常のセキュリティリスクに加えて、有害なコンテンツや偽情報の生成など、責任あるAIのリスクを考慮しなければならないことだという。

 また、生成AIモデルはアーキテクチャーがそれぞれ大きく異なり、同じ入力から生成できる結果にばらつきがあるため、すべてのモデルに適合する、合理化された1つのプロセスを見つけるのが難しい。

 その結果、それらのさまざまなリスクの1つ1つを手動で調べる作業が、退屈で時間のかかる、低速なプロセスになってしまう。Microsoftは、自動化がレッドチームに役立つとして、より注意が必要なリスクの高い部分を自動で特定し、定型的なタスクを自動化することができるとしている。そこで登場するのが、PyRITというわけだ。

 PyRITは、悪意のあるプロンプトを生成AIシステムに送信し、返ってきた応答を評価する。その評価に基づいてまた新たなプロンプトを送信するという。

 MicrosoftはPyRITの最大のメリットとして、作業効率が向上し、作業にかかる時間が大幅に短縮されることを挙げている。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
内閣官房IT総合戦略室が公式noteアカウント開設 民間人材やデジタル庁の事業を紹介
ネットトピック
2021-05-14 16:04
欧州全域への拡大を目指す英国発の花束ギフトサービスBloom & Wildが約106億円を調達
ネットサービス
2021-02-26 21:44
SCSK、サイバーセキュリティ対策に特化した専門事業会社を設立
IT関連
2023-10-01 21:15
テスラはロボット「Tesla Bot」を開発中、2022年完成予定
IT関連
2021-08-21 04:05
テレワーク、中高年は「歓迎」も20代「幸福度低下」のナゼ 若年層が実感する「抑圧」と「強制」
IT関連
2021-06-17 14:44
Epic Gamesが楽曲販売プラットフォームBandcampを買収、音楽分野へ進出
IT関連
2022-03-04 11:55
ニッセンのカタログを「絵の練習」に使う人多数 コーデ確認できるページに注目
ネットトピック
2021-01-17 19:50
日立、ビル管理の管制センターとアプリを全面刷新–AIも本格導入
IT関連
2022-04-28 21:36
スタートアップを経済の推進役に据えるスペインの10年計画
その他
2021-04-07 16:07
コニカミノルタジャパンがタレントマネジメントの先に見る会社のあり方
IT関連
2022-07-13 03:05
成長を続けるローコード/ノーコード市場、IT部門の役割も変化へ
IT関連
2022-11-15 06:14
Microsoftの“次世代Windows”はやっぱり「Windows 11」?
アプリ・Web
2021-06-12 23:03
副業人材の需要、ITエンジニア・情シスが上位 人気の理由は
キャリア・しごと
2021-08-12 01:30
「Android」端末で空き容量を増やすには–余分なファイルを簡単に削除
IT関連
2022-06-26 22:51