AIToday

AIの不具合報告システム始動 研究者ら開発

WIRED AI13時間前5分で読める
AIの不具合報告システム始動 研究者ら開発

要点

AI研究者グループが、AIシステムの不具合を報告・追跡するためのクラウドソース型ウェブサイト「FLARE-AI」を立ち上げました。現在、AI不具合の報告方法は企業ごとにばらばらで統一基準がないため、このシステムにより、チャットボットの有害出力や個人情報漏洩などの問題を一元的に把握・対応できるようになります。先月の米国議会法案も中央データベースの整備を検討しており、AIの安全性監視体制が強化される見通しです。

こういう要約が、毎朝あなたのメールに届きます。

無料で登録 →

3つのポイント

  • 何が起きたか

    AI研究者のグループが、AI不具合の報告・追跡を行うクラウドソース型ウェブサイト「FLARE-AI」を立ち上げました。チャットボットがマルウェアや爆弾製造レシピを生成したり、個人情報を漏らしたりするなどのAI害を報告できるシステムです。オープンソースコードにより、他者が問題を検証し、モデル開発企業やMITEなどの組織へ報告をルーティングできます。

  • なぜ重要か

    現在、AIシステムの不具合を報告する中央管理された統一的な仕組みがないため、企業ごとに異なる基準で対応され、問題が見落とされる可能性があります。このため、AIが広く採用されエージェント(自ら判断して作業するAI)がより強い力を持つようになるにつれて、不具合報告システムが重要になる〜とみられます。先月の米国議会法案は、国立標準技術研究所にAI不具合報告の基準作成と中央データベース維持を要求しており、政府支援による体系化が進む可能性があります。

  • 注目点

    このシステムは49組織32機関のAI専門家の協力で開発されました。LayerXが今週、OpenAIのAtlasやPerplexityのCometなどのAI搭載ウェブブラウザの安全機構を回避する方法を開示するなど、最近AIツールの不具合事例が相次いでいます。

よくある質問

FLARE-AIは具体的にどのような不具合を報告できますか?
チャットボットがマルウェアや爆弾製造レシピを生成したり、個人情報を漏らしたり、ユーザーの幻想的思考を引き起こしたりするといった問題、また心理的害、差別・バイアス、偽情報といった幅広いAI害が対象です。
このシステムの開発には誰が関わっていますか?
HuggingFaceのAIポリシー研究者Avijit Ghoshと、コンピュータ科学者Elaine ZhuおよびShayne Longpreが主導し、32の異なる組織から49人のAI専門家が協力して開発されました。
米国議会との関係は何ですか?
昨年6月に発表された米国議会法案に対して、研究者グループが関連助言を行いました。この法案は、国立標準技術研究所にAI不具合報告の基準作成と中央AI不具合報告データベースの維持を要求しています。

ディスカッション

この記事のディスカッションはまだありません

AIニュースを毎日お届け

200以上のソースから厳選したAIニュースを毎日無料でお届けします。

無料で始める

登録無料・30秒で完了・いつでも解除できます

毎朝1分、AIの要点だけ。

200媒体以上・Email/LINE/Slack 対応

無料で受け取る →