
何が起きたか
Sony AIなどがStable Diffusion 3 MediumやAmazonのTitan Image G2を含む画像生成14モデルを1,809件のプロンプトで検証し、14モデル全てが少なくとも10%の確率で認識可能なIPを生成した。
なぜ重要か
各モデルのガードレールは一貫しておらず、あるサービスでブロックされたプロンプトが別のサービスでは認識可能なキャラクターやロゴを生成することがあり、権利者保護にばらつきが生じている。
こういう要約が、毎朝あなたのメールに届きます。
「Evaluating Intellectual Property Guardrails of Generative Image Models: A Technical Report」と題されたこの研究は7月、Sony AIなどに所属する研究者らによって発表された。画像生成AIが既存の知的財産をどれほど頻繁に再現するかだけでなく、それを防ぐ安全対策が実際にどれほど機能しているかの測定を目的としている。
テスト設計では、IP名を指定するプロンプトと、キャラクターやブランド名を出さず外見を描写する間接的なプロンプトを分けた。この区別は重要だ。AmazonやRunwayなど拒否率の高いモデルは直接的なプロンプトの約80%をブロックしたが、名前を伏せると拒否率は下がった。結果はIPのカテゴリーによっても異なり、商用ロゴはほとんどブロックされなかった一方、スーパーヒーローや悪役のキャラクターはより厳しくフィルタリングされた。また、実在の著名人は拒否率が2番目に低かったものの、本人と認識できる画像は全カテゴリーで最も生成されにくかった。
この結果は、現在のガードレールが均一な防御壁ではないことを示唆する。研究者がこれらのギャップを埋める方法をどう提案しているかは記されておらず、各プロバイダーがどう対応するかは未解決のままである。
業界と使っているAIツールを選ぶと、仕事に関係するニュースが毎朝届きます。
登録無料・Googleアカウントなら30秒・いつでも解除できますAITodayについて →
この記事についてわからないことをAIに質問できます。AIはこの記事・AIToday の過去記事・Wikipedia を読み、出典を付けて答えます。Q&Aはこのページに公開され、他の読者も読めます。
このようなAIの動きを、御社の業界・競合に合わせて毎日届ける法人プランもあります → 詳しく見る
Robocurveは11月7日にRoboSpoofを公表し、画像・テキストAIモデル5種を2本のロボットアームで5タスクにかけた

LinumがP-JiTを公開した

Pradaはベテランアニメーターを雇い手描きのクリスマス広告を制作する一方、Coca-Colaはホリデー広告でのAI利用をめぐり反発を受けている

ソニーグループは、生成AIの活用に伴い本番インシデントが242%増加したとの知見を共有し、統制と自由のバランスをどう考えるかを示した

富士フイルムBIはAI「Print Recommendation」をRevoria Press EC2100S/EC2100とSC285S/SC285のオプションとして11月16日から日本とアジア太平洋地域で提供する

西藤氏のベンチマークは15件の実在脆弱性と15件の安全なデコイで4手法を採点
