AIToday
AIコーディングAI安全性・アラインメントZenn AI/ML掲載日時: 2026年11月6日 19:01

AI生成ツールの実行前に別会社AIの確認を

LINEで送る
AI生成ツールの実行前に別会社AIの確認を

3つのポイント

  1. 何が起きたか

    AIが書いたツールをローカルで動かせば写真が外部サーバーに渡らず、実行されるのはコードの内容だけだとコラムは主張。別会社のAIに事前レビューさせるよう助言する。

  2. なぜ重要か

    コードを書いたAIは同じチャット内で一つの前提に固執しうる。新しいチャット、できれば競合AIなら隠れた送信や削除・上書きの挙動を検出できる。9月下旬のシンガポール事例のような情報漏えいへの備えだ。

わからないところ、AIに聞けます

質問と回答はこのページに公開されます。

こういう要約が、毎朝あなたのメールに届きます。

背景と解説

コラムは実用的な立場を取る。AIがあなたのPCに触れることはなく、コードに書かれた通りに動くのは実行した時だ。だからレビューは外部と通信するコードやファイルの削除・上書きに絞るべきだという。AIはチャット全体を通じて誤った前提に固執しうるため、レビューはあえて新しいチャットに任せ、可能なら別会社のAIに回す。同じベンダーのモデルは同じ盲点を共有しかねないからだ。さらに、作成側のAIにレビュー依頼文まで書かせ、コードの自己説明を除くことで、レビュー側が先入観を持たないようにしている。

教訓となるのが9月下旬のシンガポールの事例だ。従業員がAI製プログラムで会員に一斉メールを送り、受信者同士でアドレスが見えてしまい、約95,000件が流出した。当局はAIの誤作動ではなく、依頼文に「受信者を隠す」指示がなかったと説明した。同社は現在、一斉送信前に2人以上の確認を義務づけている。コラムは、テスト送信が配信ログしか確認しておらず、メールの見た目は検証していなかった点を指摘する。

記事は最後に問いを残す。参考記事や資料をチャットに貼り付けると、AIはその文章中に隠された他人の指示を読んでいるかもしれない。出力だけでなく入力への懸念は未解決のままだ。

よくある質問
AIが渡したコードをそのまま実行すると何が起きうるのか?
コラムはリスクを二つに絞る。外部とやりとりするもの(ネットワーク接続、送信、ダウンロード、インストール)と、ファイルの削除・上書きやPC設定の変更だ。写真の名前変更ツールなら、変わるのはファイル名だけのはずだ。
危険なコードを警告させるにはどう設定する?
外部とやりとりするコードやコマンド、ファイルの削除・上書き、設定変更を書くときは、先に警告し内容を説明するよう一度頼んで記憶させる。記憶に保存できなかったと言われたら、そのAIにメモリ機能の有効化方法を聞くか、新しいチャットごとに依頼文を貼り付ける。
テスト実行でツールの安全性は証明できる?
いいえ。コラムは、手順が動いたかではなく結果を確認すべきだと述べる。
LINEで送る

あなたの仕事に関係するAIニュースを、毎朝お届けします。

業界と使っているAIツールを選ぶと、仕事に関係するニュースが毎朝届きます。

登録無料・Googleアカウントなら30秒・いつでも解除できますAITodayについて →

AIに質問

この記事についてわからないことをAIに質問できます。AIはこの記事・AIToday の過去記事・Wikipedia を読み、出典を付けて答えます。Q&Aはこのページに公開され、他の読者も読めます。

質問と回答はこのページに公開されます。

このようなAIの動きを、御社の業界・競合に合わせて毎日届ける法人プランもあります → 詳しく見る

関連記事

次の記事へ日立エナジー、Celonisとの協業を拡大