TurnstileのAI検出率は0％

この試験は、5種のボット検出システムが2種類の異なる対象をどれだけ認識できるかを比べるものだった。固定手順を踏む定型ボットと、ページを読んで次の行動を決めるAIエージェントである。定型ボットは2形態用意した。自動化の痕跡を残すChromiumと、痕跡を隠しブラウザ情報の偽装と住宅用IPアドレスの使用を設定したCloakBrowserだ。両カテゴリーの差が中心的な発見である。hCaptchaとCloudflare Turnstileは固定手順のボットを95〜100%止めたが、AIエージェントの大半を通した。研究者はこの一部を各検査の仕組みに帰す。hCaptchaの画像選択パズルは定型ボットを妨げたが、3種のAIエージェントは認識して解答できた。Cloudflare Turnstileはブラウザの状態を検査し、チームによれば3種のAIエージェントを課題提示なしにすべて通過させた。パズルではなくスコアで判定するreCAPTCHA v3はエージェントの活動の大半を検出した。だがそれでもCloakBrowserの試行は全く検出できなかった。偽装ブラウザ情報、住宅用IPアドレス、あるいはその両方が原因かはこの試験では分からないとチームは述べた。未解決の限界も一つある。研究は誤検知を測定しておらず、人間をボットと誤認する頻度を評価するには人間の参加者を加えるべきだと研究者は述べている。