開発者がJevでメール300件を検証、明確な分類は成功

開発者はClaude Sonnet、GPT-Luna、Gemini-Flash、Jevをメール分類で比較した動画を見てこのツールを作った。メルマガや支払い記録を、本当に対応が必要なメールから分けたいという動機から、IMAPでiCloudメールを読み取り専用で取得し、各メッセージの送信者、件名、本文の最初の3000文字をJevに送った。

実装は2バージョンあり、判断のみのclassify.pyと、実際のフォルダ移動を追加したsort_applemail.pyがある。クレジットカード通知、銀行通知、郵便通知、広告、2つの「その他」カテゴリ用の新しいメールボックスを作成した。ツールはブラウザページを開き、ユーザーが期間（7日、14日、2か月）を選んで分類を開始し、その後仕分けを実行できた。

注目すべきは、開発者がJevによって特に可能になったことは少なく、メールアドレスごとにフォルダを登録するだけでも、プライバシーのためにローカルLLMを動かすのでも同じように機能するかもしれないと結論づけた点だ。境界線上のカテゴリ、特に「要返信」が最も改善の余地を示しており、現時点ではAIによるメール分類の価値は、こうした曖昧なルールを十分に明確に定義できるかどうかにかかっている。