何が起きたか
MetaはAI生成テストの質を評価する「ミューテーション検査」(故意に欠陥を注入してテストが検出できるかを判定する手法)をFacebook、Instagram、WhatsApp、Meta製ウェアラブルに2024年10月〜12月に導入しました。プライバシーエンジニアが生成されたテストの73%を承認しました。
なぜ重要か
AI生成テストはコード網羅率100%でもテストが有意味な検証を行わないリスクがあります。従来のカバレッジ指標では検出できない「アサーション(条件確認)の不足」が残る場合、ミューテーション検査により生き残った欠陥から具体的な改善点が見える化され、テストの信頼性向上につながる可能性があります。
注目点
MutGen研究では、ミューテーションフィードバック手法なしの従来プロンプトで53%のミューテーションスコアが、4回反復後も変わらず、一方フィードバック手法導入で89.5%に到達したことが示されており、繰り返し改善の効果が大きいことがわかります。
こういう要約が、毎朝あなたのメールに届きます。
業界と使っているAIツールを選ぶと、仕事に関係するニュースが毎朝届きます。
登録無料・Googleアカウントなら30秒・いつでも解除できますAITodayについて →
この記事についてわからないことをAIに質問できます。AIはこの記事・AIToday の過去記事・Wikipedia を読み、出典を付けて答えます。Q&Aはこのページに公開され、他の読者も読めます。
このようなAIの動きを、御社の業界・競合に合わせて毎日届ける法人プランもあります → 詳しく見る
シェブロンの子会社がUptimeAIとAI導入を巡る3年間の契約を結んだ

クアルコムとCirrascaleは、次世代の省エネ型AI推論(学習済みモデルが答えを生成する段階)の推進を目指す協業を発表した

VisaのMichael Jabbara氏がFox BusinessでAIによる決済脅威の急増を警告した

GE Aerospace初の最高データ・AI責任者Anton Groom氏は、展開済みの全AIを管理する完全に透明な単一プラットフォームの構築を最優先課題に掲げた

AT&TのCOO、Jeff McElfresh氏は、エージェント型AIが帯域の方向を根本的に変えつつあると述べた

次期CEOのリチャード・マクフェイル氏はホーム・デポが「AI対応」になると述べ、AI検索や従業員向けツールを挙げて投資を強化する方針を示した
