人間が書いた部分とAIが生成した部分が混ざった文書からAI部分を検出する、理論的にもっとも精度の高い手法が発明されたとの報告。
文単位だけでなくトークン単位での細かい区切り検出にも応用できる見込みだそうです。
研究者らは、文ごとのAI度合いスコアを時系列データとみなし、変化点検出の手法をAI文書の検出に持ち込みました。
人間パートとAIパートの境目を、データの傾向が切り替わる点として見つけ出すという発想です。
WikiQAやニュース、物語などのデータセット、そして実在の人間とAIの共同執筆データセットであるCoAuthorでも、高い精度で境目を当てられています。
理論面では、この重み付け手法が一定の条件下で数学的に最も効率の良い解になっていることを証明しており、同じ課題設定の中ではこれ以上の精度向上は原理的に難しいことが示されました。
