AI判定のスコアの意味は？パーセンテージの正しい読み方

まず、その数字が何かを知る

スコアの意味を判断する前に、ツールが何を報告しているのかを調べましょう。多くの学生が「AI 40%」のような数字を見て、エッセイの40%が機械によって書かれたという意味だと思い込みます。それは考えられる意味の1つにすぎず、正しくないことも多くあります。

同じ数字でも、ツールによってまったく異なる量を表すことがあるので、結果を比べる前に、そのツールのスコアの説明を必ず確認してください。

判定されたテキストの割合と、AIである確率

ツールが分析結果をパーセンテージに変える一般的な方法は2つあり、答えている問いが違います。

テキストの割合を示すスコアは、文書のどれだけがAIらしく見えたかを表します。たとえば、10文のうち4文が判定された、というようにです。確率を示すスコアは、文書全体がAIによって生成された可能性をツールがどのくらいと考えているかを表します。たとえば、85%の確率、というようにです。

• 人間のエッセイで判定された割合が40%というのは、ありきたりな文が4つあり、残りは問題なし、という意味かもしれません。
• 40%の確率は、テキスト全体についてかなり不確かな結果であり、AIの割合を測ったものではありません。
• 完全にAIのテキストは、高い確率と高い割合になりえます。軽く編集したAIテキストは、確率は高くても割合は低くなることがあります。

ツールによって結果が食い違う理由

同じ段落を3つの判定ツールにかけると、3つの異なる答えが出ることがあります。そのうち2つが壊れているという意味ではありません。それぞれのツールには、独自の学習データ、ウィンドウや文のスコアの付け方、しきい値、数字の意味についての考え方があります。

判定ツールは、テストされた素材も違います。学術文章で較正されたツールは、広告文では違う挙動をしますし、ネイティブ話者でテストされたツールは、学習者の文章では違う挙動をするかもしれません。スコアが共通の尺度に乗っていないため、ツール間で生のパーセンテージを比べても意味がありません。代わりに、ハイライトされた文とその根拠を比べましょう。

当サイトの3段階の判定の読み方

AITurnitinは、解釈が必要な1つのスコアではなく、3段階の判定のうち1つを出し、結果の元になった文をハイライトします。50語未満のテキストには、証拠が少なすぎるため判定が出ません。

• 「人間が書いた可能性が高い」：語の使い方が、判定するほどAIのテキストに似ていません。それでも推定であり、保証書ではありません。
• 「どちらとも言えない」：テキストが境界の範囲にあります。ハイライトを読み、具体的な情報を加え、書き直したあとで再チェックするのもよいでしょう。
• 「AIが書いた可能性が高い」：語の使い方が、判定ツールが学習したAIのテキストに似ています。当サイトの較正では、人間の学術テキストでこのラベルが付いたのは1%なので誤りの可能性はあり、2026年のAIが書いた無編集のテキストでは96.9%に付きました。

スコアでは分からないこと

スコアでは、誰がテキストを書いたのか、AIの助けが認められていたのか、作品がどのように作られたのかは分かりません。丁寧にフォーマルに書いた学生と、ツールを使った学生を区別することもできません。テキストが同じに見えることがあるからです。

AIがどれだけ関わったかも分かりません。AIに文法を直してもらった人と、AIに議論を書かせた人が、似た数字を出すことがあります。だからこそ、不正についての判断は、しきい値ではなく、過程の証拠と対話に基づくべきなのです。

スコアを賢く使う

書き手なら、文のハイライトを使ってありきたりな箇所を見つけ、具体的な細部と自分の考えで書き直し、もう一度チェックします。教員なら、判定は判決ではなく、過程について尋ねるきっかけとして扱ってください。判定された本人なら、下書きと編集履歴を集め、何の証拠に基づく懸念なのかを尋ねましょう。

自分の下書きで試すこともできます。AITurnitinは、アカウントなしで1,000語まで、1日3回まで無料でチェックできます。よく較正された当サイトの判定ツールでも、保留した2つのセットで、人間の学術テキストの1%と0.7%を「AIが書いた可能性が高い」と判定しました。スコアだけで話を終わらせるべきではありません。

よくある質問