AI 탐지 점수는 무슨 뜻일까? 퍼센트 읽는 법

먼저 그 숫자가 무엇인지 알아보기

점수의 의미를 판단하기 전에, 도구가 무엇을 보고하는지 알아보세요. 많은 학생이 AI 40% 같은 수치를 보고 에세이의 40%를 기계가 썼다는 뜻으로 받아들입니다. 그것은 가능한 여러 뜻 중 하나일 뿐이고, 맞지 않는 경우가 많습니다.

같은 수치가 도구에 따라 꽤 다른 양을 나타낼 수 있으므로, 결과를 비교하기 전에 항상 그 도구의 점수 설명을 확인하세요.

표시된 글의 비율과 AI일 확률

도구가 분석을 퍼센트로 바꾸는 흔한 방식은 두 가지이며, 서로 다른 질문에 답합니다.

글의 비율 점수는 문서의 얼마나 많은 부분이 AI 같아 보였는지를 알려 줍니다. 예를 들어 열 문장 중 네 문장이 표시되었다는 식입니다. 확률 점수는 문서 전체가 AI가 생성했을 가능성이 얼마나 된다고 도구가 보는지를 알려 줍니다. 예를 들어 85% 확률입니다.

• 사람이 쓴 에세이에서 표시된 비율 40%는 평범한 문장 네 개가 있고 나머지는 괜찮다는 뜻일 수 있습니다.
• 확률 40%는 글 전체에 대해 상당히 불확실한 결과이지, AI가 쓴 분량의 척도가 아닙니다.
• 전부 AI가 쓴 글은 확률도 비율도 높게 나올 수 있습니다. 가볍게 편집한 AI 글은 확률은 높고 비율은 더 낮게 나올 수 있습니다.

도구마다 결과가 다른 이유

같은 문단을 탐지기 세 곳에 돌리면 세 가지 다른 답이 나올 수 있습니다. 그렇다고 둘이 고장 났다는 뜻은 아닙니다. 각 도구는 고유한 학습 데이터, 윈도우와 문장의 점수 산출 방식, 임계값, 그리고 숫자가 무엇을 뜻하는지에 대한 자기만의 생각이 있습니다.

탐지기는 테스트한 자료도 다릅니다. 학술 글로 보정된 도구는 광고 문구에서는 다르게 동작하고, 원어민으로 테스트한 도구는 학습자의 글에서 다르게 동작할 수 있습니다. 점수가 공통 척도 위에 있지 않으므로 도구 사이에서 원래의 퍼센트를 비교하는 것은 의미가 없습니다. 대신 강조된 문장과 그 근거를 비교하세요.

저희 세 가지 판정을 읽는 법

AITurnitin은 해석해야 하는 점수 하나 대신 세 가지 판정 중 하나를 내놓고, 결과의 바탕이 된 문장을 강조 표시합니다. 50단어 미만의 글은 증거가 너무 적어서 판정이 없습니다.

• 사람 작성 가능성 높음: 표현이 AI 글과 표시할 만큼 닮지 않았습니다. 그래도 추정치이며 증명서가 아닙니다.
• 불확실: 글이 경계 구간에 있습니다. 강조 표시를 읽고, 구체적인 내용을 더하고, 고친 뒤에 다시 검사해 보세요.
• AI 가능성 높음: 표현이 탐지기가 학습한 AI 글과 닮았습니다. 저희 보정에서 사람이 쓴 학술 텍스트 중 이 판정이 나온 비율은 1%였으므로 틀릴 수 있습니다. 편집 없는 2026년 AI 텍스트는 96.9%가 이 판정을 받았습니다.

점수가 알려 줄 수 없는 것

점수는 누가 글을 썼는지, AI 도움이 허용되었는지, 작업이 어떻게 만들어졌는지를 알려 줄 수 없습니다. 꼼꼼하고 격식 있게 쓴 학생과 도구를 쓴 학생은 글이 같아 보일 수 있어서 점수로는 구분할 수 없습니다.

또한 AI가 얼마나 관여했는지도 알려 줄 수 없습니다. AI에게 문법을 고치게 한 사람과 AI에게 논증을 쓰게 한 사람이 비슷한 숫자를 만들 수 있습니다. 그래서 윤리에 관한 결정은 임계값이 아니라 작성 과정의 증거와 대화에 근거해야 합니다.

점수를 현명하게 쓰는 방법

작성자라면 문장 강조 표시로 평범한 대목을 찾아 구체적인 내용과 내 추론으로 고쳐 쓰고 다시 검사하세요. 교수자라면 표시를 판결이 아니라 작성 과정을 물어볼 신호로 다루세요. 표시를 받은 당사자라면 초안과 버전 기록을 모으고 어떤 증거에 근거한 의심인지 물어보세요.

내 초안으로 직접 해 볼 수 있습니다. AITurnitin은 계정 없이 1,000단어까지, 하루 3회까지 무료로 검사합니다. 보정을 잘 마친 저희 탐지기도 별도로 보관한 두 집합에서 사람이 쓴 학술 글의 1%와 0.7%를 "AI 가능성 높음"으로 판정했으므로, 점수 하나로 대화를 끝내서는 안 됩니다.

자주 묻는 질문