AI 탐지기는 영어 비원어민에게 불리할까? 오탐 위험과 대처법
짧은 답
탐지기는 영어 비원어민의 글에 덜 정확할 수 있습니다. 꼼꼼하고 단순하거나 정형화된 영어는 예측하기 쉬운데, 탐지기가 재는 것이 바로 예측 가능성이기 때문입니다. 이 위험은 실제로 있으며 탐지기를 어떻게 만들고 테스트했는지에 따라 달라집니다. 저희는 보정 데이터에 비원어민 저자의 논문을 일부러 포함했고, 그중 1.1%가 "AI 가능성 높음"으로 판정되었습니다.
핵심 요약
- 탐지기는 단어 선택의 예측 가능성을 측정하는데, 학습자는 안전하고 규칙적인 표현을 쓰는 경우가 많아 더 예측하기 쉽습니다.
- 탐지기가 편향되어 있는지는 학습과 테스트 방식에 달려 있습니다. 비원어민 저자의 글로 테스트했는지 확인하세요.
- 저희는 보정에 비원어민 저자가 쓴 사람의 글을 포함했고, 1.1%가 "AI 가능성 높음"으로 판정되어 원어민 학술 글의 비율과 비슷했습니다.
- 점수는 증거가 아닙니다. 비원어민 작성자도 초안과 메모를 보관해 두면 자신의 글을 설명할 수 있습니다.
- 나만의 사례와 출처를 넣어 구체적으로 쓰면 논지도 결과도 좋아집니다.
우려하는 점을 솔직하게 말하면
영어를 추가 언어로 배운 학생들은 탐지기가 자기 글을 AI로 오인할까 걱정합니다. 합리적인 걱정입니다. 탐지기는 글이 얼마나 예측 가능한지를 추정하는데, 제2언어로 쓰는 글은 대체로 더 조심스럽고 규칙적이며 배운 모범 문장에 가깝기 때문입니다.
유창한 원어민의 글로만 학습한 탐지기는 그런 조심스러움을 기계적인 글로 볼 수 있습니다. 실제로 그런 일이 생기는지는 탐지기를 어떻게 만들었고 무엇으로 테스트했는지에 달려 있습니다.
단순한 영어가 예측 가능해 보이는 이유
아직 익히는 중인 언어로 쓸 때는 확실히 아는 단어를 고르고, 연습한 문장 패턴을 선호하며, 위험한 관용구는 피하게 됩니다. 이것은 좋은 글쓰기 습관이지만, 쓰는 단어와 구조의 폭이 좁아지기도 합니다.
언어 모델 역시 매 단계에서 가장 예상되는 단어를 선호합니다. 그래서 좁고 규칙적인 어휘 범위는 이유가 전혀 다르더라도 통계적으로는 모델 출력과 비슷해 보일 수 있습니다.
- Moreover, Furthermore, In addition 같은 흔한 연결어를 문단마다 반복합니다.
- 길이가 비슷하고 주어-동사-목적어 형태가 같은 문장이 이어집니다.
- 교재, 템플릿, 표현 모음집에서 외운 구절을 씁니다.
- 다른 언어에서 옮겨 온 조심스럽고 직역에 가까운 단어를 고릅니다.
공정한 테스트란
탐지기가 편향되었는지 알려면 비원어민 저자가 쓴 사람의 글로 테스트해서 오탐 수를 세어 보면 됩니다. 이 집단의 오탐률이 훨씬 높다면, 전체 정확도와 관계없이 그 탐지기는 이들에게 불공정합니다.
저희는 보정에 이 집단을 일부러 포함했습니다. 공개 연구 아카이브에서 가져온 비원어민 저자의 사람이 쓴 학술 텍스트는 1.1%가 "AI 가능성 높음"으로 판정되었고, 전체 사람이 쓴 학술 텍스트 583건 중 별도로 보관한 두 집합에서는 각각 1%와 0.7%였습니다. 차이는 작지만, 편집과 심사를 거친 발표 논문에 기반한 수치이므로 모든 종류의 학습자 글쓰기를 대표하지는 않습니다.
여전히 위험이 남아 있는 부분
저희 수치는 전문가 수준으로 글을 쓰는 저자의 학술 글에 대한 것입니다. 아직 유창성을 쌓는 1학년 학생, 아주 짧은 글, 학술이 아닌 장르에서도 같은 결과가 나온다는 보장은 없습니다. 50단어 미만에서는 저희 탐지기가 판정을 아예 내지 않습니다. 영어 전용 도구는 대부분 다른 언어로 쓰인 글에서도 엉뚱한 결과를 낼 수 있습니다.
더 일반적으로, 다른 탐지기들은 다른 방식으로 테스트되었을 수 있습니다. 기관이 어떤 도구에 의존한다면, 그 도구가 비원어민 작성자에게도 잘 작동한다는 근거가 무엇인지 물어보는 것은 정당합니다.
영어가 추가 언어라면 실천할 수 있는 조언
표시되지 않으려고 글을 일부러 서툴게, 덜 꼼꼼하게 쓸 필요는 없습니다. 글에 나 자신을 더 담으면 되고, 그러면 더 좋은 에세이가 되기도 합니다.
- 나만 아는 구체적인 내용을 넣으세요. 내 데이터, 사례, 읽기 메모, 수업 토론 등입니다.
- 일반적으로 요약하지 말고 나만의 논리와 입장을 밝히세요.
- 문장에 변화를 주세요. 짧고 직접적인 문장과 긴 문장을 섞고, 같은 연결어를 반복하지 마세요.
- 유의어 사전에서 찾은 동의어 대신 수업에서 쓰는 용어를 쓰세요.
- AI 도구의 문장 전체 다시 쓰기는 조심하세요. 가벼운 교정은 괜찮지만, 받아들인 다시 쓰기는 글을 기계가 쓴 글로 만듭니다.
AI처럼 읽힘Moreover, the use of mobile phones has many advantages for students. Furthermore, it also has some disadvantages.
내 글처럼 읽힘Phones helped me most in the library, where I could photograph whiteboard notes. They hurt me in the dorm, where I checked messages every few minutes while studying.
증거로 나를 지키기
점수가 나에게 불리하게 쓰이는 일이 생기더라도, 숫자보다는 작성 과정의 기록이 더 큰 힘을 가집니다. 버전 기록, 초안, 메모, 출처를 보관하고, 내 논지를 말로 설명할 수 있게 준비하세요. 그편이 쉽다면 간단한 영어로 해도 됩니다. 탐지기 점수는 추정치일 뿐 증거가 아니며, 정중하게 그렇게 말하고 소속 기관의 절차에 따른 검토를 요청할 수 있습니다.
먼저 초안을 직접 검사해 볼 수도 있습니다. AITurnitin은 계정 없이 1회 1,000단어까지 검사하고 AI처럼 읽히는 문장을 강조 표시하므로, 어디에 구체적인 내용을 더해야 할지 알 수 있습니다.
자주 묻는 질문
AI 탐지기가 영어 비원어민을 차별하나요?
원어민의 글로만 학습하거나 테스트했다면 그럴 수 있습니다. 단순하고 규칙적인 영어가 더 예측 가능하기 때문입니다. 특정 탐지기가 그런지는 어떻게 테스트했는지에 달려 있습니다. 저희는 보정에 비원어민 저자를 포함했고 1.1%가 "AI 가능성 높음"으로 판정되었다고 공개합니다.
더 쉬운 영어로 쓰면 AI로 표시될까요?
그것만으로는 아닙니다. 분명하고 쉬운 영어는 좋은 글쓰기입니다. 위험을 높이는 것은 평범하고 리듬이 고르며 정형화된 글입니다. 어휘의 난도보다 구체적인 예시와 나만의 논리가 더 중요합니다.
먼저 문법 도구로 영어를 고쳐도 될까요?
맞춤법과 문법을 가볍게 고치는 것은 대부분의 수업에서 괜찮지만 규정을 확인하세요. AI 도구의 문장 전체 다시 쓰기를 그대로 받아들이면 글이 기계가 쓴 것처럼 읽힐 수 있으니, 가능하면 실수는 직접 고치세요.
영어가 모국어가 아닌데 AI 사용 의심을 받으면 어떻게 하나요?
침착하게 근거가 무엇인지 묻고, 초안과 버전 기록을 공유하고, 직접 만나 내 글을 설명하겠다고 제안하세요. 탐지기는 추정치일 뿐이라는 점을 말하고, 기관의 공식 절차에 따라 처리해 달라고 요청하세요.
비원어민 작성자에 대한 저희 수치를 믿어도 되나요?
비원어민 저자가 쓴 실제 공개 학술 논문 테스트 세트에 대한 수치이며 비율을 투명하게 공개합니다. 어떤 학습자도 표시되지 않는다는 증명은 아니므로, 작성 과정 기록을 보관하고 어떤 결과든 추정치로 받아들이세요.