Công cụ phát hiện AI có thiên vị người viết tiếng Anh không phải bản ngữ?
Trả lời ngắn
Công cụ phát hiện có thể kém tin cậy hơn với người viết tiếng Anh không phải bản ngữ, vì tiếng Anh cẩn trọng, đơn giản hoặc theo khuôn mẫu dễ đoán hơn, mà độ dễ đoán chính là thứ công cụ đo. Rủi ro này có thật và phụ thuộc vào cách công cụ được xây dựng và kiểm thử. Dữ liệu hiệu chỉnh của chúng tôi cố ý gồm các bài của tác giả không phải bản ngữ, và 1,1% trong số đó bị gắn nhãn “Có thể do AI”.
Điểm chính
- Công cụ phát hiện đo độ dễ đoán của cách dùng từ, mà người đang học tiếng Anh thường viết bằng những cách diễn đạt an toàn, đều đặn nên dễ đoán hơn.
- Công cụ có thiên vị hay không tùy vào dữ liệu huấn luyện và kiểm thử. Hãy hỏi nó đã được thử trên tác giả không phải bản ngữ chưa.
- Chúng tôi đưa văn bản do tác giả không phải bản ngữ viết vào bước hiệu chỉnh: 1,1% bị gắn nhãn “Có thể do AI”, gần với tỷ lệ của văn bản học thuật bản ngữ.
- Điểm số không bao giờ là bằng chứng, và người viết không phải bản ngữ nên giữ bản nháp, ghi chú để có thể giải thích bài của mình.
- Viết cụ thể, với ví dụ và nguồn của riêng bạn, giúp cả lập luận lẫn kết quả kiểm tra tốt hơn.
Mối lo ngại, nói thẳng
Sinh viên học tiếng Anh như ngoại ngữ lo rằng công cụ phát hiện sẽ nhầm bài của mình là AI. Nỗi lo đó có cơ sở. Công cụ phát hiện hoạt động bằng cách ước tính văn bản dễ đoán đến đâu, mà viết bằng ngôn ngữ thứ hai thường thận trọng hơn, đều đặn hơn và bám sát các mẫu câu mà bạn đã được dạy.
Công cụ chỉ được huấn luyện trên văn bản bản ngữ trôi chảy có thể coi sự thận trọng đó là dấu hiệu của máy. Trên thực tế điều này có xảy ra hay không còn tùy cách công cụ được xây dựng và dữ liệu dùng để kiểm thử.
Vì sao tiếng Anh đơn giản có thể trông dễ đoán
Khi viết bằng một ngôn ngữ bạn vẫn đang học, bạn chọn những từ mình chắc chắn, ưu tiên các cấu trúc câu đã luyện và tránh thành ngữ có rủi ro. Đó là thói quen viết tốt. Nhưng nó cũng thu hẹp phạm vi từ vựng và cấu trúc bạn dùng.
Mô hình ngôn ngữ cũng ưu tiên từ được kỳ vọng nhất ở mỗi bước. Vì vậy một lối diễn đạt hẹp và đều đặn có thể giống đầu ra của mô hình về mặt thống kê, dù lý do hoàn toàn khác nhau.
- Các từ nối quen thuộc lặp lại qua nhiều đoạn, như Moreover, Furthermore và In addition.
- Các câu có độ dài tương tự và cùng khuôn chủ ngữ - động từ - tân ngữ.
- Cụm từ học thuộc từ giáo trình, mẫu câu hoặc ngân hàng cụm từ.
- Cách chọn từ cẩn trọng, sát nghĩa đen sau khi dịch từ ngôn ngữ khác.
Một bài kiểm tra công bằng trông như thế nào
Cách để biết công cụ có thiên vị hay không là thử nó trên văn bản do tác giả không phải bản ngữ viết và đếm số lần báo nhầm. Nếu tỷ lệ báo nhầm ở nhóm đó cao hơn nhiều, công cụ bất công với họ, bất kể độ chính xác chung.
Chúng tôi cố ý đưa nhóm này vào bước hiệu chỉnh. Các văn bản học thuật do tác giả không phải bản ngữ viết, lấy từ một kho nghiên cứu công khai, bị gắn nhãn “Có thể do AI” ở mức 1,1%, so với 1% và 0,7% trên hai tập giữ lại để kiểm thử gồm 583 văn bản học thuật do người viết nói chung. Chênh lệch này nhỏ, nhưng nó dựa trên các bài nghiên cứu đã công bố, vốn đã được biên tập và phản biện, nên không bao quát mọi kiểu bài viết của người đang học.
Rủi ro vẫn còn ở đâu
Các con số của chúng tôi mô tả văn bản học thuật của những tác giả viết ở trình độ chuyên nghiệp. Chúng không bảo đảm cùng kết quả với một sinh viên năm nhất đang xây dựng sự trôi chảy, với văn bản rất ngắn hoặc với các thể loại không học thuật. Dưới 50 từ, công cụ của chúng tôi không đưa ra kết luận nào. Công cụ chỉ dành cho tiếng Anh cũng có thể cho kết quả lạ với văn bản chủ yếu bằng ngôn ngữ khác.
Nói rộng hơn, các công cụ phát hiện khác có thể được kiểm thử theo cách khác. Nếu một trường dựa vào một công cụ, việc hỏi có bằng chứng nào cho thấy nó hoạt động tốt với người viết không phải bản ngữ là hoàn toàn chính đáng.
Lời khuyên thực tế nếu bạn viết tiếng Anh như ngoại ngữ
Bạn không cần viết dở hơn hay cẩu thả hơn để tránh bị đánh dấu. Bạn cần đưa nhiều hơn con người mình vào văn bản, và điều đó cũng làm bài luận mạnh hơn.
- Thêm những chi tiết cụ thể chỉ bạn mới biết: dữ liệu, trường hợp, ghi chú khi đọc hoặc thảo luận trên lớp của bạn.
- Nêu lập luận và quan điểm của riêng bạn thay vì tóm tắt chung chung.
- Thay đổi câu văn. Xen câu ngắn, thẳng với câu dài hơn và đừng lặp lại cùng một từ nối.
- Dùng các thuật ngữ trong môn học thay vì từ đồng nghĩa lấy từ từ điển.
- Cẩn thận với việc viết lại nguyên câu bằng công cụ AI. Sửa nhẹ thì được, nhưng chấp nhận các câu viết lại sẽ khiến văn bản của bạn thành văn bản do máy viết.
Đọc như AIMoreover, the use of mobile phones has many advantages for students. Furthermore, it also has some disadvantages.
Đọc như bạn viếtPhones helped me most in the library, where I could photograph whiteboard notes. They hurt me in the dorm, where I checked messages every few minutes while studying.
Tự bảo vệ bằng bằng chứng
Nếu điểm số nào đó bị dùng để chống lại bạn, hồ sơ quá trình viết có giá trị hơn một con số. Hãy giữ lịch sử phiên bản, bản nháp, ghi chú và nguồn, và sẵn sàng giải thích luận điểm của mình bằng lời, bằng tiếng Anh đơn giản nếu thấy dễ hơn. Điểm của công cụ phát hiện chỉ là ước tính, không phải bằng chứng, và bạn có thể lịch sự nói vậy rồi đề nghị xem xét theo quy trình của trường.
Bạn cũng có thể tự kiểm tra bản nháp trước. AITurnitin cho kiểm tra tối đa 1.000 từ mỗi lần mà không cần tài khoản và đánh dấu những câu đọc giống AI nhất, để bạn biết nên thêm chi tiết ở đâu.
Câu hỏi thường gặp
Công cụ phát hiện AI có phân biệt đối xử với người nói tiếng Anh không phải bản ngữ không?
Có thể, nếu chúng chỉ được huấn luyện hoặc kiểm thử trên văn bản bản ngữ, vì tiếng Anh đơn giản và đều đặn thì dễ đoán hơn. Một công cụ cụ thể có như vậy hay không tùy cách nó được kiểm thử. Chúng tôi đưa tác giả không phải bản ngữ vào bước hiệu chỉnh và công bố tỷ lệ 1,1% bị gắn nhãn “Có thể do AI”.
Viết tiếng Anh đơn giản hơn có bị đánh dấu không?
Không phải chỉ vì thế. Tiếng Anh rõ ràng, đơn giản là viết tốt. Điều làm tăng rủi ro là văn bản chung chung, nhịp đều đều và theo khuôn mẫu. Ví dụ cụ thể và lập luận riêng của bạn quan trọng hơn độ phức tạp của từ ngữ.
Tôi có nên dùng công cụ ngữ pháp để sửa tiếng Anh trước không?
Sửa nhẹ chính tả và ngữ pháp thường ổn ở hầu hết các môn, nhưng hãy xem quy định. Chấp nhận các câu viết lại nguyên câu từ công cụ AI có thể khiến văn bản đọc như do máy viết, nên hãy tự sửa lỗi khi có thể.
Nếu tôi bị cáo buộc dùng AI và tiếng Anh không phải tiếng mẹ đẻ thì sao?
Hãy bình tĩnh, hỏi bằng chứng là gì, đưa ra bản nháp và lịch sử phiên bản, và đề nghị trực tiếp giải thích bài của mình. Nhắc rằng công cụ phát hiện chỉ là ước tính và đề nghị vụ việc được xử lý theo quy trình chính thức của trường.
Tôi có thể tin các con số của các bạn đối với người viết không phải bản ngữ không?
Chúng mô tả một bộ kiểm thử thật, đã công bố, gồm các bài báo học thuật của tác giả không phải bản ngữ, và chúng tôi công khai tỷ lệ này. Chúng không chứng minh rằng sẽ không có người học nào bị đánh dấu, nên hãy giữ hồ sơ quá trình viết và coi mọi kết quả là ước tính.