Detectores de IA são injustos com quem não é nativo em inglês?
Resposta curta
Os detectores podem ser menos confiáveis para quem não é nativo em inglês, porque um inglês cuidadoso, simples ou formulaico é mais previsível, e previsibilidade é justamente o que os detectores medem. O risco é real e depende de como o detector foi construído e testado. Nossa calibração inclui de propósito artigos de autores não nativos, e 1,1% deles foram classificados como “Provavelmente escrito por IA”.
Pontos principais
- Os detectores medem a previsibilidade das palavras, e quem está aprendendo inglês costuma escrever com frases seguras e regulares, que são mais previsíveis.
- Se um detector é enviesado ou não depende de como foi treinado e testado. Pergunte se ele foi testado com autores não nativos.
- Incluímos textos humanos de autores não nativos na calibração: 1,1% foram classificados como “Provavelmente escrito por IA”, um índice próximo ao da escrita acadêmica de nativos.
- Uma pontuação nunca é prova, e quem escreve em inglês como segunda língua deve guardar rascunhos e anotações para poder explicar o próprio trabalho.
- Escrever com especificidade, com exemplos e fontes próprios, melhora tanto o seu argumento quanto o resultado da verificação.
A preocupação, dita com clareza
Estudantes que aprenderam inglês como língua adicional temem que os detectores confundam a escrita deles com IA. A preocupação é razoável. Os detectores funcionam estimando quão previsível é um texto, e escrever em uma segunda língua costuma ser mais cauteloso, mais regular e mais próximo dos modelos que você aprendeu.
Um detector treinado apenas com escrita fluente de nativos pode tratar essa cautela como algo de máquina. Se isso acontece na prática depende de como o detector foi construído e do que foi usado para testá-lo.
Por que um inglês mais simples pode parecer previsível
Quando você escreve em uma língua que ainda está dominando, escolhe palavras de que tem certeza, prefere estruturas de frase que já praticou e evita expressões idiomáticas arriscadas. Isso é uma boa prática de escrita. Mas também estreita a variedade de palavras e estruturas que você usa.
Um modelo de linguagem também prefere a palavra mais esperada a cada passo. Uma variedade estreita e regular de vocabulário pode, portanto, se parecer com a saída de um modelo em termos estatísticos, embora os motivos sejam completamente diferentes.
- Conectivos comuns repetidos em vários parágrafos, como Moreover, Furthermore e In addition.
- Frases de comprimento parecido e com a mesma estrutura sujeito-verbo-objeto.
- Expressões decoradas de livros didáticos, modelos prontos ou bancos de frases.
- Escolhas de palavras cuidadosas e literais, resultado de traduzir de outro idioma.
Como é um teste justo
A maneira de descobrir se um detector é enviesado é testá-lo com textos humanos de autores não nativos e contar os alarmes falsos. Se a taxa de falsos positivos for muito maior para esse grupo, o detector é injusto com ele, qualquer que seja sua precisão geral.
Incluímos esse grupo na nossa calibração de propósito. Textos acadêmicos humanos de autores não nativos de inglês, retirados de um arquivo público de pesquisa, foram classificados como “Provavelmente escrito por IA” em 1,1% dos casos, contra 1% e 0,7% nos nossos dois conjuntos de teste, com 583 textos acadêmicos humanos no total. É uma diferença pequena, mas baseada em artigos científicos publicados, que são editados e revisados, então ela não cobre todos os tipos de escrita de quem está aprendendo.
Onde o risco continua real
Nossos números descrevem a escrita acadêmica de autores com nível profissional. Eles não garantem o mesmo resultado para um estudante do primeiro ano que ainda está construindo fluência, para textos muito curtos ou para gêneros não acadêmicos. Com menos de 50 palavras, nosso detector não dá nenhum veredito. Ferramentas só de inglês também podem dar resultados estranhos em textos que estão majoritariamente em outro idioma.
De forma mais geral, outros detectores podem ter sido testados de outra maneira. Se uma instituição depende de uma ferramenta, é justo perguntar que evidências existem de que ela funciona para quem escreve em inglês como segunda língua.
Conselhos práticos se você escreve em inglês como língua adicional
Você não precisa escrever pior, nem com menos cuidado, para evitar ser marcado. Você precisa colocar mais de si no texto, o que também deixa o trabalho mais forte.
- Acrescente detalhes específicos que só você conhece: seus dados, um caso, suas anotações de leitura ou uma discussão em sala de aula.
- Apresente seu próprio raciocínio e sua posição em vez de resumir de forma genérica.
- Varie as frases. Alterne afirmações curtas e diretas com frases mais longas, e não repita o mesmo conectivo.
- Use os termos da sua disciplina em vez de sinônimos tirados de um dicionário de sinônimos.
- Cuidado com reescritas de frases inteiras feitas por ferramentas de IA. Correções leves são aceitáveis, mas reescritas aceitas fazem seu texto passar a ser escrito por máquina.
Soa como IAMoreover, the use of mobile phones has many advantages for students. Furthermore, it also has some disadvantages.
Soa como vocêPhones helped me most in the library, where I could photograph whiteboard notes. They hurt me in the dorm, where I checked messages every few minutes while studying.
Proteja-se com evidências
Se uma pontuação for usada contra você, o registro do seu processo vale mais do que um número. Guarde o histórico de versões, os rascunhos, as anotações e as fontes, e esteja pronto para explicar seu argumento em voz alta, em inglês simples se for mais fácil. A pontuação de um detector é uma estimativa, não uma prova, e você pode dizer isso com educação e pedir uma revisão conforme o procedimento da sua instituição.
Você também pode verificar o rascunho por conta própria antes. O AITurnitin oferece até 1.000 palavras por verificação sem conta e destaca as frases que mais parecem IA, para você saber onde acrescentar detalhes.
Perguntas frequentes
Os detectores de IA discriminam quem não é falante nativo de inglês?
Podem discriminar, se foram treinados ou testados apenas com escrita de nativos, porque um inglês simples e regular é mais previsível. Se um detector específico faz isso depende de como ele foi testado. Incluímos autores não nativos na nossa calibração e informamos 1,1% classificados como “Provavelmente escrito por IA”.
Escrever em um inglês mais simples vai me fazer ser marcado?
Não por si só. Um inglês claro e simples é boa escrita. O que aumenta o risco é um texto genérico, de ritmo uniforme e formulaico. Exemplos específicos e o seu próprio raciocínio pesam mais do que a complexidade das palavras.
Devo usar um corretor gramatical para arrumar meu inglês antes?
Correções leves de ortografia e gramática são aceitas na maioria das disciplinas, mas confira a política da sua. Aceitar reescritas de frases inteiras feitas por uma ferramenta de IA pode fazer seu texto parecer escrito por máquina, então corrija os erros você mesmo sempre que puder.
E se eu for acusado de usar IA e o inglês não for minha primeira língua?
Mantenha a calma, pergunte quais são as evidências, mostre seus rascunhos e o histórico de versões e ofereça-se para explicar seu trabalho pessoalmente. Lembre que os detectores dão estimativas e peça que o seu caso siga o procedimento formal da sua instituição.
Posso confiar nos seus números para autores não nativos?
Eles descrevem um conjunto de teste real e publicado, formado por artigos acadêmicos de autores não nativos, e divulgamos a taxa abertamente. Isso não prova que nenhum estudante em aprendizado será marcado, então guarde os registros do seu processo e trate qualquer resultado como uma estimativa.