Quanto è accurato il rilevatore?
Pubblichiamo come abbiamo misurato il rilevatore e dove sbaglia. Leggi questa pagina prima di fare affidamento su un risultato.
Modello
Usiamo sui nostri server il rilevatore di testo IA open source desklib (DeBERTa-v3-large, licenza MIT). Il testo viene suddiviso in finestre; il punteggio del documento è la media ponderata per token e i punteggi delle frasi derivano dalle finestre sovrapposte.
Calibrazione sulla scrittura accademica reale
Le soglie sono state fissate su 583 testi accademici scritti da esseri umani (abstract di arXiv, articoli di PubMed Central di autori non madrelingua e saggi di studenti). "Probabilmente IA" è impostato in modo che circa l'1% di quei testi umani lo superi; "Incerto" copre la fascia tra l'1% e il 5%.
Falsi allarmi su testi umani esclusi dalla calibrazione
In una suddivisione in due parti, la quota di testi accademici umani esclusi dalla calibrazione etichettati come "Probabilmente IA" è stata 1% e 0,7%.
Risultati per gruppo di testi
| Gruppo | Testi | Etichettati "Probabilmente IA" | Etichettati "Probabilmente IA" o "Incerto" |
|---|---|---|---|
| Umano: abstract di arXiv | 200 | 0,5% | 3,5% |
| Umano: PubMed Central, autori non madrelingua | 183 | 1,1% | 6% |
| Umano: saggi di studenti | 200 | 1% | 5,5% |
| Umano: Wikipedia (prima del 2022) | 155 | 2,6% | 8,4% |
| Umano: testo web generico | 150 | 32,7% | 36,7% |
| IA: modelli del 2026, non modificati | 195 | 96,9% | 99% |
| IA: benchmark RAID, non modificati | 200 | 96,5% | 99% |
| IA: benchmark RAID, parafrasato | 200 | 84% | 92% |
| IA: riscritto con strumenti "humanizer" | 200 | 59,5% | 74,5% |
acad583-2026-10-22
Limiti noti
- I testi dei modelli più recenti, soprattutto se istruiti a scrivere come un essere umano, spesso non vengono individuati.
- Le parafrasi e gli strumenti "humanizer" abbassano sensibilmente il punteggio.
- I testi brevi non sono affidabili; sotto le 50 parole non forniamo alcun risultato.
- Testi umani molto modificati, schematici o tradotti possono essere segnalati.
- Le soglie sono calibrate sulla scrittura accademica. Su testo web generico, il 32,7% dei campioni scritti da persone è stato etichettato "Probabilmente IA".
Un risultato è una stima, non una prova di condotta scorretta. Non usarlo mai come unica base per un'accusa.