Cómo funciona la detección de texto por IA, y cuándo se equivoca

Los modelos de lenguaje escriben con elecciones de palabras inusualmente predecibles y un ritmo de frase uniforme, y se apoyan en un repertorio reconocible de expresiones. Un detector mide esas propiedades frente a una línea base de escritura humana del mismo tipo de documento.

• Perplejidad: cuánto sorprende cada palabra dadas las anteriores. La prosa de máquina rara vez sorprende.
• Burstiness: cuánto varían la longitud y la estructura de las frases. Las personas varían; los modelos aplanan.
• Frases marcador: construcciones que los modelos producen en exceso ("es importante destacar", "profundizar en", "papel fundamental").
• Rupturas de estilo: un pasaje cuyas estadísticas difieren del resto del documento del mismo autor.

El resultado es una probabilidad de que el fragmento sea de máquina. No es un hecho sobre el autor, y ProofVerity nunca lo entrega como una puntuación única para todo el documento.

La mayoría de los documentos reales son mixtos: un borrador humano con un párrafo pulido por máquina, o un borrador de máquina con ediciones humanas. Una puntuación global oculta esa mezcla y no se puede discutir. Una marca a nivel de frase señala el pasaje exacto, y eso permite a un autor, un alumno o una fuente responder a algo concreto.

Trabajar por frases también permite comparar un pasaje con la línea base del propio autor en el mismo documento. Un cambio brusco de ritmo y vocabulario es evidencia en sí mismo, y se muestra como tal.

Un 94 significa 94: de todos los fragmentos que ProofVerity marca al 94%, unos 94 de cada 100 eran de máquina en la evaluación. La calibración se hace por tipo de documento, porque un informe de laboratorio, una noticia breve y una carta de motivación tienen líneas base distintas, y un detector ajustado a uno falla en los otros.

Cada informe indica la tasa de falsos positivos de su tipo de documento junto a la probabilidad. Esa tasa es la proporción de fragmentos humanos que el detector marcaría por error a ese umbral. Se publica para que el lector decida cuánto peso merece una marca.

Todos los detectores de IA cometen errores, en las dos direcciones. Estas son las situaciones donde se concentran los falsos positivos, y qué hace ProofVerity al respecto.

• La escritura de no nativos y la escritura formularia le parecen "planas" a un detector ingenuo. ProofVerity calibra por género, descuenta los fragmentos cortos y nunca emite un veredicto global.
• Las plantillas y el texto estándar (secciones de métodos, redacción legal, protocolos) son predecibles por diseño. La detección de rupturas de estilo frente al propio texto del autor separa una plantilla de un párrafo de máquina.
• El texto de máquina muy editado conserva parte de las señales de ritmo pero pierde las frases marcador; la confianza baja y el informe lo dice.
• Los parafraseadores cambian palabras pero rara vez devuelven la variación humana, y no pueden hacer que exista una referencia inventada. La verificación de citas atrapa lo que se le escapa al texto.
• El texto traducido arrastra las estadísticas del motor de traducción. El informe avisa cuando un documento parece una traducción.

1. Mira el fragmento, no el documento. Qué frases están marcadas y cuántas.
2. Lee las líneas de evidencia: perplejidad frente a la mediana humana, burstiness, frases marcador, ruptura de estilo.
3. Comprueba la tasa de falsos positivos de ese tipo de documento.
4. Mira las citas. Referencias inventadas o mal citadas junto a un párrafo marcado cambian el cuadro; las verificadas también.
5. Pregunta antes de acusar. Borradores, notas y una conversación corta resuelven la mayoría de los casos.
6. Registra la decisión: marca revisado o descarta, añade una nota, exporta el PDF anotado con su anexo de evidencias.

• No emite veredictos ni "puntuaciones de IA" para documentos enteros.
• No compara un texto con los trabajos de otros alumnos; no es un antiplagio.
• No entrena con tus documentos, y los borra a los 30 días.
• No esconde su razonamiento. Cada marca muestra las señales que la produjeron.