Detectores de IA, cuánto se equivocan y cómo usarlos sin acusar a nadie

Un detector de IA no te dice si un texto lo ha escrito una máquina. Te da una estimación basada en lo predecible que suena. Esa estimación falla en los dos sentidos. Marca como IA textos humanos y deja pasar textos de máquina. Con los datos que hay, usarlo como prueba es una mala idea.

Qué hace un detector

Mide patrones. Cuánto se parece tu texto a lo que escribiría un modelo. Si es muy previsible, da un porcentaje alto de “IA”. Un texto claro, correcto y sencillo es previsible, lo escriba quien lo escriba.

Lo que se sabe

OpenAI lanzó en 2023 su propio detector y lo retiró en julio del mismo año por su baja precisión. En su presentación decía que identificaba bien el 26 % de los textos de IA y que se equivocaba con el 9 % de los de personas. Los textos de menos de 1.000 caracteres daban resultados poco fiables.

Un estudio de Stanford (Liang y otros, publicado en Patterns en 2023) probó siete detectores con 91 redacciones de estudiantes de inglés como segunda lengua. De media, los detectores marcaron como IA el 61 % de ellas. Con redacciones de estudiantes estadounidenses de secundaria funcionaban mucho mejor. Los autores recomendaban no usar estos detectores en entornos educativos o de evaluación.

La muestra es pequeña y en inglés. Aun así, quien escribe en un registro sencillo o en una lengua que no es la suya sale peor parado.

Los dos errores

• Falso positivo. Un texto humano marcado como IA. Es el que hace daño, porque suele acabar en una acusación.
• Falso negativo. Un texto de máquina que pasa. Con una instrucción buena, un modelo evita muchos de los patrones que miden.

Cómo usarlos sin hacer daño

1. Tómalos como una pista y no como una prueba.
2. Nunca acuses a nadie por un porcentaje. Pide borradores, historial de versiones y habla con la persona.
3. Con textos cortos, olvídate. No hay material que medir.
4. Mira el texto a mano. Tienes siete señales en Cómo saber si un texto lo ha escrito una IA.

Qué significa para ti si escribes con IA

Que perseguir lo “indetectable” es perseguir una diana que se mueve. Mejor ocuparte de que el texto suene a ti, que es lo que nota quien lee. Tienes un método en Humanizar texto de IA y lo que sí y no puedes esperar en ¿Detectan tu texto de ChatGPT?.

Preguntas rápidas

¿Qué detector es el mejor?

Ninguno es fiable para decidir nada importante. Algunos fabricantes presumen de precisiones altas medidas en sus propias pruebas. Yo no me fiaría de las que no están contrastadas por terceros.

¿Los detectores sirven en español?

Casi todos los estudios publicados son en inglés. En español hay menos datos, así que hay más motivos para desconfiar.

¿Y si mi centro o mi empresa usa uno?

Pide que te expliquen qué hacen con el resultado. Si te marcan, guarda el historial de versiones y tus borradores.

¿Y si mi empresa quiere usar un detector?

Que lo use como pista y nunca como prueba y que lo recoja en una política de uso. Hay una plantilla en Política de uso de IA para escribir en la empresa.