1.6.23

Más experiencias con ChatGPT y la detección de textos escritos por ella


En el mensaje anterior hablé de una experiencia un tanto festiva con ChatGPT. Esta vez me voy a poner un poco más serio (sin pasarme). Os voy a hablar de la prueba que hice para ver cómo detecta un programa como Turnitin lo escrito mediante esas herramientas.

Todo vino por la consulta de un profesor preocupado por el uso que sus estudiantes pudieran hacer de esto, a quien comenté que desde hacía unas semanas la versión de Turnitin que se utiliza donde trabajo tenía la opción de detectar texto generado por IA. Pero lo cierto era que hasta entonces no había hecho ninguna prueba. Así que me puse manos a la obra.

Me fui a ChatGPT y le dije esto:


Para quienes no estéis muy duchos en inglés, le pedí que me escribiese un ensayo de unas 500 palabras sobre bibliotecas académicas (os recuerdo que, de momento, Turnitin solo detecta la IA en textos escritos en inglés). Obtuve el resultado en dos segundos (dos segundos de verdad, no es una figura literaria):


Lo siguiente fue pasar ese texto a un archivo de Word y subirlo a un ejercicio de Turnitin. Como veréis, apenas tenía coincidencias de las habituales que detecta el programa (es decir, de texto en otras fuentes):


Un raquítico y poco sospechoso 2 %. Pero, al entrar al informe:


¡Tachán! El rectangulito con las letras "AI" tiene marcado nada menos de un 100 %. Nada menos porque todo el texto está generado por IA. Pulsemos sobre ese rectángulo:


Ahí lo tenemos. Me ha pillado.

Como en el mensaje anterior, sigo sin dar mi opinión sobre esto de manera detallada (estoy bastante en contra de su uso para elaborar trabajos o textos académicos de cualquier tipo), aunque sí que he de decir que más pronto que tarde alguien tendrá que establecer unas normas al respecto. ¿Qué hacer si un profesor detecta que un alumno ha recurrido a estas herramientas para hacer todo su trabajo? Porque ahora mismo no hay nada, ni a favor ni en contra, al menos que yo sepa. Y hay quien lo compara, por ejemplo, con las calculadoras. ¿Por qué sería lícito que un estudiante pueda usar una calculadora científica como herramienta en un examen y no que use una herramienta de IA para generar textos?  (Por no hablar del espinoso asunto de los derechos de autoría). Ya vamos tardando...

Seguiré con mis experimentos y tal vez lo cuente por aquí...