El investigador Jochen Madler presentó SlopShape, un sistema que intenta distinguir textos escritos por IA de textos humanos, incluso cuando estos se han parafraseado. En sus pruebas, obtuvo entre 97 y 98 de macro F1, una medida que combina aciertos al detectar ambas categorías.
Madler lo probó con 2.250 artículos en inglés publicados antes de ChatGPT y 11.250 versiones generadas por cinco modelos. En vez de buscar palabras concretas, un modelo responde más de 200 preguntas sobre la estructura del texto. El resultado no demuestra que detecte textos de otros idiomas ni cualquier contenido de internet; el propio artículo advierte que un estilo ordenado no prueba que haya escrito una IA.
Por qué importa
Para docentes que evalúan trabajos, SlopShape podría ofrecer otra pista, pero las pruebas solo cubrieron textos en inglés y un estilo reconocible no basta para atribuir la autoría a una IA.
