Blog   ·  

Una talla no sirve para todos: cómo interpretar el porcentaje de escritura con IA de Turnitin

Karen Smith
Especialista Senior en enseñanza y aprendizaje

Suscríbete

 

 

 

 

Al completar este formulario, aceptas la Política de Privacidad de Turnitin. Utilizaremos los datos que nos proporcionas para compartir información relevante. Puedes darte de baja de nuestras listas en cualquier momento.

 

Como educadora retirada, recuerdo aquellos momentos en los que, al igual que mis alumnos del curso de inglés de secundaria, deseaba una respuesta sencilla a las preguntas, sin importar si era correcta o incorrecta. Lamentablemente, este tipo de respuestas son poco frecuentes, a pesar de su naturaleza reconfortante. Las herramientas de escritura con IA generativa y el uso del indicador de escritura con IA de Turnitin tienen algo en común: no existe un solo enfoque “correcto”. Un enfoque “apropiado” puede ser un término más preciso, ya que los parámetros de la IA generativa puede variar mucho de una tarea a otra, o de un estudiante a otro. Determinar el significado del porcentaje de escritura con IA para y con sus alumnos es un paso clave para ayudarlos a navegar por el mundo de las herramientas de escritura con IA generativa.

Lo desconocido siempre asusta y abruma. Empecemos, entonces, por lo que se conoce y utilicémoslo como marco para entender lo nuevo.

¿Se puede comparar el indicador de escritura con IA con el porcentaje de similitud?

Vincular las nuevas ideas a los conocimientos existentes es una estrategia válida, así que empecemos por el porcentaje de similitud de Turnitin, ya que es conocido por muchos educadores. Aunque hay algunas diferencias significativas entre los dos resultados, la necesidad de matices y contexto es un elemento común. Los usuarios más experimentados de Turnitin saben que asignar un porcentaje arbitrario a la verificación de similitud sin tomar en cuenta características propias de la tarea o del estudiante disminuye la probabilidad de usar esta información en una conversación significativa con el estudiante acerca de su escritura.

Quizás la diferencia más significativa entre estos dos porcentajes es cómo se obtienen. Mientras que el puntaje de similitud de Turnitin refleja coincidencias exactas que resultan de la comparación del texto con un gran número de contenido para identificar la similitud, el indicador de escritura con IA muestra el porcentaje de texto de un trabajo que probablemente fue generado con una herramienta de IA (Ver #9 resultados de detección de IA e interpretación). Esta diferencia puede confundir a algunos, ya que el porcentaje de escritura con IA es una zona aparentemente gris, pero es necesario cambiar esta perspectiva para aprovechar el poder de esta información.

El hecho de que no implique una coincidencia exacta no hace que la información sea menos valiosa. De hecho, la diferencia es mínima si se utiliza de manera adecuada: como un dato que ayuda al educador a analizar el pensamiento y el trabajo del alumno. El conocimiento que el profesor tiene del estudiante y de su trabajo es fundamental para entender tanto la puntuación de la escritura con IA, como el propio porcentaje. El puntaje no puede sostenerse por sí solo; pues parece arbitrario y poco significativo sin un sentido que se alinee con los objetivos del educador sobre la tarea, el estudiante y el contexto general.

En Turnitin, orientamos a los educadores en la adopción de un enfoque apropiado para ayudarlos a interpretar el porcentaje de similitud. En un escenario ideal, este resultado es el primer paso para abrir una conversación difícil en el espacio formativo, en lugar de ser utilizado como una medida sumativa o punitiva. Cuando la “puntuación” -de similitud o de escritura con IA- se usa como punto de partida de un diálogo en lugar de una resolución definitiva sobre el trabajo de un alumno, adquiere un fuerte propósito formativo.

Para apoyar la comprensión de ambos porcentajes, nuestro equipo de educadores veteranos, ha desarrollado un recurso útil para profesores y tomadores de decisiones académicas que deseen comprender los puntos comunes y las diferencias entre el porcentaje de similitud de Turnitin y el indicador de escritura con AI. A continuación, te compartimos una infografía descargable que explica cómo puede y debe utilizarse cada herramienta para garantizar de forma responsable el trabajo original de los estudiantes.

¿Por qué no es recomendable establecer una puntuación única de escritura con IA para todo un curso?

Aunque hay quienes podrían pensar que establecer “una puntuación estándar para todos” es lo más justo, un entendimiento más profundo de la dinámica de las tareas y los contextos de los estudiantes hace que esto sea claramente una afirmación falsa. En pro de la justicia y la equidad, los educadores deben tener en cuenta múltiples factores a la hora de revisar y evaluar la escritura de los estudiantes:

1. Género de la tarea. Cuando se revisa una narración creativa o de carácter personal, es esperable una puntuación más baja de escritura con AI, ya que lo que se está evaluando es el pensamiento original del estudiante. Cuando se trata de una redacción basada en una investigación, un porcentaje de IA más bajo podría indicar una falta de citación a la hora de respaldar las afirmaciones presentadas; por el contrario, una puntuación más alta podría indicar un nivel más elevado de pruebas utilizadas por el alumno para respaldar sus argumentos, o también podría revelar alguna inconsistencia intencional o no intencional. Una conversación directa con el estudiante durante la revisión del trabajo puede ayudar al educador a determinar qué ha ocurrido, por qué y cuáles podrían ser los pasos a seguir.

2. Longitud del trabajo. Al momento de revisar un ensayo más breve, en lugar de un trabajo de investigación más largo, es necesario tener en cuenta la existencia de los falsos positivos. Esto se debe a que los documentos que contienen menos de 300 palabras tienen una mayor probabilidad de presentar un falso positivo. Por eso, reiteramos que, aunque las directrices pueden ser apropiadas a la hora de considerar el impacto del porcentaje de escritura con IA, el indicador no determina ese impacto por sí solo. Es el educador, familiarizado con los parámetros de la tarea y con el alumno, quien puede determinar el peso que puede y debe tener ese impacto.

3. Directrices para el uso de herramientas de escritura con IA. El uso de herramientas de escritura con Ia generativa puede depender de las características de tarea. Así, puede ser aceptado o limitado en cada caso, o incluso es posible especificar una forma determinada de empleo. Estos son factores importantes a tener en cuenta cuando se habla con los estudiantes acerca de su trabajo.

4. Necesidades de los alumnos. Aunque las variables mencionadas anteriormente pueden aplicarse en cualquier tarea, la variable más importante a la hora de tomar decisiones es el estudiante. En este sentido, evitar penalizar a los alumnos por el uso indebido de herramientas de escritura con IA para poder comprender sus circunstancias particulares es de suma importancia. Por ejemplo, a un estudiante que esté aprendiendo inglés se le podría permitir utilizar una herramienta de traducción con IA que podría llegar a marcar parte o la totalidad del trabajo presentado como generado con IA. Si estas circunstancias no se tiene en cuenta, se podría penalizar injustamente al estudiante y, al mismo tiempo, violar los términos de los usos permitidos.

Si bien no se puede determinar una lista exhaustiva de excepcionalidades o factores que puedan influir en el juicio de un educador cuando analiza la presencia de escritura con IA en el trabajo de un estudiante, su conocimiento del alumno y la aplicación de esta información son esenciales para tomar una decisión justa y razonable. Como siempre, si existe una duda acerca de una mala conducta académica, lo mejor es abordar el caso con precaución.

¿Qué factores del porcentaje de escritura con IA deben considerarse para iniciar una conversación al respecto?

El éxito del indicador de escritura con AI de Turnitin depende en gran medida de cómo se utilice. Cuando los educadores analizan la puntuación de escritura con AI y la utilizan como una fuente informativa en lugar de una respuesta definitiva, entonces se está usando de manera eficiente. Ninguna herramienta puede sustituir el juicio del educador, y su conocimiento del estudiante, al momento de determinar si es necesario iniciar una conversación.

A medida que los líderes educativos abordan estas decisiones con más responsabilidad y cuidado, resulta más evidente considerar las diferentes razones por las que una puntuación puede variar. Analicemos juntos una posible forma de conducir el proceso de reflexión y toma de decisiones en la siguiente sección.

¿Por qué un porcentaje de escritura con IA no se puede analizar de la misma manera para diferentes alumnos?

Ya que los educadores conocen a sus alumnos, su trabajo y cualquier circunstancia o necesidad especial, este conocimiento se debe poner por sobre una puntuación arbitraria, salvo que este resultado se utilice como posible punto de partida.

Por ejemplo, supongamos que un profesor ha trabajado en fortalecer la relación con sus estudiantes durante todo el semestre. Entonces, cuando pide una tarea en la que permite el uso de IA como herramienta para generar una lluvia de ideas y desarrollar una tesis, debe dejar en claro, desde el comienzo, las directrices, la expectativa de citación de las herramientas con IA y otros recursos, y los parámetros de presentación. Aunque no sea la primera conversación sobre escritura con IA con sus alumnos, sí puede existir la necesidad de profundizar en el indicador de IA, por lo que debe preparar la conversación para que todos los participantes entiendan cómo se les evaluará.

Cuando se analiza caso a caso, el estudiante A, B y C tienen características únicas que resultan determinantes en la decisión de generar una conversación más profunda. La expectativa indica la posibilidad de cierta variación en las puntuaciones, aunque la mayoría debería encontrarse en niveles esperados. En el caso anterior, la mayoría de los estudiantes se situaron en los rangos previstos, a excepción de los alumnos A. B y C, quienes obtuvieron puntuaciones notablemente más altas en escritura con IA.

En la siguiente tabla, los perfiles de los tres estudiantes van acompañados de información específica para dar mayor contexto a su puntuación de escritura con IA. La columna de posibles soluciones esboza la reflexión del educador o responsable de la toma de decisiones, ofreciendo posibles pasos a seguir según el perfil del alumno y sus circunstancias especiales.

Como se mencionó en la columna “Posible solución”, es necesario mantener una conversación con los tres estudiantes para aclarar las acciones y sugerir algunos ajustes. Aunque no se debe esperar que todos los estudiantes obtengan exactamente la misma puntuación o incluso que se encuentren dentro de un mismo rango de puntajes “aceptables”, el objetivo principal de estas conversaciones es centrarse en la escritura y asegurarse de que los estudiantes reciban apoyo cuando utilizan las herramientas de escritura con GenIA, para que su redacción muestre su pensamiento original.

¿Cómo pueden los educadores utilizar el indicador de escritura con IA para impulsar una buena enseñanza de la redacción?

Primero, es necesario reconocer que las herramientas de escritura con IA están ahí , por lo que se debe determinar claramente cuándo/por qué/cómo se pueden utilizar para apoyar (¡nunca para sustituir!) el camino de la escritura. Parece obvio afirmar que las herramientas de escritura de IA han llegado para quedarse. Independientemente de si la percepción de las personas involucradas sobre esta innovación es positiva o negativa, es cada vez más probable que la IA generativa sea ampliamente utilizada por los estudiantes, tanto si van a la universidad como si se dedican a algún trabajo u oficio.

El motivo que tienen los alumnos para utilizar herramientas de escritura con IA incluye diversas razones, pero cuando se trata de las soluciones, en lugar del mal uso, se enfoca en la oportunidad de aprender. En este caso, la idea de un mal uso intencionado - o no -pasa a ser menos importante que aprender a “solucionarlo”. Ayudar a los estudiantes a gestionar su tiempo de forma más eficiente es una forma de disuadir el uso ampliado de la IA; además, resulta crítico enseñar a citar y parafrasear dentro del texto en lugar de insertar las palabras de otro escritor o bot. Hay tantas razones por las que los estudiantes utilizan las herramientas de escritura con IA, como número de estudiantes y, para todos, lo verdaderamente importante es enfocarse en soluciones que garanticen la integridad académica.

Cuando el porcentaje de escritura con IA se utiliza para impulsar conversaciones sobre los resultados de los estudiantes en el espacio formativo, se convierte en parte del proceso de aprendizaje y en un apoyo para que los estudiantes puedan mejorar sus habilidades de escritura. El puntaje es un buen punto de partida para debatir cómo utilizar estas herramientas manteniendo la integridad en el centro del trabajo. Hablar con los alumnos sobre su proceso y averiguar juntos cómo responder a los retos que presenta la IA generativa puede motivar un cambio que empodere a los estudiantes.

En resumen: ¿Cómo Interpretar el indicador de escritura con IA de Turnitin?

El indicador de escritura con IA de Turnitin entrega un porcentaje y un reporte con texto resaltado que muestra qué parte del documento fue posiblemente generado con herramientas de escritura con IA. Eso es todo. No es un botón mágico que proporciona respuestas definitivas de forma aislada. No obstante, creemos que el educador es más importante que cualquier herramienta tecnológica, ya que puede ver y analizar el porcentaje y tomar decisiones guiadas tanto por la información, como por el conocimiento personal que tiene de sus alumnos, su experiencia laboral y la política institucional.