Blog   ·  

¿Qué significan los falsos positivos en nuestra función de detección de escritura con IA?

Annie Chechitelli
Annie Chechitelli
Chief Product Officer, Turnitin

Suscríbete

 

 

 

 

Al completar este formulario, aceptas la Política de Privacidad de Turnitin. Utilizaremos los datos que nos proporcionas para compartir información relevante. Puedes darte de baja de nuestras listas en cualquier momento.

 

En enero, ofrecimos una vista preliminar de lo que pueda hacer nuestra tecnología de inteligencia artificial. En febrero, dimos un paso más y lanzamos nuestra página de recursos de escritura con IA para facilitarte el seguimiento de nuestro progreso, al tiempo que compartimos información y proporcionamos acceso a recursos pedagógicos, publicaciones en el blog enfocadas en escritura con IA, cobertura en prensa y mucho más.

Hemos avanzado mucho desde entonces. Continuando con el tema de compartir actualizaciones sobre los avances de nuestra tecnología de detección de escritura con IA en nuestro Laboratorio de Innovación en Inteligencia Artificial, nos gustaría compartirte cómo nuestro modelo aborda los falsos positivos y también qué constituye un falso positivo.

Para lo anterior, es necesario comprender qué es un falso positivo y qué significa en la detección de la escritura con IA. Un falso positivo ocurre cuando un trabajo escrito completamente por un humano es identificado como un documento redactado con IA.

Es importante hacer hincapié en que la detección de escritura con IA de Turnitin está enfocada en la precisión: si decimos que en un texto hay escritura con IA, es porque la hay. Nuestros esfuerzos se han centrado principalmente en garantizar una alta tasa de precisión y un promedio de falsos positivos menor a 1%. Así nos aseguramos de que los estudiantes no sean acusados falsamente de mala conducta.

No obstante, queremos ser transparentes y reconocer que existe un pequeño riesgo de falsos positivos. Te invitamos a ver este breve video en el que David Adamson, científico de IA de Turnitin y ex profesor de bachillerato, explica más acerca de los falsos positivos y de las situaciones en las que podríamos equivocarnos.

Queremos ser enfáticos en cuanto a que Turnitin no hace una determinación de mala conducta, ni siquiera en el área de similitud de texto; más bien proporcionamos datos para que los educadores puedan tomar decisiones informadas basadas en su política institucional y académica. Lo mismo ocurre con nuestra detección de escritura con IA: dado que nuestra tasa de falsos positivos no es cero, tú, como instructor, tendrás que aplicar tu juicio profesional, el conocimiento que tienes de tus estudiantes y el contexto específico de la tarea.

Al tomar decisiones debes alinearte con las políticas de tu institución, las expectativas que has establecido para tu curso y una comprensión de lo que se está tratando de evaluar exactamente en la tarea.

Sabemos que, en general, las discusiones sobre integridad académica pueden convertirse en un reto, y la repentina introducción de nuevas variables como las herramientas de escritura con IA y la posibilidad de un falso positivo no lo harán más fácil. Para ayudarte en estas situaciones, queremos entregarte algunos consejos, además de pedirte que revises nuestro blog en las próximas semanas, ya que estaremos profundizando en las maneras más adecuadas en que instructores y estudiantes deben llevar a cabo estas conversaciones.

Tres consejos principales para abordar falsos positivos:
  • Saber antes de actuar: asegúrate de considerar por adelantado la posibilidad de un falso positivo y establece un plan sobre cómo actuar al momento de determinar el resultado. Comunícale este proceso a tus estudiantes para que entiendan las expectativas.
  • Asume una intención positiva: en este campo donde hay tantas cosas nuevas y desconocidas, intenta conceder a tus estudiantes el beneficio de la duda. Si las pruebas no son claras, asume que los alumnos actúan con integridad.
  • Sé abierto y honesto: es importante reconocer de antemano que pueden presentarse falsos positivos, por lo que educadores y estudiantes deben estar preparados para tener un diálogo abierto y honesto. Si no se reconoce la existencia de los falsos positivos, se producirá una interacción mucho más defensiva y confrontacional que podría, incluso, dañar las relaciones en el aula.

¿Necesitas consejos sobre cómo responder proactivamente a las dudas sobre IA en el salón de clases? Lee nuestro artículo sobre cómo abordar las tareas escritas en la era de la IA.