Nextdigitech

¿Los detectores de IA realmente funcionan? Lo que los estudiantes y profesores deben saber

¿Los detectores de IA realmente funcionan? Lo que los estudiantes y profesores deben saber

Pasaste todo el fin de semana escribiendo un ensayo. Entonces su maestro dice que un detector de IA lo marcó como 40% de IA. No usaste IA en absoluto. ¿Y ahora qué?

Esto sucede con más frecuencia de lo que la mayoría de la gente piensa. Los detectores de IA pueden ser útiles, pero no son detectores de mentiras. Así es como funcionan, qué tan precisos son en realidad y qué deben hacer los estudiantes y maestros con los resultados.

la respuesta corta

Los detectores de IA funcionan a veces. Son bastante buenos para atrapar largas porciones de texto de IA crudo y sin editar. Son mucho más débiles al juzgar la escritura que mezcla el trabajo humano y de IA, la escritura que ha sido editada y la escritura de personas cuyo primer idioma no es el inglés. Ningún detector es lo suficientemente preciso como para demostrar, por sí mismo, que alguien hizo trampa.

Cómo funcionan los detectores de IA

Las herramientas de escritura de IA tienden a elegir la siguiente palabra más predecible. Los detectores buscan ese patrón. Texto que es muy fluido, uniformemente estructurado y puntuaciones predecibles como "probable IA". Texto con opciones de palabras más sorprendentes y puntuaciones de ritmo desiguales como "probable humano".

El problema es obvio una vez que lo ves: muchos humanos escriben de una manera clara, simple y predecible. Eso es a menudo exactamente lo que piden los profesores.

Lo que dice la investigación

  • La precisión varía ampliamente. Un estudio de 2023 de 14 herramientas de detección, incluidas Turnitin y GptZero, encontró que todas ellas obtuvieron una precisión inferior al 80% (Resumen de Wikipedia de Weber-Wulff et al.).
  • Los escritores ingleses no nativos se marcan mucho más. Un estudio dirigido por Stanford encontró a siete detectores ensayos marcados erróneamente por hablantes de inglés no nativos como AI un promedio del 61,3% del tiempo (Wikipedia).
  • La edición los engaña. La investigación muestra que la precisión de la detección cae bruscamente una vez que el texto de IA se parafrasea o se reformula (Encuesta de ARXIV).
  • Incluso las pequeñas tasas de error se suman. Cuando la Universidad de Vanderbilt apagó el detector de IA de Turnitin en 2023, señaló que una tasa de falsos positivos del 1% en unos 75.000 artículos al año podría significar que aproximadamente 750 estudiantes marcados por error (piloto).

La propia Turnitin informa una tasa de falsos positivos por debajo del 1% para documentos con más del 20% de contenido de IA, pero también dice que ocurren falsos positivos y que su informe no debe usarse solo para penalizar a un estudiante (yomu).

Nota: estos detalles provienen de los propios anuncios de la empresa y Next Digitech no ha verificado de forma independiente.

Cuatro situaciones en las que los detectores de IA son menos confiables

Si eres un estudiante que fue marcado

Mantén la calma. Una puntuación de detector es un punto de partida para una conversación, no un veredicto. Esto es lo que ayuda:

  1. Muestre su proceso. Google Docs y Microsoft Word mantienen el historial de versiones. Sus borradores, ediciones y marcas de tiempo son una fuerte evidencia de que lo escribió.
  2. Trae tus notas. Los esquemas, notas de investigación, fuentes y borradores anteriores ayudan.
  3. Ofrécete para explicar tu trabajo. Hablar a través de tu argumento muestra que entiendes lo que escribiste.
  4. Pregunte acerca de la política de su escuela. Muchas escuelas dicen que los resultados de los detectores por sí solos no son suficientes para un caso de integridad académica.

En el futuro, escriba en documentos de Google o en Word con el historial de versiones activado. Es la protección más simple que puedes tener.

Si eres profesor

  • Tratar las puntuaciones como una señal, no como una prueba. Úsalos para decidir dónde mirar más de cerca.
  • Habla primero. Una breve conversación sobre el trabajo suele decirte más que cualquier porcentaje.
  • Conoce la escritura de tus alumnos. Las muestras de escritura en clase le dan una línea de base.
  • Tenga mucho cuidado con los estudiantes de inglés, ya que las investigaciones muestran que se marcan con mucha más frecuencia.
  • Diseña asignaciones de AI-Aware. Los borradores, reflexiones y componentes en clase hacen que el uso indebido sea más difícil y el aprendizaje sea más visible.

Preguntas frecuentes

¿Qué detector de IA es el más preciso?

Los resultados cambian de un estudio a otro y con cada actualización del modelo. Ninguna herramienta es lo suficientemente confiable como para ser utilizada como la única evidencia.

¿Pueden las herramientas gramaticales como la gramática desencadenar detectores de IA?

ellos pueden La reescritura pesada por cualquier herramienta impulsada por IA puede hacer que el texto parezca más parecido a una máquina. Verifique las reglas de su escuela sobre qué herramientas están permitidas.

¿Mejorarán los detectores de IA?

Están mejorando, pero también lo están las herramientas de escritura de IA. Muchas escuelas se están moviendo hacia la evidencia basada en procesos, como borradores e historial de versiones, en lugar de depender de los detectores.

La línea de fondo

Los detectores de IA pueden señalar a los maestros hacia el trabajo que vale la pena echar un segundo vistazo, pero no pueden probar nada por su cuenta. Estudiantes: Guarde sus borradores. Profesores: Habla antes de decidir. Esa combinación es más justa y más precisa que cualquier puntaje.

Guías relacionadas

Explore más en nuestro Herramientas de AI para estudiantes y profesores centro.

Descargo de responsabilidad: este artículo es solo para información general y se basa en los detalles disponibles en el momento de escribir este artículo. Los precios, los planes, las características, las fechas de lanzamiento, las políticas y la disponibilidad pueden cambiar en cualquier momento y pueden variar según el país. Verifique la información más reciente en el sitio web oficial de la empresa o producto mencionado antes de tomar cualquier decisión o compra. Next Digitech es un sitio web independiente y no está afiliado ni respaldado por las empresas mencionadas; Todas las marcas pertenecen a sus respectivos propietarios. No somos responsables de ninguna pérdida o decisión tomada en base a este contenido.

Desplazarse hacia arriba