Perspectivas del Profesorado sobre la IA en la Calificación y la Evaluación

Gracias por su interés en este estudio de investigación sobre las experiencias del profesorado con la calificación y la evaluación. Esta encuesta se realiza con fines de investigación académica. Su participación es totalmente voluntaria y puede detenerse en cualquier momento sin consecuencias. No hay respuestas correctas o incorrectas: nos interesan sus opiniones y experiencias sinceras. Sus respuestas se mantendrán confidenciales, se almacenarán de forma segura y se reportarán únicamente de forma agregada. No se vinculará ninguna información identificativa a sus respuestas individuales. Los resultados se utilizarán únicamente con fines de investigación académica. Tiempo estimado de finalización: 12–15 minutos. Al continuar, indica que ha leído esta información y que consiente en participar.

¿Cuál de las siguientes opciones describe mejor su función principal actual?

• Profesor de tiempo completo (con plaza o en vía de obtenerla)
• Profesor de tiempo completo (sin plaza permanente o por contrato)
• Profesor a tiempo parcial o adjunto
• Asistente de docencia de posgrado
• Administrador académico con funciones docentes
• Puesto exclusivo de investigación (sin docencia)
• Otro

¿Cuáles de los siguientes tipos de evaluación de estudiantes utiliza actualmente en sus cursos? (Seleccione todas las que correspondan)

• Ensayos o trabajos escritos
• Exámenes de opción múltiple o de respuesta corta
• Trabajos de investigación o proyectos de fin de curso
• Informes de laboratorio o trabajos técnicos
• Presentaciones o exámenes orales
• Evaluaciones entre pares
• Portafolios
• Evaluación basada en la participación o el debate
• Otro (especifique)

En la siguiente sección, le preguntaremos sobre sus opiniones acerca de la calificación y la evaluación asistidas por IA. Con "calificación asistida por IA" nos referimos al uso de herramientas de inteligencia artificial que pueden ayudar a evaluar el trabajo de los estudiantes; por ejemplo, la puntuación automatizada de trabajos escritos, sugerencias de retroalimentación generadas por IA o inconsistencias en la calificación señaladas por la IA. Estas herramientas están diseñadas para asistir al profesorado, no para reemplazar su criterio. Tenga en cuenta esta descripción al responder las siguientes preguntas.

¿Qué tan abierto estaría a utilizar herramientas asistidas por IA como parte de su proceso de calificación y evaluación?

¿Qué tan preocupado está de que las herramientas de calificación asistidas por IA puedan introducir o perpetuar sesgos en la evaluación de los estudiantes?

¿Qué tan preocupado está por la privacidad de los datos de los estudiantes cuando su trabajo es procesado por sistemas de calificación asistidos por IA?

¿Qué tan preparado se siente actualmente para utilizar herramientas de calificación asistidas por IA de manera eficaz?

Los investigadores están explorando la posibilidad de realizar experimentos controlados para evaluar las herramientas de calificación asistidas por IA. Estos experimentos implicarían que profesores voluntarios califiquen un conjunto de trabajos de estudiantes tanto con como sin asistencia de IA, y luego comparen resultados como la consistencia en la calificación, el tiempo invertido y la satisfacción de los estudiantes. La participación normalmente requeriría de 3 a 5 horas a lo largo de un semestre y sería remunerada. Todos los datos se anonimizarían.

Nos gustaría comprender su forma de pensar sobre cómo la calificación asistida por IA podría afectar la integridad de la evaluación, es decir, la equidad, la validez y la confiabilidad con las que se evalúa el aprendizaje de los estudiantes. En su opinión, ¿cuáles son las consideraciones más importantes al pensar en si las herramientas de IA pueden mantener la integridad de la evaluación?

Con base en sus respuestas a lo largo de esta encuesta, comparta cualquier pensamiento o sentimiento adicional sobre el papel de la IA en la calificación y la evaluación que quizás no hayamos abordado.

¿Cuál es su disciplina o campo académico principal?

• Artes y Humanidades
• Ciencias Biológicas y de la Vida
• Negocios y Administración
• Informática y Tecnologías de la Información
• Educación
• Ingeniería
• Ciencias de la Salud y Medicina
• Derecho
• Matemáticas y Estadística
• Ciencias Físicas
• Ciencias Sociales
• Otro (especifique)

Gracias por completar esta encuesta. Sus perspectivas son valiosas para comprender cómo las herramientas de IA pueden dar forma al futuro de la evaluación académica. Sus respuestas han sido registradas y se mantendrán confidenciales. Si tiene alguna pregunta sobre esta investigación, comuníquese con el equipo de investigación en el correo electrónico proporcionado en su invitación. Ahora puede cerrar esta ventana.

¿Cuáles de las siguientes actividades forman parte de sus responsabilidades actuales? (Seleccione todas las que correspondan)

• Diseñar planes de estudio o programas de cursos
• Impartir clases magistrales o dirigir seminarios
• Calificar o evaluar el trabajo de los estudiantes
• Asesorar o guiar a los estudiantes
• Realizar investigación
• Funciones administrativas o de comités
• Supervisar asistentes de docencia

Durante una semana típica de docencia, ¿aproximadamente cuántas horas dedica a calificar y proporcionar retroalimentación sobre el trabajo de los estudiantes?

• Menos de 2 horas
• 2–5 horas
• 6–10 horas
• 11–15 horas
• 16–20 horas
• Más de 20 horas

¿Qué tan probable es que adopte una herramienta de calificación asistida por IA dentro de los próximos dos años, suponiendo que estuviera disponible y respaldada por su institución?

¿Qué tan preocupado está por la precisión de las calificaciones o la retroalimentación producida por las herramientas asistidas por IA?

Ordene las siguientes medidas de protección de datos según su importancia para usted, en caso de que se utilizaran herramientas de calificación asistidas por IA en su institución. (Arrastre para ordenar, la más importante primero)

1. El trabajo de los estudiantes se procesa únicamente en servidores del campus (sin procesamiento en la nube)
2. Los proveedores de herramientas de IA no pueden conservar ni utilizar los datos de los estudiantes para entrenar modelos
3. Se informa a los estudiantes y estos dan su consentimiento antes de que su trabajo sea procesado por la IA
4. El profesorado conserva el control total sobre si se usan las herramientas de IA y cómo
5. Auditorías periódicas por parte de terceros sobre las prácticas de datos de las herramientas de IA
6. Cumplimiento de las políticas institucionales de gobernanza de datos (p. ej., FERPA)

Si se ofreciera formación sobre herramientas de calificación asistidas por IA, ¿qué formatos preferiría? (Seleccione todos los que correspondan)

• Taller presencial (de medio día o día completo)
• Módulos en línea a su propio ritmo
• Seminario web en vivo o taller virtual
• Consulta individual con un tecnólogo educativo
• Mentoría entre pares de un colega que ya utiliza la herramienta
• Documentación escrita o guías de usuario
• No me interesaría recibir formación
• Otro (especifique)

Con base en la descripción anterior, ¿qué tan dispuesto estaría a participar en un experimento controlado para evaluar herramientas de calificación asistidas por IA?

¿Cuántos años de experiencia docente universitaria tiene?

• Menos de 3 años
• 3–7 años
• 8–15 años
• 16–25 años
• Más de 25 años

¿Con qué frecuencia utiliza rúbricas estandarizadas al calificar el trabajo de los estudiantes?

¿Para cuáles de los siguientes tipos de evaluación consideraría utilizar la calificación asistida por IA? (Seleccione todos los que correspondan)

• Exámenes de opción múltiple o de respuesta corta
• Ensayos o trabajos escritos
• Trabajos de investigación o proyectos de fin de curso
• Informes de laboratorio o trabajos técnicos
• Presentaciones o exámenes orales
• Evaluación basada en la participación o el debate
• Moderación de la evaluación entre pares
• No consideraría utilizar la calificación asistida por IA para ninguno de estos
• Otro (especifique)

¿Qué tan preocupado está de que la calificación asistida por IA pueda reducir la conexión personal entre el profesorado y los estudiantes en el proceso de retroalimentación?

¿Cuántas horas de formación estaría dispuesto a invertir para aprender a utilizar una herramienta de calificación asistida por IA de manera eficaz?

• Ninguna: no invertiría tiempo en formación
• 1–2 horas
• 3–5 horas
• 6–10 horas
• Más de 10 horas

¿Cuál sería su motivo principal para participar o no participar en un experimento de este tipo?

• Curiosidad por saber cómo se desempeñan las herramientas de IA en la calificación
• Deseo de contribuir a la investigación basada en evidencia sobre la enseñanza
• Interés en mejorar mi propia eficiencia en la calificación
• Preocupación por el tiempo que requiere
• Escepticismo sobre el papel de la IA en la evaluación
• Incomodidad al ser evaluado u observado
• Preocupaciones de privacidad o éticas sobre el diseño de la investigación
• Otro (especifique)

¿Cuál describe mejor a su institución?

• Universidad de investigación (R1/R2 o equivalente)
• Universidad integral o que otorga maestrías
• Facultad de artes liberales
• Colegio comunitario o de dos años
• Institución profesional o especializada
• Otro (especifique)

En general, ¿qué tan satisfecho está con su proceso actual de calificación y evaluación?

¿Cuál es el tamaño de matrícula típico de los cursos que imparte?

• Menos de 20 estudiantes
• 20–50 estudiantes
• 51–100 estudiantes
• 101–200 estudiantes
• Más de 200 estudiantes