¿Cómo calibrar la restricción de tiempo de un examen para un nuevo curso?

Estoy preparando un examen para un curso que estoy dando. Es un curso de ingeniería; los problemas del examen requieren que los estudiantes apliquen el conocimiento conceptual y las habilidades cuantitativas enseñadas en conferencias y laboratorios.

Es la primera vez que se ofrece la clase, por lo que no tengo un marco de referencia de años anteriores. No ha habido cuestionarios en clase u otras oportunidades para averiguar directamente cuánto tiempo tardarían los estudiantes en resolver problemas similares a los del examen. Tampoco he encontrado ningún examen similar de otras universidades que me sirva de referencia.

Obviamente, tengo mucha más experiencia en el material que mis alumnos, por lo que no puedo generalizar cuánto tiempo me lleva resolver este tipo de problemas.

Esta pregunta es para los educadores más experimentados: en un escenario como este, ¿existen métodos o reglas generales para determinar cuánto tiempo puede hacer el examen, dado el tiempo asignado?

No quiero que el tiempo sea un problema importante en este examen; Quiero que la mayoría de los estudiantes que estén razonablemente bien preparados puedan completar el examen en el tiempo dado.

Solo una idea: deja que un TA (o algún estudiante de doctorado que esté familiarizado con el tema) resuelva los problemas que tienes en mente. El TA debe ser tan rápido como uno de los mejores estudiantes para que pueda agregar entre un 20 % y un 50 % del tiempo necesario a la duración del examen. El estudiante de doctorado es probablemente mucho más lento (ya que no está acostumbrado al tipo de problemas y, a veces, usa una forma más complicada de resolver el problema), por lo que puede agregar 0% -20%. Resolverlo usted mismo no es una buena idea: sabe cómo es la solución y de qué manera debe resolverse el problema y no encontrará sus propios errores.
@TheAlmightyBob Muy buena idea. Así también se examinará la TA.
¡@TheAlmightyBob debería ser una respuesta, no un comentario!
El TA debe ser tan rápido como uno de los mejores estudiantes para que pueda agregar 20%-50% del tiempo necesario a la duración del examen. En mi experiencia, 100%-200% es una mejor adición.
@JeffE Mi experiencia fue similar: con TA fuertes, multiplique su tiempo por 3x.
¿Estás obligado a arreglar tu esquema de calificación de antemano? Si no, puede diseñar su examen para que sea "demasiado" (lo que tiene otros beneficios) con la expectativa de que (la mayoría) de los estudiantes no lo hagan todo. Observe lo que es realmente posible (siempre existe ese tipo de Hermione) y establezca sus calificaciones en consecuencia.
@JeffE (y otros): el factor tiempo depende de manera crucial del tipo de problemas que plantee. opción múltiple reproductiva? Factor grande. ¿Preguntas de prueba/diseño de texto libre que requieren un pensamiento independiente? Factor pequeño (a veces incluso 1,0 de TA a estudiante).
@Raphael Si recibía un examen para mi primera prueba que era físicamente imposible de completar, dejaría la clase al día siguiente. Presentar problemas insuperables para medir el desempeño de los estudiantes no es agradable para los estudiantes.
@Compass Oh, se lo decimos a los estudiantes por adelantado, por supuesto. Como dije, beneficios adicionales: planteamos problemas que requieren pensamientos e ideas independientes; si está atascado en un problema, elija otro. (Por supuesto, no les diríamos si quisiéramos elegir el mejor resultado como 100%).
Pida a sus alumnos que hagan una o dos preguntas muy similares a las del examen como ejercicio en clase (sin calificar, pero entregado). Escriba en cada uno a medida que se entregó el tiempo que se entregó. Revisar el tiempo que le tomó a cada estudiante y la calidad/corrección de sus respuestas le permitirá tener una idea de cuánto tiempo les tomará (además de una buena retroalimentación sobre cuán difícil será y ayudar a los estudiantes a tener una idea de qué tipo de preguntas deben poder responder). Sí, esto requiere un tiempo valioso en clase, pero si es un territorio completamente nuevo como lo haces parecer, no hay otra forma de encontrarlo.
¿Preguntas de prueba/diseño de texto libre que requieren un pensamiento independiente? Factor pequeño (a veces incluso 1.0 de TA a estudiante) : esto es ridículamente inconsistente con mi experiencia. Supongo que si mis TA no pueden resolver un problema abierto de diseño/prueba en cinco minutos, la mayoría de los estudiantes no lo resolverán en 20 minutos.
@JeffE Mucho depende de la fuente de los TA: dada su institución, sospecho que los TA son probablemente en su mayoría estudiantes de doctorado y se espera que hagan una cantidad significativa de enseñanza en la clase ellos mismos. En algunas otras escuelas, los TA a menudo son solo estudiantes universitarios que ayudan a calificar.
Puede confirmar la estimación de @JeffE de +100-200%. Fui asistente técnico en ingeniería (como estudiante universitario) durante algunos años, y el profesor entregaba tres versiones diferentes de una prueba de opción múltiple. Dado que hubo un problema ocasional con la respuesta correcta que no estaba presente en las opciones proporcionadas, hice un trato con los estudiantes de que tomaría todas las pruebas con ellos y educadamente le plantearía el problema al profesor si la respuesta correcta era No es una elección. Regularmente terminé las tres versiones antes de que cualquiera de los estudiantes completara su única prueba.

Respuestas (7)

Esto es totalmente acientífico, pero para mis exámenes (matemáticas) utilizo la siguiente regla general:

Después de escribir el examen, me siento con un cronómetro y trabajo el examen de principio a fin. Por supuesto, sé cómo resolver los problemas (ya que los escribí), pero sigo cuidadosamente todos los pasos y escribo lo que consideraría una solución completa y ejemplar. Tomo nota del tiempo que dediqué a cada problema.

Luego tomo el tiempo total y lo multiplico por 3 (oa veces 4). Si esto excede el tiempo asignado para el examen, elimino o simplifico algunas preguntas. (Aquí es donde ayuda que anote el tiempo que dediqué a cada pregunta, para poder eliminar una pregunta y volver a calcular el tiempo sin volver a tomar todo el examen).

Como beneficio adicional, esto también ayuda a garantizar que no cometí ningún error al crear el examen y que todos los problemas tienen las soluciones que pretendía. También me da una clave de respuesta.

Yo uso un factor de 5. Así que un examen de una hora debería tomar 12 minutos para escribir.
Hablando con mis profesores en la licenciatura, esto es muy similar a lo que hicieron. Siempre decían que podían terminar su propio examen de 50 minutos en 15 minutos.
También uso el factor 3-4 para las estadísticas.

en un escenario como este, ¿existen métodos o reglas generales para determinar cuánto tiempo puede hacer el examen, dado el tiempo asignado?

La forma en que siempre lo hago es dar el examen a mis estudiantes asistentes (TA, estudiantes de maestría, investigadores de pregrado) y ver cuánto tiempo les toma. Cuanto más cerca estén los estudiantes de un participante de curso promedio bien preparado, mejor. Y, obviamente, desea agregar un poco de margen para permitir el hecho de que los participantes de su curso, a diferencia de los evaluadores de su examen, estarán nerviosos y en una situación de prueba, y que no desea que el tiempo importe demasiado. .

Editar: Bob me ganó en un comentario.

En mi experiencia, la relación entre el tiempo necesario para resolver un problema por parte de un profesor experimentado y el "alumno promedio" puede variar mucho, según el tema, el tipo de problemas e incluso entre problemas del mismo tipo. Por un lado, hay problemas cuyas soluciones son bastante sencillas pero que requieren muchos cálculos tediosos, para los que no existe ningún atajo: en este caso el tiempo de solución es casi el mismo para el profesor y los alumnos. Por otro lado, hay problemas que requieren encontrar una solución "inteligente", donde se involucran pocos cálculos: en este caso, un profesor experimentado puede resolver un problema en mucho menos tiempo (ratios de alrededor de 4 entre los tiempos de solución no son poco común).

Por lo tanto, incluso si puede dar problemas de examen a los TA para que los prueben, trate de juzgar cuidadosamente qué tipo de problemas ha preparado, esto podría permitirle reducir mejor la duración del examen.

Normalmente considero una relación de alrededor de 3 entre el tiempo de examen y mi tiempo de solución (medidas electrónicas).

Como profesor, al realizar la prueba, debe poder abstenerse de utilizar atajos que no enseñó y, como tales, no deberían afectar el tiempo requerido. Sin embargo, los TA's/otros pueden encontrarse con ellos y usar los atajos.
@user2813274: No he escrito, no enseñé el atajo. Pero los estudiantes pueden no reconocer la similitud entre el ejemplo descrito durante las lecciones y el problema del examen. Y de todos modos, espero que los estudiantes puedan encontrar atajos en base a lo que han estudiado en todos los cursos que han seguido, especialmente si son estudiantes de posgrado.
Si enseñó el atajo (y espera que los estudiantes lo usen), entonces no hay nada de malo en asignar tiempo y esperar que los estudiantes tengan que usarlo para terminar a tiempo. Sin embargo, no esperaría que usen accesos directos de otros cursos, que pueden haber tomado o no (a menos que sea un requisito previo, pero incluso entonces no lo probaría a menos que se haya revisado en clase primero).
Lo importante es que los estudiantes sean conscientes de las expectativas de sus profesores. Entonces, les advierto claramente de dos cosas: i) en los exámenes encontrarán al menos un problema nuevo, es decir, un problema para el cual no se ha discutido ningún ejemplo anterior (como ejercicio en clase, tarea o de exámenes anteriores); ii) Espero que puedan utilizar hechos básicos de una serie de otras materias que son obligatorias para todos los estudiantes, por lo que no es necesario que se establezcan explícitamente como requisitos previos. Y el examen son libros abiertos. Si no entienden estas expectativas, muy mal, fracasarán.
No estoy seguro de cómo me siento acerca de los "nuevos problemas", así que hice una pregunta sobre ellos , pero edite / comente si no le importa qué problemas específicos pregunta. Recuerdo algunos profesores que hicieron tales cosas, pero los odié por eso incluso cuando resolví el problema. También creo que estos problemas harán que juzgar la cantidad correcta de tiempo sea mucho más difícil que sin ellos.
A veces es lo contrario: una pregunta de examen de pregrado que se le da a un chico de secundaria se hace en la mitad del tiempo del profesor. Esa pregunta se podría haber resuelto mucho más rápido y con menos posibilidad de errores al presentar el problema en forma de polinomio y luego usar la división de polinomios sintéticos para encontrar ceros que tuvieran una forma bastante estereotipada. Le pregunté al profesor al respecto y me dijeron que ningún estudiante lo hizo de esa manera :) Eso es probablemente bastante raro, pero hay algunos "trucos" algebraicos de bajo nivel que parecen no enseñarse en todas partes. Mi increíble profesor de matemáticas de secundaria no lo enseñó con seguridad

Esto es lo que hago, incluso en cursos que he enseñado a menudo. No responde a la pregunta que hizo, pero puede servir a su propósito.

Siempre trato de inventar un examen que se pueda hacer en el tiempo asignado, pero casi nunca lo logro: me dejo llevar por hacer que las preguntas sean interesantes, con la esperanza de que los estudiantes realmente aprendan del examen y demuestren lo que saben. Anuncio mi fracaso por adelantado, para que los estudiantes no se sorprendan. Me aseguro de decirles que, dado que sé que hay algunos estudiantes A en la clase, estoy moralmente obligado a curvar el examen para que las calificaciones más altas sean A.

Les digo a los estudiantes que después de entregar su examen (cronometrado) deben llevar las preguntas a casa y venir a la siguiente clase con un trabajo con las soluciones que desearían haber tenido suficiente tiempo para escribir. Les digo que el esfuerzo adicional no necesariamente reemplazará su trabajo cronometrado, pero puede mejorar su calificación.

Dado que casi siempre doy exámenes de notas abiertas con el libro abierto, el hecho de que puedan buscar cosas en casa no es una verdadera ventaja. Soy consciente del hecho de que pueden obtener ayuda adicional en casa (es decir, hacer trampa), pero siempre me siento incómodo diseñando limitaciones para atrapar a los tramposos que niegan a la mayoría de los estudiantes honestos la oportunidad de aprender más.

Suena muy familiar, excepto que siempre me negué a asignar calificaciones con letras a los exámenes individuales. En general, podría decir que cualquiera que obtuvo al menos un 80 % estaba haciendo un trabajo A, y cualquiera que obtuvo al menos un 50 % estaba haciendo al menos un trabajo C. Y recuerdo una o dos clases pequeñas en las que realmente no había nadie que mereciera una A al final del curso.

Si la persona que prepara el examen no tiene idea de cómo se van a desarrollar las preguntas en la práctica, es de suponer que los estudiantes se encuentren exactamente en la misma situación. Eso puede aumentar los problemas de nerviosismo y dificultarles la preparación para el examen.

¿Qué tal dar un examen de práctica, que puede ser más corto que el examen real pero usa preguntas similares, durante un período de clase un par de semanas antes del examen real? Si hace las preguntas usted mismo, o tiene un TA, etc., hágalo como ya se sugirió, puede usar la prueba de práctica para calibrar la relación entre el tiempo de los estudiantes reales y el tiempo del TA.

Los estudiantes también se beneficiarán al ver qué tipo de preguntas plantea, con la oportunidad de discutirlas con usted, con el TA y entre ellos. Eso los ayudará a prepararse para la prueba real.

No tengo un período libre para dar un examen de práctica. Los estudiantes han visto el tipo de preguntas que haré porque se las dieron para la tarea, pero no he visto a los estudiantes hacer ese tipo de preguntas.
@ ff524, encuentre un período libre que la MAYORÍA de su estudiante pueda hacer y haga que el examen de práctica sea opcional, con otros estudiantes que puedan hacerlo en casa si no pueden llegar al tiempo que usted estableció.
Dudo que los estudiantes hagan el examen de práctica a la misma velocidad que el examen real, a menos que piensen que se va a calificar el examen de práctica.

Me gusta la sugerencia de Nate de multiplicar por 4 si su examen es solo preguntas de ensayo. Si le preocupa que los estudiantes no terminen, puede usar preguntas de opción múltiple y de respuesta corta.

Las preguntas de opción múltiple y de respuesta corta lo obligan a hacer preguntas enfocadas que pueden responderse rápidamente. Cuando estaba en la licenciatura, siempre me gustaron las pruebas de opción múltiple y respuesta corta porque sabía que cada pregunta de opción múltiple tomaría de 1 a 2 minutos, cada respuesta corta de 2 a 3 y la pregunta de ensayo generalmente tomaría de 7 a 10.

Puede usar esas reglas generales para crear una prueba que esté seguro de que los estudiantes podrán terminar.

Puede encontrar útil este manual de prueba de opción múltiple .

Ese es un buen enlace, aunque no estoy seguro de cuánto responde a las preguntas originales.
La otra publicación se me adelantó al sugerir tomarlo usted mismo y multiplicar el tiempo por 4, y dárselo al TA.
Lo que dices no es estrictamente cierto. En general, el formato de una pregunta no necesariamente le dice nada sobre el tiempo que se necesitará para responderla. Una pregunta de opción múltiple puede requerir que resuelva un problema arbitrariamente complejo para obtener la respuesta. Puedo escribir una pregunta de opción múltiple que, literalmente, tardará billones de años en responder correctamente :-)
Muy cierto, puedes hacer un mal examen usando la opción múltiple. En mi experiencia como estudiante y calificador, los exámenes de opción múltiple tienden a NO tomar 4 veces más de lo que pensaba el profesor, y no terminan con la calificación más alta de 32/100, lo que he visto que sucede con bastante frecuencia con los exámenes de estilo ensayo.

Calibración de la hora del examen

  • 1/8 de tiempo para que el profesor resuelva un examen de primer año
  • 1/7 de tiempo para que el profesor resuelva un examen de segundo año
  • 1/6 de tiempo para que el profesor resuelva un examen de nivel junior
  • cualquiera de los anteriores podría limitarse a un factor de 5 por la velocidad de escritura a mano, tratar como "1/5" para todos los estudiantes universitarios
  • 1/5 de tiempo para que el profesor resuelva un examen de nivel superior
  • 1/4 de tiempo para que el profesor resuelva un examen de nivel de posgrado (maestría) elemental
  • 1/3 de tiempo para que el profesor resuelva un examen de nivel intermedio de posgrado (maestría especializada)
  • 1/2 tiempo para que el profesor resuelva un examen de nivel avanzado de posgrado (doctorado)

La regla general es tomarse el tiempo para escribir una clave de respuestas con todos los pasos requeridos. Multiplique por un factor apropiado según sea necesario. El factor es el inverso del tiempo esperado para resolver el problema por sí mismo.

Recuerdo haber tomado un examen final para una clase de nivel de Maestría, y terminé en una hora, un compañero de clase terminó en dos horas, la tercera persona tomó cuatro horas, mientras que el resto de mis compañeros de clase tomaron cinco horas. El tercio inferior de la clase no terminó el examen después de 5 horas. El examen estaba programado para tres horas.

Recuerdo haber anotado el tiempo en incrementos de 30 segundos que tomé para cada problema en una tarea asignada, por lo que mi profesor escribió su tiempo escribiendo la clave de respuestas justo al lado de cada uno de mis tiempos. Fui más rápido en general y en la mayoría de los problemas (la juventud piensa más rápido), pero más lento en algunos problemas (la sabiduría piensa más inteligentemente).

¿Cómo calibrar la restricción de tiempo de un examen para un nuevo curso?
RespuestasAquíPolítica de privacidad1y, 1v