¿Qué dicen los resultados polarizados de la evaluación de los estudiantes sobre mi enseñanza?

Enseñé mi primera clase el trimestre pasado. Los resultados de las evaluaciones están muy polarizados. Los datos sin procesar muestran que mis puntajes son muy altos o muy bajos para la mayoría de los ítems. Eso implica que a algunos estudiantes les encantó la clase y otros la odiaron.

Honestamente, esta experiencia docente ha sido tan agotadora que estoy pensando seriamente que la enseñanza no es para mí. Mis colegas me dicen que mejorará, pero no estoy seguro de cómo me siento acerca de mi desempeño promedio. Desearía que las evaluaciones no estuvieran tan polarizadas para poder saber si en general soy un instructor eficaz o no.

¿Cómo le darías sentido a los resultados?

Los estudiantes están bajo mucha presión y, a veces, la liberan de formas que lo afectan (p. ej., plagio, drama, comentarios no constructivos sobre la evaluación). Trate de no tomarlo como algo personal.
¿Cómo fue la distribución de calificaciones? ¿La clase era homogénea o contenía estudiantes de diferentes grupos (p. ej., estudiantes de especialización frente a no especialistas)?
Tuve alrededor de 20 que recibieron As, alrededor de 12 Bs, alrededor de 10 en el rango de C, 1 D y una F. Era un curso de nivel introductorio, por lo que había estudiantes de diferentes carreras. ¿Por qué?
¿Cómo son los números? ¿Están divididos 50-50 entre amor y odio, o solo hay una minoría de uno de los grupos?
¿Los estudiantes entendieron la escala? En mi departamento es común que alrededor del 20% de los comentarios abiertos positivos vayan acompañados de malas calificaciones numéricas.
Bueno, hay como 3-4 estudiantes con evaluaciones muy bajas. Luego están los demás con (totalmente de acuerdo), (de acuerdo), o (más de acuerdo que en desacuerdo). Revisé las evaluaciones de mis departamentos y generalmente están en la sección "de acuerdo", lo que significa que no han recibido puntajes muy bajos (o sus evaluaciones están distribuidas uniformemente). Esos 3 puntajes bajos reducen realmente mis evaluaciones generales.
Por supuesto, esto no tiene nada que ver con tu pregunta, ¡pero no pude evitar estar absolutamente asombrado con las calificaciones! Pero la mayor parte de mi enseñanza ha sido álgebra universitaria, precálculo y cursos de primer año de cálculo. . .
Están en el extremo superior. ¿Bien? Lo sé. Todavía tengo gente en mi oficina llorando porque pensaban que se merecían sobresalientes. Por el contrario, obtendría documentos extremadamente bien escritos y estudiantes bien preparados. Entonces, como instructor, también estuve confundido todo el tiempo porque a la mitad de la clase le fue excepcionalmente bien y a la otra mitad le fue muy mal. Nunca supe si el material era demasiado fácil o demasiado difícil. Sin embargo, las evaluaciones dicen "material complejo, material aburrido, sin interrupciones". Sin embargo, el departamento seleccionó el texto. No sé, sinceramente. ¡Podría apestar como instructor!
La polarización, si no está muy sesgada a una mala evaluación, suele ser una buena señal, especialmente con su perfil de calificaciones. Sin saber nada de tu curso, solo las notas y tu evaluación, diría que lo hiciste muy bien. Puede que algunos te hayan odiado, pero les diste una buena educación. Lo verán mucho más tarde. No te preocupes y no trates de complacer a todos. Ser respetado es mucho mejor para un maestro que ser querido. Eso sí, intentar afinar y mejorar, pero, de entrada, esto pinta bien. ¿Enfrentó alguna consecuencia que le preocupa? La gestión inteligente ignora los valores atípicos.
Por lo menos, no eras aburrido. Esto significa una mayor retención de material del curso para los estudiantes. Buen trabajo.
¡Gracias! Tomaría cualquier estímulo que pudiera obtener en este momento. Estoy desarrollando un nuevo nivel de respeto por mis profesores.
Estar cansado después de la enseñanza es normal. Mis padres son profesores y me advirtieron que estaría agotado los primeros cursos, y tenían razón. Se pone mejor, enseñar es trabajo, así que todavía estoy cansado después de enseñar, pero ya no estoy exhausto.
¿Los estudiantes que sacaron malas notas te dieron un mal informe? ¿Los estudiantes A te dieron informes brillantes? Si este es el caso, tomaría todo esto con pinzas.
No sé. es anonimo No di As. Los que obtuvieron As, merecían la calificación.
Cada vez que me han llamado para enseñar, como un experto relativo, no como un "profesional de la educación", aquellos que están interesados ​​​​en el tema me dan una calificación alta, mientras que aquellos a quienes se les ha indicado que deben aprender pero no tienen un interés real. dame una calificación baja. Solo mi experiencia. YMMV.
Jugando al abogado del diablo: sin pruebas previas y posteriores, no sabes si eras o no solo un irritante semanal que los estudiantes tenían que soportar. Tal vez algunos no se molestaron en hacer una crítica honesta y negativa si pensaban que no tenía remedio. Quizás muchos ya conocían el material y simplemente siguieron adelante. Pero los estudiantes que esperan educación se sentirían privados (de tiempo, dinero), se expresarían al respecto y les iría mal. La clave es hacer evaluaciones que vayan más allá de la "prueba del olfato" (nivel 1: evaluaciones del curso) e ir a la prueba de eficacia (nivel 2: prueba previa y posterior). Aún mejor es la retención en el futuro (nivel 3).
Con respecto a mi comentario del 4 de abril, vea la parte superior de la página 3 aquí (= p. 12 del archivo .pdf), donde establece que aproximadamente el 50% de todos los estudiantes que se inscriben en álgebra universitaria (en un colegio o universidad en los EE. UU.) NO reciba una A, B o C.

Respuestas (7)

Las evaluaciones solo te dicen si les agradaste a tus estudiantes o no. Su objetivo principal, sin embargo, es que los estudiantes aprendan el material y desarrollen sus habilidades intelectuales, no que les gusten.

Pida a colegas experimentados que se sienten en sus clases y le den retroalimentación, y pídales que revisen sus evaluaciones y el desempeño de los estudiantes en ellas (prestando la atención adecuada a cómo preparó a los estudiantes; en un extremo, las evaluaciones significan algo diferente (pero no nada) ¡si les ha dado a los estudiantes las preguntas y respuestas por adelantado!). Esto le dará información mucho más útil que las evaluaciones de los estudiantes.

Simplemente gustar no es educativo. Dicho esto, descubrí que una cierta cantidad de carisma y simpatía ayuda a conectarse con los estudiantes y forjar una relación educativa. Diría que evals le brinda información menos confiable sobre un aspecto de la enseñanza. Según mis recuerdos como estudiante, muchos de los mejores profesores parecían crear las opiniones más polarizadas entre los estudiantes.
Estoy en total desacuerdo. Al menos yo, como estudiante, nunca he evaluado a un maestro en función de si me gustaba o no. Puede que haya tenido una ligera influencia, pero creo que cualquier alumno puede entender que no sirve de nada hacer esto para un profesor que te gusta. Por lo tanto, creo que, en general, no lo hacemos.
¡Muchas gracias por los comentarios! Si alguna vez vuelvo a enseñar, haré dos cosas: dar evaluaciones durante el trimestre y pedirles a mis asesores que observen mi enseñanza.

De los comentarios del OP:

Valoraciones que los alumnos dieron al OP:

[...] hay como 3-4 estudiantes con evaluaciones muy bajas.

Calificaciones que el OP dio a los estudiantes:

Tuve alrededor de 20 que recibieron As, alrededor de 12 Bs, alrededor de 10 en el rango C, 1 D y una F.

No sé si estoy malinterpretando, pero parece que en una clase de 44 estudiantes, alrededor del 8 % dio evaluaciones muy bajas, mientras que el otro 92 % dio evaluaciones muy altas. Yo diría que hay algunas buenas noticias y algunas malas noticias aquí.

  • Si el 92% dio evaluaciones muy altas, entonces claramente muchas cosas van bien.

  • Estar insatisfecho con evaluaciones tan altas muestra, en mi opinión, expectativas totalmente irreales.

  • La distribución de grados descrita aquí está extremadamente inflada. Es difícil saber qué significa esto sin más contexto. Es posible que esto sea en una escuela que tiene calificaciones extremadamente infladas en general. (Este tipo de inflación extrema de calificaciones es bastante común en cursos que no son STEM en escuelas privadas costosas que tienen admisiones altamente selectivas).

Las evaluaciones de los estudiantes son básicamente medidas de dos cosas: (1) si el instructor hizo lo que se esperaba (se presentó a clase, conocía el tema) y (2) si el estudiante obtuvo la calificación que quería, sin una gran cantidad de esfuerzo. Las evaluaciones no son medidas sensibles de la diferencia entre un maestro promedio y un gran maestro.

Esas son las calificaciones que dio, no las evaluaciones que recibió.
@Josué: Sí. Las evaluaciones de los estudiantes a menudo se basan en cuán satisfechos están con sus calificaciones.
En mi universidad las evaluaciones se piden antes del examen. De esta manera el estudiante simplemente no sabe su calificación y no puede cambiar sus evaluaciones dependiendo de la calificación que esperaba. Sin embargo, esto también significa que un profesor que realiza una prueba que no coincide con el nivel de su curso o programa no recibirá comentarios del examen en la evaluación.
¿De dónde viene la cifra del 92%? Incluso si B se considera una "evaluación muy alta" (que no es de donde vengo; es bueno pero no excelente ), eso es solo el 72 %, y si incluimos las C, obtenemos el 95 % en lugar del 92 %. Esa distribución de calificaciones me parece inflada, pero no "extremadamente" inflada. Sin embargo, considerando la ausencia total de contexto cultural en la pregunta, eso es simplemente aplicar mis propias experiencias y sesgos limitados, al igual que eso es todo lo que puede hacer su respuesta. No tenemos suficiente información para hacer incluso los juicios calificados que usted hace.
@KRyan Si suma las calificaciones, eso es "alrededor de" 44 estudiantes. "3-4" dio malas evaluaciones. 3/44 = 0,068, 4/44 = 0,09. (.068 + 0.09)/2 = 0.079 que es aproximadamente 8%.
@DCShannon Ahhh, está bien, eso tiene más sentido.
@Bakuriu: En mi universidad las evaluaciones se piden antes del examen. ¿"El" examen significa que solo hay un examen, que es el final? Esto probablemente varía mucho. En mis cursos, suelo dar 4-5 exámenes por semestre.
@BenCrowell No, un examen por curso. Debería haber escrito "las evaluaciones de un curso se solicitan antes de su examen".

No sudaría por eso (¡todavía no!). ¡No porque SÓLO el 58% de los estudiantes llenaron el formulario de evaluación y definitivamente no por enseñar su primer curso! Espere hasta que enseñe más cursos, recopile más datos y luego vuelva a evaluar desde allí. La enseñanza requiere experiencia y la experiencia viene con el tiempo.

Recuerda esto, ¿cuántos profesores tuviste cuando eras estudiante que no te gustaban? ¿No te gustaron porque no te gustó el curso en sí? ¿No te gustaron sus personalidades? ¿Solo porque eran malos? ¿Tienes una mala nota con ellos? Si hizo demasiada tarea, etc., el punto es que muchos estudiantes (especialmente los estudiantes universitarios) tienden a estar de algún modo malhumorados al completar las evaluaciones. A veces me temo que muchas de estas valoraciones se basan en el carisma, la personalidad, la forma de vestir, la popularidad del profesor y no en la enseñanza real.

Una cosa que puede hacer es recopilar evaluaciones informales cada 4 semanas (más o menos) del semestre. Por lo tanto, puede ver y reevaluar sus métodos de enseñanza antes o más rápido. Esto se puede hacer mediante el envío de encuestas en línea a los estudiantes que les permitan publicar sus reseñas de forma anónima (es posible que desee consultar las reglas de su departamento para esto primero). O tal vez tener conversaciones breves con algunos estudiantes (estudiante A, estudiante B y estudiante C) para obtener algunos comentarios. Tal vez pueda pedirle a un miembro de la facultad que asista a su clase 1-2 veces para criticar sus métodos de enseñanza.

¡Muchas gracias! Si alguna vez vuelvo a enseñar, recopilaré evaluaciones a lo largo del trimestre. ¡Y tienes razón! Puedo recordar al menos a dos profesores que evalué duramente y de los que luego me arrepentí. ¡Estoy tratando de no tomarme las cosas como algo personal!
¡Cosa segura! Es un viaje, saca lo mejor de él y mantente positivo.

Otra interpretación de los resultados es que, al ser un curso introductorio, asistieron personas que tenían conocimientos previos y algunas que no habían estado expuestas al contenido antes. Aquellos que lo calificaron bien pueden haber sido del campamento anterior y encontraron fácil el material. Aquellos que eran de la última pueden haber encontrado que su enseñanza era menos que efectiva.

Por otro lado, lo contrario podría haber sido cierto. Tomemos, por ejemplo, una escuela de negocios que requiere que sus especialistas en sistemas de información tomen una clase introductoria de "Sistemas de información" que también se requiere para todos los estudiantes de negocios. El material podría, en el mejor de los casos, ser correctivo o incluso perjudicial para cubrir temas más avanzados en el mismo campo debido al curso introductorio. (Por ejemplo: Proyectos grupales donde terminan haciendo la mayor parte del trabajo).

Ambos escenarios son plausibles. Otro usuario mencionó recibir evaluaciones a lo largo del semestre. Eso es bueno, pero también debe recopilar información sobre quiénes son los estudiantes para hacer un mejor uso de esas evaluaciones.

¿Los estudiantes tienen experiencia previa en su materia?

  • Para aquellos con experiencia previa, ¿cómo están recibiendo el material? ¿Es beneficioso para ellos? ¿Esencialmente tiene unos pocos estudiantes que hacen una gran parte del trabajo de las clases? (EG Del segundo ejemplo, ¿hay un especialista en SI en cada grupo (si hay proyectos grupales) que está haciendo el 80-100% del trabajo del grupo?)
  • Para aquellos sin experiencia previa, ¿les está ayudando su material? ¿Las evaluaciones también mejoran su aprendizaje? ¿O están dedicando una cantidad de tiempo desproporcionada al trabajo en relación con quienes tienen experiencia previa?

Si puede responder estas preguntas, podrá determinar mejor qué grupo de estudiantes le está dando evaluaciones positivas y qué grupos le están dando evaluaciones negativas. A partir de ahí, puede determinar que las evaluaciones que está dando son demasiado fáciles/demasiado difíciles en relación con una gran parte de la clase. Tal vez ni siquiera necesites tomar una decisión entonces. Si sus hallazgos son que tiene una clase muy dispar, tal vez su departamento cambie la estructura del curso de modo que los estudiantes más avanzados tomen otra clase y los estudiantes de recuperación tomen otra.

Mi primer pensamiento también fue: probablemente estos dos tipos de evaluaciones provienen de dos tipos de estudiantes muy diferentes.
Creo que la clase fue diseñada para mayores. Pero es una clase de nivel de introducción y se espera que la tomen los no mayores. Hubo varios estudiantes que dijeron que la clase solidificó su decisión de estudiar esta carrera. Recibí quejas de personas sin especialización, pero también tuve artículos excepcionales escritos por personas sin especialización. Pensé en hacerlo más fácil, pero también me preocupaba que pudiera perjudicar a quienes obtuvieron el material y escribieron excelentes artículos. Tuve 14-15 estudiantes que constantemente comentaban durante las discusiones en clase. Pensé que eso era lo suficientemente bueno. ¡Pero aparentemente no!
Diría que es por eso que tienes críticas divergentes. Tuviste algunos estudiantes que eran muy apasionados por el campo (se especializaron en él). Entre aquellos no mayores que lo hicieron bien, algunos de ellos probablemente tenían algún tipo de experiencia en eso, pero decidieron especializarse en eso. Los aspectos negativos probablemente provinieron de los no mayores que pueden no haber tenido conocimiento previo ni interés más allá de tomarlo porque es obligatorio. Tuve una experiencia personal como esta en mi licenciatura. Fue MUY difícil porque no solo estaba aprendiendo algo que no me interesaba, sino que se esperaba que me desempeñara como si me estuviera especializando en ello.

Descubrí que los buenos maestros tienden a agradar y disgustar a los que ven lo que están haciendo y cómo manejan el salón de clases, o por ser justos, o por querer que los estudiantes se beneficien y se esfuercen; aquellos que quieren saltearlo y quieren un maestro que solo esté marcando el tiempo y dedicando las horas, que no sea estricto con la clase, etc.

Los profesores mediocres tienden a obtener un promedio 'blah'. Si fueras un mal maestro, creo que la parte polarizada no incluiría muchos "buenos". Eso para mí dice algo digno de mención. La polarización en sí no es el problema. Pero alguien que no puede obtener una parte de las calificaciones por encima del promedio (consistentemente) puede necesitar mirarse a sí mismo de una manera que tú no podrías.

Dicho esto, 100% de acuerdo con los comentarios anteriores también. Consiga algunos maestros que respete para observar y calificar su trabajo, y no solo una vez. Pero tenga en cuenta que los maestros, como cualquiera, pueden entrar en una rutina o tener diferentes personalidades y formas (sin mencionar que la enseñanza puede volverse increíblemente politizada y tiene una buena cantidad de "One True Way"), así que considere cualquier cosa que se diga en lugar de asumir que es todo. corrige automáticamente y decide por ti mismo.

También pregunte a sus alumnos cada año: "Yo también califico cómo me va" y pídales una cosa que les guste y una cosa que les gustaría que hicieran de manera diferente. Te enseñará cosas, y les enseñará que calificar el propio desempeño no es algo malo, no es una amenaza o una crítica, no es algo que solo la gente de 'arriba' le hace a la gente de 'abajo' en una jerarquía de privilegios y juicios, y una base decente. modelo para que en el futuro lo hagan en su propio beneficio si así lo desean, y ejemplo de un adulto dispuesto a hacerlo. Eso si nada más es la educación.

Gracias por tomarte el tiempo y responder. Como mencioné anteriormente, les pediré a mis asesores que se sienten en mis futuras clases (¡si alguna vez vuelvo a enseñar! :))

Basado en los números que diste, eso realmente no suena muy polarizado. De hecho, parece que recibiste críticas abrumadoramente positivas. ¡Buen trabajo!

Pero tal vez entendí mal.

Si obtiene reseñas polarizadas, entonces dos tipos de reseñas radicalmente diferentes indicarían dos tipos de encuestados radicalmente diferentes. Después de todo, todos estaban en la misma clase, pero lo percibían de manera bastante diferente. Si le preocupa si le gusta a sus estudiantes, lo cual creo que debería serlo, pero no todos lo hacen, o si hay mucho en juego en sus revisiones, como el salario, entonces querrá arreglar esto.

Por lo tanto, deberá observar detenidamente los datos que tenga sobre sus alumnos y tratar de determinar cuál podría ser esta diferencia. Puede ser preparación, especialización, años en la escuela, antecedentes culturales, aptitud en la materia o cualquier cantidad de cosas.

aquí hay una sugerencia:

A partir de los resultados de las revisiones polarizadas, ¿ha considerado la posibilidad de que mostrara favoritismo hacia algunos estudiantes, mientras descuidaba a otros, otros que probablemente eran muy trabajadores y dedicados a su curso pero que se sintieron relativamente ignorados por usted?