fbpx
Connect with us

Educación

¿Por qué la calificación final de un examen puede no ser fiable?

Avatar

Publicado

el

La mayoría de los sistemas educativos, incluidos los europeos, prevé momentos de transición o finalización de los estudios que vienen marcados por pruebas para la obtención de un título académico, el acceso a determinados estudios y centros de enseñanza o la consecución de premios y menciones honoríficas.

Se trata de pruebas que tienen un gran impacto sobre el futuro académico, personal y profesional de las personas, por lo que deben estar hechas con rigor y objetividad para garantizar la equidad y promover el mérito y la capacidad.

La evaluación auténtica


En el último cuarto del siglo pasado surgió una corriente educativa que propuso que estas pruebas de alto impacto fueran evaluaciones auténticas. Este tipo de pruebas se diseñaron como alternativa a los formatos clásicos de tipo test, formados por preguntas con varias alternativas entre las que la persona evaluada tiene que elegir la correcta.

En cambio, la evaluación auténtica aboga por emplear pruebas abiertas o de ejecución, tales como ensayos escritos, exposiciones orales, ejecuciones artísticas o físicas, resolución de casos, elaboración de informes, presentaciones, portafolios o proyectos. Se entiende que este tipo de evaluación es más auténtica que la realizada mediante test, de ahí el nombre que recibe.

Las dos ventajas fundamentales serían, por un lado, su mayor realismo, al permitir recrear o simular las condiciones reales del desempeño profesional y académico y, por otro, la posibilidad de evaluar competencias complejas como la creatividad, la autonomía, la capacidad crítica, la organización argumental o el trabajo en equipo, difíciles de encajar en el formato tipo test de elección múltiple.

Los cánones de rigor


La idea es buena, el problema viene a la hora de objetivar esas evaluaciones auténticas, pues el infierno está empedrado de buenas intenciones. La objetividad y la equidad no son negociables, así que la evaluación auténtica tendrá que demostrar que sigue los cánones de rigor evaluativo exigibles a las pruebas de alto impacto.

Por ello, a medida que se fueron generalizando este tipo de evaluaciones también se desarrollaron abundantes estudios sobre la fiabilidad de las calificaciones otorgadas por los evaluadores.

Desde el primer momento, las investigaciones ponen de manifiesto la existencia de claras diferencias entre las puntuaciones de los evaluadores que calificaban un mismo ejercicio.

Además de las diferencias en cuanto a la severidad o benevolencia, también se detectó que los evaluadores presentaban todo un catálogo de errores, inconsistencias y sesgos que afectaban a sus calificaciones.

Se confirmó, en definitiva, que las puntuaciones venían contaminadas por los sesgos introducidos por los evaluadores, así que algunos investigadores denunciaron que las limitaciones en términos de medición objetiva de los ejercicios abiertos podrían convertir una prueba de alto impacto en una lotería, es decir, lo que se ganaba en realismo se perdía en objetividad.

En suma, bien se puede afirmar que la calificación objetiva y rigurosa de este tipo de pruebas auténticas es uno de los mayores retos a los que se enfrentan las evaluaciones educativas actuales de alto impacto.

¿Por qué discrepan los evaluadores?


Las razones por las que dos evaluadores discrepan al calificar un mismo ejercicio son múltiples, si bien pueden organizarse en tres grandes bloques:

  1. La materia objeto de la evaluación. Los estudios de revisión realizados indican que las calificaciones de las producciones orales y ensayos escritos presentan niveles de acuerdo entre jueces más bajos que los ejercicios físicos y manuales, la solución de casos clínicos o la ejecución de proyectos de ingeniería. En el caso de las materias escolares el grado de acuerdo entre evaluadores es mayor en los exámenes de las áreas científico-matemáticas que en las áreas lingüísticas, si bien este hecho está condicionado por el nivel de dificultad de la tarea.
  2. El sesgo del evaluador. Ha sido el aspecto más estudiado, existiendo abundantes evidencias del efecto que los jueces ejercen sobre las calificaciones. Se han documentado variaciones en función de sus características personales, actitudes, rasgos emocionales, trayectoria profesional, formación, entrenamiento y experiencia previa, o comportamiento y procesos cognitivos ante la tarea, entre otras.
  3. El procedimiento de evaluación empleado. Para tratar de objetivar sus evaluaciones los expertos se valen de una serie de criterios, instrucciones y directrices denominadas rúbricas de corrección. Distintas investigaciones han encontrado que una deficiente especificación de estas rúbricas introduce sesgos en las puntuaciones y maximiza las diferencias entre los evaluadores.
Deberías leer:  Universidades estatales firman convenio de programas comunes de estudio para alumnos postgrados

¿Se puede objetivar la evaluación?


En primer lugar, hay que asumir que en las pruebas de evaluación auténtica es imposible neutralizar completamente la subjetividad de los evaluadores. Cuando las evaluaciones de alto impacto incluyan este tipo de pruebas solo cabe intentar minimizar los efectos del corrector. ¿Cómo se puede hacer? Disponemos de cuatro alternativas principales:

  • Diseñar rúbricas de corrección que describan de forma analítica y pormenorizada el proceso evaluativo, incluyendo ejemplos de puntuación de ejecuciones reales en el entrenamiento de los evaluadores.
  • Desarrollar programas sistemáticos de formación y entrenamiento de los evaluadores en el manejo de las rúbricas para así minimizar las diferencias entre ellos.
  • Configurar tribunales de valoración donde los jueces se distribuyan siguiendo una pauta sistemática que compense el potencial efecto de asignar algunos ejercicios a evaluadores más severos y otros a jueces más benévolos.
  • Utilizar modelos psicométricos para estimar las puntuaciones de las personas evaluadas que incluyan, además de las respuestas del alumnado, el efecto de los evaluadores, de modo que la calificación final sea corregida en función del grado de severidad de los jueces y tribunales evaluadores.

Conclusión


La idea de una evaluación auténtica que trate de recoger toda la riqueza y los matices del rendimiento académico en situaciones lo más realistas posible es muy loable; el reto es encontrar sistemas de evaluación objetiva para este tipo de pruebas. De lo contrario dejamos a las personas evaluadas en manos del azar, la indefensión y la inequidad.The Conversation

Rubén Fernández-Alonso, Profesor del Departamento de Ciencias de la Educación, Universidad de Oviedo y José Muñiz, Catedrático de Psicometría, Universidad de Oviedo

Este artículo fue publicado originalmente en The Conversation. Lea el original.

Educación

Universidades estatales firman convenio de programas comunes de estudio para alumnos postgrados

El acuerdo facilita el intercambio coordinado de conocimiento entre las 18 instituciones que conforman el Consorcio de Universidades del Estado de Chile (CUECH).

Avatar

Publicado

el

Por

Agencia Uno

Calificado como un hito en el desarrollo del área de postgrado en las Universidades Estatales. Esto, ya que se logró con la firma del acuerdo entre los 18 planteles que componen el CUECH, para que las instituciones potencien sus programas de magíster y doctorado, contribuyendo a elevar los estándares de calidad de la educación superior pública.


Este es uno de los proyectos más ambiciosos de la Red de Investigación del Consorcio, que impacta directamente en el desarrollo de capital humano avanzado para asegurar la calidad de los programas de postgrado que se dictan en estas instituciones.

“El convenio tiene una gran importancia para nuestra casa de estudios y va en línea con su Plan Estratégico, además demuestra la colaboración activa que existe entre las Universidad Estatales, potenciando un área que es relevante para las Instituciones”, afirmó el director de la Escuela de Graduados de la UTalca, Arcadio Cerda, quien tuvo un rol activo en la generación del acuerdo.

En tanto, Eduardo Álvarez, director de investigación de la corporación, señaló que la creación de estos programas es “ir un paso más allá, pues implica una colaboración no circunstancial, sino que de mediano y largo plazo”.

Este convenio establece un protocolo común para generar nuevos programas asociativos y potenciar otros ya existentes, mientras que los cuerpos académicos se construirán con el aporte de todos los planteles. Esta medida beneficia a instituciones que hasta ahora no contaban con un claustro para desarrollar programas de doctorados, como lo exige el Sistema Nacional de Acreditación.

El acuerdo también posibilita el intercambio de estudiantes de postgrado en los programas que cuenten con planes comunes, con modalidades que van desde pasantías de investigación hasta co-tutelas de tesis de magíster y doctorado. Esto permite generar una mayor sinergia entre los planteles y los conocimientos que entregan, trabajo que va en línea con los objetivos planteados por la Red de Investigación del Cuech, que involucra a una gran cantidad de académicos de todo Chile.

Deberías leer:  Universidades estatales firman convenio de programas comunes de estudio para alumnos postgrados

Seguir leyendo

Educación

Mapa interactivo: Revisa los establecimientos sin clases para este lunes

Gabriel Ilić

Publicado

el

Durante los últimos días Chile ha vivido una crisis generalizada marcada por manifestaciones en contra del Metro en primer momento, y posteriormente un descontento generalizado en contra del  gobierno de Sebastián Piñera. Las universidades han decidido en su mayoría suspender las actividades académicas para el próximo lunes.


Las universidades con sus campus en Santiago han suspendido sus clases para este lunes 21 de octubre. En el caso especial de la Universidad de Santiago el plantel mantendrá la suspensión de las actividades hasta el martes 22.

Las protestas se trasladaron ayer hacia las regiones del país siendo Concepción, Valparaíso y Coquimbo las que registraron mayores focos de violencia y enfrentamientos. Las universidades dentro de estas regiones también suspendieron todas sus actividades para el próximo lunes.

 

Todos los planteles aseguran que la situación para los siguientes días se analizará con el correr de los días y de acuerdo a cómo se desarrolle la situación social.

Por otro lado, la Intendenta de la Región Metropolitana, Karla Rubilar anunció la suspensión de clases de establecimientos de 46 comunas de la RM.

Deberías leer:  Universidades estatales firman convenio de programas comunes de estudio para alumnos postgrados

Seguir leyendo

Educación

¿Qué se debe hacer con el abandono universitario? Tres de cada diez deja la carrera

La salida de los estudiantes -en España- trasciende en el ámbito sociopolítico, que debe tomar medidas para evitar que una inversión pública origine unas pérdidas de 1 000 millones de euros.

Avatar

Publicado

el

La publicación de la edición actualizada del Informe U-Ranking, realizado por la Fundación BBVA y el Instituto Valenciano de Investigaciones Económicas, ha puesto de nuevo el foco sobre el sistema universitario pues, al margen del certero análisis que establece sobre la base de indicadores objetivos, ha incluido en esta ocasión datos sobre un fenómeno complejo y preocupante, como es el del abandono universitario.

Así, tomando datos del Ministerio de Ciencia, Innovación y Universidades, el mencionado informe sitúa la tasa de abandono de los estudios de grado en el 33,3 %, de cuya cifra un 21,4 % se produciría por abandono definitivo del sistema universitario y un 11,9 % por el cambio del alumno respecto a la titulación en que inicialmente se había matriculado. Dicho de otro modo: tres de cada diez alumnos universitarios abandonan sus estudios sin completarlos.

La problemática que genera esta situación es amplia y no se limita a consecuencias negativas para el alumno y su familia como podrían ser la ansiedad, el menor número de oportunidades laborales o el surgimiento de conflictos intrafamiliares, sino que trasciende estos entornos para entrar de lleno en el ámbito sociopolítico, que debe tomar medidas para evitar que una inversión pública origine unas pérdidas de 1 000 millones de euros anuales que, según algunos investigadores, puede alcanzar los 1 500.

¿Cuáles son las causas?


Ante este panorama, no es extraño que diferentes grupos de investigación de las propias universidades hayan creado líneas específicas basadas precisamente en analizar cuáles son las causas que llevan a los alumnos a dejar sus estudios tratando de establecer medidas de prevención.

Entre estas causas, parece que tienen un peso preponderante las de corte académico, siendo el rendimiento académico temprano la variable más influyente a la hora de predecir el abandono universitario. De este modo, aquellos alumnos con mejores resultados académicos tienden a permanecer en la titulación, mientras que los que obtienen peores resultados en las fases iniciales de sus estudios optan por buscar vías alternativas.

No obstante, hay que tener en cuenta que este rendimiento puede ya venir condicionado por el bagaje previo, y así no es extraño que otras variables que pueden darse incluso antes de la entrada en la universidad, como el dominio de técnicas de estudio, el rendimiento previo o la orientación académica recibida, tengan una carga importante a la hora de predecir el abandono de la titulación.

Componente emocional


El segundo tipo de factores de influencia en este fenómeno tiene que ver con un componente más emocional y está formado por variables donde la correcta integración social adquiere un papel fundamental, destacando la satisfactoria relación con los profesores, con los compañeros, o incluso la participación en grupos institucionales que permiten establecer vínculos afectivos y de pertenencia a la comunidad universitaria.

Deberías leer:  Universidades estatales firman convenio de programas comunes de estudio para alumnos postgrados

Sin embargo, y a pesar de la influencia de estas variables psicológicas y sociales que podemos considerar, hasta cierto punto, como más controlables por el individuo, no podemos obviar que este se mueve en un entorno donde el contexto socioeconómico y las políticas educativas marcan unas condiciones ambientales que tendrán una influencia directa y notable sobre sus circunstancias.

Factores económicos


Surge así un tercer tipo de factores ampliamente condicionados por lo económico y lo laboral. Entre ellos, la dedicación horaria al empleo o al trabajo doméstico, o la situación económica general, que han demostrado influir también de forma importante en la decisión del alumno de abandonar sus estudios.

De hecho, en este último caso es característico cómo el perfil que más abandona se corresponde con el de un alumno “cuasidependiente”, que obtendría los ingresos en parte de la familia, en parte de la realización de trabajos puntuales y en parte de las becas conseguidas, suponiendo tal circunstancia una situación de sobreesfuerzo e inestabilidad que conduce a la deserción académica.

Un problema con muchas causas


Como puede verse, y aunque podrían mencionarse más elementos que influyen en la decisión final, el fenómeno del abandono es un problema multicausal y, por tanto, su solución debe involucrar a todos los actores, que deben comprometerse con una serie de medidas de prevención.

Para facilitar el rendimiento del estudiante, el sistema educativo debería replantearse el papel de la orientación ya desde la Educación Secundaria, reorganizando los servicios de orientación académico-profesional muy deficitarios y potenciando en su orientación académica el desarrollo de las competencias de meta-aprendizaje.

Para facilitar su integración, por su parte, las universidades deberían dinamizar los procesos de entrada de los nuevos alumnos y fomentar la participación en la vida universitaria a través de la creación, financiación y soporte de grupos académicos, culturales, deportivos, políticos, etc.

Igualdad de oportunidades


En cuanto a las circunstancias del estudiante, tanto las instituciones universitarias como los poderes políticos deberían garantizar unas condiciones que permitan una cierta igualdad de oportunidades, tanto de entrada como en el desarrollo de los estudios. Para ello es importante garantizar la existencia de un sistema de acceso a equipamientos, infraestructuras y tecnologías de los estudiantes independiente de su condición socioeconómica y el impulso inexcusable de un sistema de becas, financiación y ayudas al estudio que permita poder cursar la titulación en unas condiciones dignas.

En definitiva, grandes cambios en el ámbito institucional y social para reducir el abandono y permitir que todo aquel que esté dispuesto pueda alcanzar su potencial educativo.

Este artículo fue publicado originalmente en The Conversation. Lea el original.

The Conversation

Seguir leyendo

Deberías leer

Síguenos en Facebook

Publicidad