domingo, 30 de noviembre de 2014

¿Cómo corriges?


Mi justicia en las correcciones

Me considero justo y estricto para corregir exámenes escritos, especialmente estructurados. En las preguntas con opciones múltiples (respuestas cerradas), no hay mayor problema de equivocaciones o injusticias; en el aspecto del contenido guarda relación con las actividades de aprendizaje o con las lecturas obligatorias. En los casos que puedo ceder, ser más flexibles, son en las preguntas abiertas (respuestas elaboradas), en tanto no tengo la costumbre de establecer de manera explícita las posibles respuestas correctas (pre-codificación), en ese sentido, en algunos casos, puede denotar subjetivismo.

Procedimiento que sigo en las correcciones de pruebas

En las pruebas estructuradas (pruebas objetivas) es fácil la aplicación  de una plantilla de corrección y cuando se trata de preguntas abiertas, tal como indico líneas arriba, considero que los criterios está en mi mente, en tanto guarda relación con las clases y las lecturas obligatorias; pero, ciertamente, no deja de ser subjetivo, lo que el uso de un “diccionario de pre-codificación” permitiría ser más objetivo y justo. Por otro lado, en forma esporádica comparo resultados de aulas diferentes, no profundizando en el análisis de las causas particulares de dichos resultados.

Otras técnicas de evaluación

Las rúbricas y la lista de cotejos son procedimientos que me permite ser bastante justo o igualitario en la evaluación; además cuento con los argumentos, que me brinda el instrumento, para explicar y responder en forma adecuada a las inquietudes o disconformidades que puedan manifestar los alumnos. Ello no significa que hay aspectos en el desempeño de un estudiante que me parece brillante, como también me puede parecer bastante deficiente, y no está considerado en mis criterios de evaluación; por lo cual no lo tomo en cuenta.

Dependiendo del tipo de actividad o tarea realizada soy más o poco estricto. Cuando evalúo actividades, actuaciones y productos específicos, si tengo las rúbricas de evaluación soy bastante estricto, aunque los aspectos dinámicos e intervenciones orales se es menos preciso; a diferencia de los productos físicos, digitales o escritos, que son más fáciles de observar.

Si las actividades son muy dinámicas y múltiples, como los debates, soy más flexible y por lo general con una lista de cotejos registro uno o unos pocos atributos esperados, generalmente registrando la participación del estudiante.

En el caso de la co-evaluación, establecido los criterios de evaluación y la rúbricas respectivas son los alumnos quienes lo aplican y se respeta su calificación.

Si el desempeño no es el esperado suelo ser flexible en los plazos para la entrega de las tareas o trabajos. Pretendo no desanimar ni desmotivar a los alumnos, ahí es el momento que puedo ser más blando; pero si doy alguna oportunidad a algún alumno suelo generalizarlo para el resto del aula.

Ahora juzgue usted mi justicia, indicando en los comentarios su parecer. Gracias.


sábado, 29 de noviembre de 2014

Adaptando ítems liberados

Una de las formas de utilizar los ítems liberados de las Evaluaciones Externas Internacionales es adaptarlas al proceso de aprendizaje de nuestros alumnos. En este caso la elaboración está dirigida a estudiantes del tercer ciclo de Educación Superior Tecnológica para el curso de Estadística Aplicada, válido para todas las carreras, en especial para Administración de Empresas. El promedio de edad de estos estudiantes es de 21 años, los de turno mañana y 24 años, los de turno noche.

He elegido las competencias matemáticas para esta actividad, tomando como referente las preguntas TIMSS, tanto para Educación Primaria como para Educación Secundaria. En ambos casos he escogido estímulos que se centran en evaluar más el dominio cognitivo (habilidades y destrezas) que el dominio de contenido (hechos y conceptos).

TIMSS 2007 - 4º Primaria

La primera pregunta seleccionada es la que muestro a continuación:


Esta pregunta es considerada de dificultad alta, esta dirigida a alumnos de 4º grado de Primaria, cuyo promedio de edad es 9,5 años.

Adaptación 1

La adaptación que he realizado agrega más variables y más observaciones; sin embargo evalúa las mismas capacidades, que para los alumnos de primaria indudablemente sería de grado mayor de dificultad; pero para los alumnos de educación superior tecnológica el grado de dificultad sería menor (solo intermedio). Con respecto al curso de Estadística, los alumnos tienen que desarrollar la habilidad de recopilar, procesar, representar y analizar los datos; ello incluye la verificación de los procesos que si bien se pueden realizar con artefactos electrónicos-digitales, esto no excluye posibles errores que la vista y el razonamiento humano lo puede detectar.

Este estímulo puede ser aplicado a evaluar otros conocimientos, como frecuencia, muestreo o participación de mercado.

TIMSS 2011 - 8º grado

La segunda pregunta corresponde a la prueba TIMSS 2011 para 8º grado, equivalente en España al 2º curso de Educación Secundaria, para edades promedio de 14 años. En este caso el estímulo y la pregunta corresponde al dominio cognitivo de razonamiento y al nivel avanzado.


Adaptación 2

La siguiente adecuación también corresponde al mismo dominio cognitivo, aunque con un mayor grado de dificultad, teniendo en cuenta la exigencia de la educación superior y la edad de los alumnos, que tienen en promedio entre 21 y 24 años.


Este estímulo podría aplicarse tambien en otros contenidos, como frecuencia o correlación lineal; también en otras asignaturas como "Sociedad y Economía", "Marketing" o "Investigación de Mercados", con preguntas que incluyan la interpretación.

A grandes rasgos las similitudes y diferencias obtenidas en estas adaptaciones lo podemos leer en el siguiente cuadro:

Cualquier observación o sugerencia, por mi parte, siempre sera bien recibida por la opotunidad que me puedes brindar de mejorar. Gracias.

REFERENCIAS:
Foto (CC): http://pixabay.com/en/question-marks-punctuation-symbol-2215/

jueves, 20 de noviembre de 2014

Beneficios de disponer de los ítems liberados

Las principales ventajas que encuentro al disponer de los ítems liberados de las Evaluaciones Externas Internacionales son:
  • Analizar la estructura de las pruebas y la sustentación de los ítems; de forma tal que pueda aplicarlo, con el respaldo de la seriedad y validez que contiene su elaboración y selección.
  • Adoptar la estructura de las pruebas PISA y consultarla como fuente de ideas de diferentes formas de elaborar pruebas escritas. 
Entre los muchos ítems que me resultan sumamente interesante señalo algunos:



PISA 2012 COMPETENCIA FINANCIERA – EN EL MERCADO

Marcando el enlace puede profundizar sobre la naturaleza de las preguntas y los criterios de su calificación o codificación. Ahora me queda ensayar la aplicación de estos problemas.

domingo, 16 de noviembre de 2014

El programa PISA puesto en el centro del debate

Como he indicado en el Twitter, por lo general cuando leía una noticia sobre la prueba PISA, me centraba más en el ranking que sobre el contenido del programa, su validez, sus limitaciones o la interpretación de los resultados. Por lo general una lectura rápida de la situación en que se encuentra los diversos países y en especial mi país, Perú.

Un ejemplo de publicaciones centrado en el ranking lo encontramos en el siguiente artículo “El Perú baja dos puestos en educación: del 63 al 65” realizado por el diario “La República”.  Se trata de explicar los resultados como un reflejo de inadecuadas políticas educativas o desgobierno del Estado, como también por el atraso económico que tiene el país.  

Otra publicación digital, “La educación peruana en el contexto de PISA”, explica en forma más detallada la aplicación del programa PISA en el Perú, el contexto de su aplicación, sus ventajas y limitaciones. Las autoras son Liliana Miranda y Andreas Schleicher, son responsables, respectivamente, de dicho programa a nivel de Perú y a nivel internacional. La difusión cuenta con el auspicio del Grupo Santillana y el Consejo Nacional de Educación.

Ahora he ojeado algunas páginas web que se refieren a PISA y me sorprende el artículo de la revista digital, “finanzas.com”, cuyo título es “Lo que oculta el informe Pisa”; en tanto cuestiona dicha evaluación internacional por el diseño técnico y estadístico, y por un interés de la empresa Pearson para lucrar con dicho tipo de pruebas.

Con respecto al diseño del cuestionario, señala que las preguntas que se aplican a los países participantes son diferentes, incluso en el grado de dificultad; en el aspecto estadístico-matemático crítica el método de evaluación de Rasch.  

Con referente al interés lucrativo, según finanzas.com, Pearson obtiene las siguientes ventajas:
  1. Es contratado por los Gobiernos de los países participantes, siendo quien confecciona las preguntas. 
  2. Identifica a los clientes destacados, estos es países y colegios, significando dicha distinción un premio interesado.
  3. Elabora material didáctica según las necesidades detectadas, para ponerlo a disposición de los clientes potenciales, de forma tal que puedan superar en el futuro el programa PISA.
También existe opiniones a favor de la validez de la evaluación PISA, por una parte los medios de comunicación, generalmente para destacar lo pésimo que está la educación en el país y la necesidad que tiene el Estado de reformarla; obviamente la información oficial de la OCDE, como de los gobiernos de los países participantes, en su mayoría, opinan favorablemente. Entre ellas he escogido el artículo “El programa PISA: un instrumento para la mejora del proceso de enseñanza-aprendizaje” publicado en La Revista Iberoamericana de Educación de la OEI (Organización de Estados Iberoamericanos). El enfoque que adopta fundamentalmente es reconocer la necesidad y la posibilidad de mejorar la educación. Valora particularmente la evaluación de las competencias científicas, especialmente la objetividad en comparación con las evaluaciones que se aplican en sus mismos centros de estudios o con sus mismos profesores; estas últimas tienen bastante variabilidad, dando a entender que tiene un alto grado de subjetividad.

Las cuestiones planteadas, especialmente la crítica de la revista “finanzas.com” es motivo para ahondar el estudio y la investigación de las evaluaciones externas internacionales, y en el caso particular del programa PISA, además, comparar los resultados con otros estudios internacionales para inferir la confiabilidad confluyente y la concordancia con la validez.

En todo caso, lo recomendable es recurrir, en la medida de lo posible, a las fuentes originales. En el Twitter con la etiqueta #preguntasPISA podemos encontrar múltiples caminos a esas fuentes.

REFERENCIAS:
Foto (CC): http://www.iuvalladolid.org/IMG/jpg/Charla_Javier_Gutierrez.jpg

martes, 11 de noviembre de 2014

Conociendo las evaluaciones internacionales


Mi nombre es José Luis Loyola Zorrilla, trabajo como especialista en tecnología educativa y uno de los aspectos que me interesa fortalecer de mis conocimientos de educación es el referente a la evaluación, especialmente en cuanto a las herramientas que se pueden utilizar y la validez que pueden contener. Por ello este curso "Las preguntas de PISA y TIMSS: una práctica para el aula", organizado por INEE (Instituto Nacional de Evaluación Educativa) del Ministerio de Educación, Cultura y Deporte, del Gobierno Español, es una excelente oportunidad para aprender más sobre evaluación, no solo de aprendizaje, sino de sistemas educativos.

El curso también es una buena ocasión para abrir en este blog, un espacio para difundir o reflexionar sobre los diferentes aspectos de la evaluación.





De todas estas evaluaciones tengo predilección por la prueba PIAAC, en tanto se relaciona más con mis actividades profesionales. Espero nuevos amigos cibernautas dispuestos a compartir experiencias y conocimientos.

REFERENCIAS:
Foto (CC): https://c2.staticflickr.com/8/7266/6948062934_deb45f92fe_b.jpg