Aplicación de una prueba de evaluación (Actividad final MOOC Preguntas PISA)

Unidades de evaluación utilizadas y sus características

Debido a que mi alumnado es de Formación Profesional de Grado Superior, de la especialidad de Informática, no he podido escoger pruebas que pudiera aplicar directamente a ellos. He optado por elegir unidades de evaluación relacionadas con la competencia matemática ya que creo que es la más afín a mi especialidad.

Las unidades han sido obtenidas desde Estímulos PISA liberados como recursos didácticos de Matemáticas y he procurado utilizar unidades de diferentes niveles de dificultad, tipos de respuestas e ideas principales como se puede ver en la siguiente lista de las unidades seleccionadas:

• Chatear
• Pregunta 1:
• Idea principal: Cambio y relaciones
• Competencia matemática: Conexiones
• Situación: Personal
• Tipo de respuesta: Respuesta corta
• Dificultad: 533 (nivel 3) 
• Pregunta 2:
• Idea principal: Cambio y relaciones
• Competencia matemática: Reflexión
• Situación: Personal
• Tipo de respuesta: Respuesta corta
• Dificultad: 636 (nivel 5) 
• Cubos
• Pregunta 1:
• Idea principal: Espacio y forma
• Competencia matemática: Nivel 1 (Reproducción, definiciones y cálculos)
• Situación: Laboral
• Tipo de respuesta: Respuesta cerrada
• Dificultad: 478 (nivel 2) 
• El tipo de cambio
• Pregunta 1:
• Idea principal: Cantidad
• Competencia matemática: Nivel 1 (Reproducción, definiciones y cálculos)
• Situación: Pública
• Tipo de respuesta: Respuesta corta
• Dificultad: 406 (nivel 1)
• Pregunta 2:
• Idea principal: Cantidad
• Competencia matemática: Reproducción
• Situación: Pública
• Tipo de respuesta: Respuesta corta
• Dificultad: 439 (nivel 2) 
• Pregunta 3:
• Idea principal: Cantidad
• Competencia matemática: Reflexión
• Situación: Pública
• Tipo de respuesta: Respuesta abierta
• Dificultad: 586 (nivel 4) 
• Estanterías
• Pregunta 1:
• Idea principal: Cantidad
• Competencia matemática: Conexiones
• Situación: Laboral
• Tipo de respuesta: Respuesta corta
• Dificultad: 499 (nivel 3) 

Características de la aplicación de la prueba

• Competencia evaluada: Matemáticas
• Curso del alumnado al que se ha aplicado la prueba: 3º ESO
• Número de estudiantes que has realizado la prueba: 4
• Método de selección del alumnado: aleatorio

Comentario/reflexión sobre los resultados obtenidos de tus alumnos en base a los resultados internacionales

Se han obtenido los siguientes resultados:

• Chatear
• Pregunta 1:
• OCDE: 53,7%
• España: 46,0% 
• Mis resultados: 25%
• Pregunta 2:
• OCDE: 28,8%
• España: 21,6%
• Mis resultados: 0%
• Cubos
• Pregunta 1:
• OCDE: 69,0%
• España: 72,5% 
• Mis resultados: 100%
• El tipo de cambio
• Pregunta 1:
• OCDE: 79,7%
• España: 79,0% 
• Mis resultados: 100%
• Pregunta 2:
• OCDE: 73,9%
• España: 72,0% 
• Mis resultados: 100%
• Pregunta 3:
• OCDE: 40,3%
• España: 30,3% 
• Mis resultados: 75%
• Estanterías
• Pregunta 1:
• OCDE: 60,9%
• España: 57,0% 
• Mis resultados: 100%

El número de estudiantes que se ha tomado como muestra es muy pequeño para llegar a conclusiones, pero se observan muy buenos resultados en las preguntas cuya idea principal está basada en cantidades, así como en espacio y forma, mientras que las preguntas de cambio y relaciones han obtenido resultados muy malos.

Sobre su forma de trabajar con este tipo de pruebas

A pesar de estar en unos días muy cercanos a las vacaciones de Navidad, el grupo de estudiantes ha acogido con buena actitud la realización de la prueba.

Facilidad o dificultad de ceñirse a las guías de codificación

La evaluación o codificación de las pruebas ha sido muy rápida y sencilla. Quizá se diferencie el caso de la pregunta con respuesta abierta, a la que hay que dedicar algún instante más en comprobar la respuesta aportada, aunque el número de respuestas correctas que aparecen en los criterios de corrección han sido suficientes.

Elaboración de mi propio estímulo

Estímulo propuesto para alumnado del módulo de Programación del Ciclo Formativo de Grado Superior de Desarrollo de Aplicaciones Web:

Enunciado del estímulo

A partir de la información aparecida en el siguiente artículo aparecido en el periódico El Mundo: 'Gangnam Style' rompe literalmente el contador de visitas de Youtube, responde a las siguientes preguntas:

Preguntas

(Pregunta de elección múltiple)
1. ¿Qué tipo de dato correspondiente a Java habrán utilizado en las bases de datos de Youtube para que se haya "roto" el contador de visitas?

1. float
2. short
3. int
4. long

(Pregunta abierta)

2. Describe el motivo por el que aparece un número de visitas (incluso negativo), pero no es el correcto:

_______________________________________________________________

_______________________________________________________________

_______________________________________________________________

(Pregunta de respuesta construida)

3. Escribe el tipo de dato que usarías para arreglar el problema: __________________

Criterios de codificación

• Pregunta 1:
• Puntuación completa:
• Código 1: int
• Sin puntuación:
• Código 0: Otras respuestas
• Código 9: Sin respuesta
• Pregunta 2:
• Puntuación completa:
• Código 1: Menciona que el tamaño del contador es de 32 bits y el número de visitas excede ese tamaño, por lo que la cantidad real queda truncada, perdiendo el bit más significativo.
• Puntuación parcial:
• Código 2: Menciona que el tamaño del contador es insuficiente para almacenar la cantidad numérica del valor real.
• Sin puntuación:
• Código 0: Otras respuestas
• Código 9: Sin respuesta
• Pregunta 3:
• Puntuación completa:
• Código 1: long
• Sin puntuación:
• Código 0: Otras respuestas
• Código 9: Sin respuesta

Adaptación de estímulos de ítems liberados en estudios PISA y PIRLS

Adaptación de estímulo procedente de prueba PISA para Secundaria correspondiente a Ciencias

• Estímulo original obtenido desde: 
• http://www.mecd.gob.es/dctm/ievaluacion/internacional/ciencias-en-pisa-para-web.pdf?documentId=0901e72b8072f577 (Página 29)

• Estímulo adaptado para alumnado del módulo de Programación del Ciclo Formativo de Grado Superior de Desarrollo de Aplicaciones Web:
• Lee la información del artículo "La luz del día 22 Junio de 2002" y desarrolla una aplicación que permita comprobar si son ciertos los tiempos indicados de luz para ese día en Melbourne y el 22 de diciembre en el Hemisferio Sur de manera que la aplicación realice los cálculos de las diferencias de las horas de salida y puesta del sol en cada caso, mostrando el resultado obtenido en formato horas y minutos.
  Deberá quedar el resultado similar al mostrado en la siguiente imagen:

Adaptación de estímulo procedente de prueba TIMSS para Primaria correspondiente a Ciencias y Matemáticas

• Estímulo original obtenido desde: 
• http://www.mecd.gob.es/dctm/ievaluacion/internacional/ciencias-en-pisa-para-web.pdf?documentId=0901e72b8072f577 (Página 26)

• Estímulo adaptado para alumnado del módulo de Programación del Ciclo Formativo de Grado Superior de Desarrollo de Aplicaciones Web:
• Siguiendo la estructura de la imagen de la prueba, desarrolla una aplicación que permita al usuario seleccionar una de las respuestas ofrecidas, y que la aplicación indique con una ventana emergente si la respuesta es correcta.
  La aplicación deberá ser similar a la mostrada en la siguiente imagen:

Algunos organismos en Twitter dedicados a la evaluación en educación

• @educaINEE: INEE - Instituto Nacional de Evaluación Educativa 
• @EvaluAccion: evaluaccion.es - Agencia Andaluza de Evaluación Educativa
• @OECD_Edu - OCDE Educación
• @TIMSSandPIRLS - TIMSS and PIRLS

Diferencias en el modo en que las fuentes informativas presentan los estudios

Un ejemplo de las diferencias que se pueden encontrar en los medios de comunicación a la hora de tratar los resultados de los informes internacionales respecto a la educación puede ser el siguiente.

En Septiembre de 2014, el periódico El Mundo sacó el siguiente titular que se pudo ser de manera similar en diferentes medios españoles:

Los profesores españoles ganan más que la media de la OCDE 

(El Mundo - 09/09/2014)

El titular parece claro, pero al profundizar en el contenido del estudio se puede observar que el número de horas de dedicación del profesorado en España también es superior a la media de la OCDE y la Unión Europea.

Por tanto, para hacer una comparación más adecuada entre los sueldos habría que tener en cuenta el número de horas trabajadas.

Quizá se podría haber dado un titular como el que el mismo periódico hizo en el año 2011 tratando el mismo tema, con unos datos similares pero ofreciendo un enfoque en el titular muy diferente:

Los docentes españoles dan más horas de clase pero están mejor pagados que en la UE
(El Mundo - 13/09/2011)

Por tanto, es importante revisar el contenido de los estudios y no quedarse simplemente en los titulares de los medios informativos.

Actividad. Infografía con Dibujos Google Drive de manera colaborativa

Realizado con el alumnado de Despliegue de Aplicaciones Web del 2º curso del Ciclo Formativo de Desarrollo de Aplicaciones Web.

Infografía Principales Evaluaciones Internacionales

Presentación para MOOC Preguntas PISA

Con esta entrada os presento mis aportaciones al MOOC Las preguntas de PISA y TIMSS: una práctica para el aula, organizado por el INTEF (Instituto Nacional de Tecnologías Educativas y Formación de Profesorado del Ministerio de Educación, Cultura y Deporte) desde la web de educaLAB.

Imagen extraída de la web de educaLAB

Recogeré esas aportaciones con la misma etiqueta que se usa en Twitter #PreguntasPISA, con idea de usar este blog como portfolio para reflejar otras experiencias. Me servirá como portafolio de evidencias de aprendizaje a lo largo del MOOC.

Imagen de la web www.oecd.org

Será como el cuaderno de clase en el que realizaré parte de las actividades y mostraré mis principales conclusiones y experiencias, además de permitirme relacionarme con otros participantes.

Inicialmente tengo previsto dedicarlo a las evaluaciones en general.

Saludos desde el IES Ntra. Sra. de los Remedios, en Ubrique - Cádiz - España.