viernes, 12 de diciembre de 2014

APLICACIÓN DE UNA PRUEBA

PRUEBA DE ITEMS LIBERADOS PARA ALUMNOS DE 4º ESO. MATEMÁTICAS OPCION B


En este documento realizamos una prueba de items liberados para alumnos que cursan en estos momentos 4º ESO en el instituto I.E.S. Montserrat Roig de Elche . La materia elegida ha sido matemáticas. Los items han sido elegidos de entre los items liberados de PISA que figuran en la web del INEE y en absoluto han sido modificados. Se han elegido los siguientes items relacionados con el curriculum de secundaria que se imparte actualmente en la C.V. :
Estímulo . item
Curriculo
Curso
Chatear . item nº 1
Medida del tiempo
2º, 3º, 4º
Concierto rock. Item nº 2
Cantidades aproximadas
Reproductor MP3. Item nº 3
Estimacion cantidades
Alquiler DVD. Item nº 4
Ecuaciones
3º 4º

Hemos elegido estos estímulos porque son aquellos con los que actualmente el alumno está familiarizado y está trabajando en clase en la materia de matemáticas B de 4º ESO. El alumno ha trabajado con números racionales, irracionales y reales. Ha experimentado con estimaciones, valores absolutos y relativos, así como redondeo y aproximación. También se han estudiado las ecuaciones de 1º y 2º grado , así como las irracionales, los sistemas de ecuaciones y las inecuaciones y una introducción a gráficas de funciones, en especial funciones lineales y afines que se han estudiado antes en 3º ESO.

El tiempo estimado es de una hora de duración.
La prueba no ha sido pactada con los alumnos, sino que se les comentó que se haría un control de matemáticas con problemas que se proponían en pruebas de evaluación externas y que sería diferente del típico examen al que estaban acostumbrados.
El control se ha realizado el día 9 de diciembre de 2014.
La corrección del control se realizó el día 10 de diciembre. Los datos fueron recogidos ese mismo día y analizados y codificados según PISA. Los alumnos también analizaron las respuestas que realizaron en el examen.
El examen propuesto consta de cuatro  preguntas que fueron transcritas literalmente como están en las pruebas PISA:























CODIFICACIONES :

CHATEAR:
CARACTERÍSTICAS DE LA PREGUNTA 1
Idea principal: Cambio y relaciones
Competencia matemática: Conexiones
Situación: Personal
Tipo de respuesta: Respuesta corta
Dificultad: 533 (nivel 3)
Porcentaje de aciertos:
• OCDE: .............. 53,7%
• España: ............ 46,0%
CARACTERÍSTICAS DE LA PREGUNTA 2
Idea principal: Cambio y relaciones
Competencia matemática: Reflexión
Situación: Personal
Tipo de respuesta: Respuesta corta
Dificultad: 636 (nivel 5)
Porcentaje de aciertos:
• OCDE: .............. 28,8%
• España: ............ 21,6%

CONCIERTO DE ROCK
CARACTERÍSTICAS DE LA PREGUNTA
Intención: Explorar si el alumno sabe estimar cantidades.
Idea principal: Cantidad.
Competencia matemática: Nivel 2 (Conexiones e integración para resolver problemas).
Situación: Pública.
Tipo de respuesta: Elección múltiple.

REPRODUCTORES MP3
CARACTERÍSTICAS DE LA PREGUNTA 2
Descripción: Identificar la causa de un error, en una suma, cometido al
introducir en una calculadora los datos correspondientes a tres cantidades
Área de contenido matemático: Cantidad
Contexto: Personal
Proceso: Emplear

CARACTERÍSTICAS DE LA PREGUNTA 3
Descripción: Indicar si una determinada cantidad de dinero será suficiente
para adquirir una serie de artículos a los que se ha aplicado un tanto por
ciento de descuento
Área de contenido matemático: Cantidad
Contexto: Personal
Proceso: Interpretar

CARACTERÍSTICAS DE LA PREGUNTA 4
Descripción: Determinar qué formula algebraica relaciona correctamente dos
variables monetarias cuando una incluye un margen de beneficio fijo
expresado en porcentaje
Área de contenido matemático: Cambio y relaciones
Contexto: Profesional
Proceso: Formular


ALQUILER DE DVD
CARACTERÍSTICAS DE LA PREGUNTA 1
Descripción: Calcular y comparar totales en un situación cotidiana
Área de contenido matemático: Cantidad
Contexto: Personal
Proceso: Emplear


CARACTERÍSTICAS DE LA PREGUNTA 2
Descripción: Calcular y comparar totales en una situación cotidiana
Área de contenido matemático: Cantidad
Contexto: Personal
Proceso: Formula

RESULTADOS Y ESTADISTICAS.

La información de estos items liberados no es completa, ya que en 3 de ellos faltan los resultados de los alumnos que realizaron dicha prueba. Quizá es que la pregunta elegida no ha sido propuesta en ninguna prueba o no se ha pasado dicha información a la web. No obstante , los resultados son los que aparecen en esta tabla.
PREGUNTA
CODIFICACIÓN
Nº ALUMNOS
%
% OCDE/ESPAÑA
CHATEAR




Pregunta 1
C1
13
81,25%
53,7%   /   46%

C0
3


Pregunta 2
C1
8
50%
28,8 %  / 21,6%

C0
8


CONCIERTO DE ROCK




Pregunta 1
C1
2
12,5%


C0
14


REPRODUCTORES
MP3




Pregunta 2
C1
14
87,5%


C0
2


Pregunta 3
C1
10
62,5%


C0
4



C9
2


Pregunta 4
C1
10
62,5%


C0
6


ALQUILER DVD




Pregunta 1
C1
10
62,5%


C0
6


Pregunta 2
C21
1
6,25 %


C22
4
25 %


C23
8
50 %



REFLEXION SOBRE LOS RESULTADOS DE LA PRUEBA

Tras la prueba y los resultados, los alumnos opinaron sobre la prueba con comentarios del estilo:
-pensaba que era mas dificil
-habia que pensar bastante
-se parece a la prueba diagnostica! ( referida a la prueba de 2º ESO que se desarrolla en la comunidad valenciana)
-nos cuesta razonar!
-no es un examen mecánico.!
Lo cierto es que los resultados , salvo la pregunta del concierto de Rock que fue contestada al primer impulso por los alumnos sin ni siquiera pensar que se les preguntaba,  genera una cantidad de cuestiones y reflexiones  sobre el sistema educativo, sobre la evaluacion, y sobre capacidades y competencias básicas. Normalmente se busca en 4 º de ESO una comprensión y una mecanización de muchos conceptos para terminar de aplicarlos en problemas de la vida real , y los alumnos suelen tener claro que tras una parte conceptual y procedimental estricta se puede aplicar lo aprendido a algunos problemas reales. Lo que no esperaban es que la prueba fuera enteramente con estímulos y por tanto fue la primera sorpresa al hacerles  la prueba.
Con respecto a los resultados, en la primera pregunta sobre la que tenemos la puntuación obtenida en los paises de la OCDE y España, se puede ver que se ha superado la puntuación esperada. Sin embargo en el segundo item, solo ha sido superado por dos alumnos. Lo que lleva a cuestionarse bastante algunos razonamientos de los alumnos, que nos hace plantearnos cuestiones competenciales lectoras y su aplicación en matemáticas. Esta competencia lectora es imprescindible claramente en la materia de matemáticas. 
Los demás resultados son bastante aceptables.
La codificación ha sido bastante interesante con una forma diferente de corrección y la dificultad que entraña las formas de codificación de PISA. No obstante el sistema es interesante para la codificación de problemas prácticos o el uso de respuestas múltiples en problemas de planteamiento.
Los alumnos tuvieron tiempo suficiente en una hora para realizar dicha prueba.
Los alumnos al final de la prueba y conocer resultados han comentado que les gustaria que les hiciera más pruebas como la que hemos realizado.

Notas:
-Una de las preguntas , en particular  REPRODUCTORES DE DVD empieza el item con la pregunta 2.
-las correcciones y codificaciones se pueden encontrar en http://recursostic.educacion.es/inee/pisa/matematicas/aritmetica.htm  que se accede a través del INEE.















domingo, 7 de diciembre de 2014

Charla #preguntas PISA Procesos de evaluación



Se ha hecho una charla en directo con los expertos PISA del INEE y del INTEF .
Interesante sería decir poco para lo que se ha comentado. Por supuesto que hubieran podido estar horas comentando las diferentes preguntas que les hemos enviado y las evaluaciones externas como funcionan, pero en líneas generales ha sido un resumen humano , instructivo y didáctico.
Me ha enseñado tantas cosas que seguramente estaré mucho tiempo intentando aplicar los conocimientos que he adquirido para descubrir toda la problemática de la evaluación y como se podría mejorar en este tema. Y sobre todo cambiar el punto de vista de la evaluación. Como decía David “el Mooc deberían haberlo hecho claustros enteros” : las respuestas de los expertos, el trabajo que requiere el relacionar los ítems, el porqué en cada pais hay un número diferente de participantes, por qué participan una u otra comunidad autónoma, comparación entre comunidades, entre países, la búsqueda de resultados significativos, etc. etc.
Ha habido aclaraciones muy interesantes sobre algunos temas que todos los participantes del Mooc hemos preguntado

La dirección de la charla que recomiendo por todos los motivos aducidos anteriormente es https://www.youtube.com/watch?v=7s8_CLEPv5k


La evaluación de nuestro alumnado y las comparaciones con los demás paises para buscar todas las mejoras que podamos es más que motivo suficiente para que lo veaís, lo analiceis y lo disfruteis como yo. Os lo recomiendo!!!