Actividad 5. Aplicacion de una prueba

1. Propuesta de prueba de evaluación

1. Edad: 13-14 años (5 alumnos de 2ºESO del I.E.S. Lanjarón)
2. Competencia matematica
3. Materia relacionada: Matemáticas (2ºESO)
4. Tiempo: 1 hora
5. Contenido curricular a trabajar:
6. Espacio y forma (Cubos, PISA 2003),
7. Cantidad (El tipo de cambio, PISA 2003),
8. Incertidumbre (Exportaciones, PISA 2003)

Cambio y relaciones (Zapatos para niños, PISA 2003)

2. Selección de las unidades de evaluación y los ítems vinculados

Al trabajar con alumnado de 2º ESO (cuya edad no es a la que están destinadas las pruebas PISA) , he intentado seleccionar aquellas unidades de estímulo-ítem-guía de codificación, que pueden estar más cercanas a dichas edades.

He incluido preguntas de distintos tipos de respuestas: preguntas de elección múltiple, preguntas abiertas de respuesta larga, y respuestas cerradas (única solución)

3. Descripción de los resultados obtenidos

Se han obtenido los siguientes resultados:

	CUBOS	EL TIPO DE CAMBIO			ZAPATOS PARA NIÑOS	EXPORTACIONES
nº de pregunta en PISA 2003	3	11	12	13	24	14	15
nº alumnos con respuesta correcta	4	3	5	0	4	4	4
% aciertos del grupo	80%	60%	100%	0%	80%	80%	80%
% Aciertos OCDE	68%	79’7%	73,9%	40,3%	No hay datos	78,7%	48,3%
% aciertos España	72,5%	79%	72%	30,3%	No hay datos	82,6%	41,9%

La valoración global es muy positiva, pues se obtiene un buen nivel del grupo .

La preguntas de en la que tenían que responder argumentando la han tenido todos mal, no por lo forma de argumentar, sino porque no han comprendido realmente lo que le estaban preguntando, y pienso que es debido a la falta de madurez de la muestra de alumnos.

A continuación os dejo la prueba y la guia de codificación:

Actividad 2. Unidad 5 Una charla sobre PISA

El día 3 de diciembre de 2014,se celebró una charla virtual sobre las evaluaciones internacionales referentes al MOOC “Las preguntas de PISA y TIMSS: una práctica para el aula“ en la que  se contestaban consultas referentes a estos estudios que se hicieron a través de la red.

Tras una hora de interesante charla quedó claro como se seleccionan la muestra de alumnado al que se le va a pasar la prueba, el porqué es importante que el alumnado se acostumbre a trabajar en el aula con este tipo de pruebas, como tendría que ser la metodología a llevar a ellas  para que el aumnado se enfrente a estas pruebas con exito, como influye el ISC de los alumnos/as y sus familias ,  etc...

Especialmente me llamaron la atención varios aspectos comentados en esta charla:

• En PISA (recordemos, alumnado 4º de ESO) gracias al estudio de los cuestionarios de contexto se extrae, por ejemplo, que en Matemáticas (área que me afecta directamente) las niñas son más perseverantes pero sacan peores resultados, debido a la ansiedad que se muestra mas en las chicas que en los chicos.
• Existe correlación entre el ISC del alumnado y los resultados de la prueba (actitudes hacia la cultura y educación de la familia)
• Para las pruebas PISA, en España se estratifica por Comunidades Autónomas  despues por centros públicos y centros privados y/o concertados.
• En PISA 2015 se necesitarán 42 alumnos de un mismo centro (y aproximadamente 150 centros o mas debido a la ampliación de muestra de las CCAA), los cuales se eligen: se meten en un programa que de forma aleatoria seleccionara entre el alumando que cumple 15 años en el año de la prueba; mientras que en TIMSS se seleccionan clases enteras de un mismo centro.
• EN PISA 2015 todas las pruebas se harán con ordenador.

Puedes ver la charla aquí:

Actividad 4. Unidad 4. Construyo mi propio item

Elaboración de Propuesta de Item y su guía de codificación.

Grupo de alumnos: 2º de ESO

Competencia matemática

Estímulo:

Desde que Ana llegó a casa desde el colegio quiere ayudar a su padre que está diseñando y arreglando su jardín. Por ello, y cuando su padre pierde las anotaciones que hizo para vallar el espacio destinado al huerto rectangular, ella se ofrece para calcularlas.

Pregunta 1: Su padre le he dicho que ha comprado 30m de alambrada y tambien recuerda que el largo del huerto es doble que el ancho. ¿Sabrías indicarle a Ana cuales son las dimensiones del huerto?

Elige la respuesta correcta:

1. Ancho: 5m     Largo: 10m
2. Ancho: 10m   Largo: 5m
3. Ancho: 7,5 m Largo: 7,5m
4. Ancho: 2m     Largo: 13m

Guía de codificación:

Código	Puntuación	Interpretación
20	2 puntos (Máxima puntuación)	Ancho: 5m Largo:10m Posible desarrollo de la respuesta: Con el estímulo gráfico el alumno ha planteado la ecuación: 2x+2x+x+x=30
10	1 punto (respuesta parcial)	Ancho: 10m Largo:5m Aunque las medidas son correctas, no están bien asociadas a sus magnitudes. El alumno no ha interpretado bien el enunciado del problema.
00	0 puntos	Cualquier otro resultado
99	0 puntos	Sin respuesta. No señala nada

Pregunta 2: Si la alambrada vale a 0,52€ el metro, ¿cuánto pagó el padre de Ana por todo?

Solución:............€

Guía de codificación:

Código	Puntuación	Interpretación
10	1 punto (Máxima puntuación)	15,6€. La solución la ha obtenido realizando la operación: 0,52*30= 15,6€ (unidades ya dadas en la solución)
00	0 puntos	Cualquier otro resultado.
99	0 puntos	Sin respuesta

Pregunta 3: Si el padre de Ana entregó para pagar 20€ y le devolvieron 4,60€. ¿Fue correcta la devolución? Justifica la respuesta.

Guía de codificación:

Código	Puntuación	Interpretación
20	2 puntos (Máxima puntuación)	Posible respuesta: "NO, porque le devolvieron 20 céntimos de más". "NO, porque le devolvieron 0,2€ de más"
10	1 punto (respuesta parcial)	Posible respuesta: "NO" y no justifica la respuesta "NO, porque le dieron de más" "NO, porque eso no era lo que le tenian que haber devuelto"
00	0 puntos	SI
99	0 puntos	Sin respuesta. No señala nada

Actividad 3. Unidad 4 ¿Qué preguntas utilizo?

Como ya conocéis de otros post, mi área es Matemáticas.

Básicamente utilizo preguntas en las que mi alumnado tiene que elaborar la respuesta.  Normalmente son problemas en los que primo los desarrollos y no únicamente el resultado final. 

Algunas veces he utilizado preguntas de respuesta cerrada múltiple en los que suelo incluir las respuestas falsas que preveo que pueden aparecer, por ejemplo, imagino el uso incorrecto de signos delante de paréntesis, o la eliminación incorrecta de denominadores, e incluyo esas respuestas en las posibles a elegir.

Siempre evito  preguntas de respuestas cerradas alternativas simple (pienso que mis alumnos utilizan mucho el azar frente a ellas y creo que son pocos los que se detienen a elegir correctamente.

Unidad 4. Actividad1 ¿Cómo corrijo?

Me planto la siguiente cuestión: ¿Cómo soy corrigiendo?

Pues tras una larga reflexión y tras pensar en mi materia, Matemáticas, me considero justa: intento poner preguntas que previamente he resuelto y analizado los posibles errores que se pueden cometer.

Además, siempre tengo una plantilla de corrección incluyendo la puntuación de cada aspecto o apartado. Con ello consigo no solo tener el mismo criterio para todo el mundo, sino que mi alumnado puede conocer en el momento de la prueba la gradación de cada apartado.

Además incluyo preguntas que puedan resolver con éxito la gran mayoría del grupo e incluyo preguntas de mayor dificultad para que puedan ir desarrollando aquellos alumnos que estén mas avanzados.

Para evitar cualquier tipo de subjetividad, que pienso que como personas humanas podemos tener, evito el conocer el nombre del alumno/a al que le estoy corrigiendo el examen.

Además, soy bastante estricta tanto a la hora del desarrollo matemático de los ejercicios, como en la redacción de las respuestas y en el uso del lenguaje y las faltas de ortografía.

Actividad 4. Adaptamos los estímulos de dos ítems liberados

MATEMÁTICAS

Actualmente imparto clase en 2º ESO, y me encuentro en el tema de los números decimales, por ello que he cogido estos dos estímulos (aunque en TIMSS no se llaman así)

TIMSS 2011 (2º ESO) Dominio de contenido: Números

42,65 + 5,748 =

Respuesta: _____________

Análisis: Pregunta sin enunciado. Debido a la edad a la que va destinada la prueba es innecesario debido a que ya saben que se les pide ante este tipo de ejercicios.

TIMSS 2007 (4º Primaria) Dominio de contenido: Números

Resta:

5.3 − 3.8

Respuesta: _______________

Análisis: Pregunta con enunciado. En esta edad, aunque aparece el signo de la operación, es conveniente indicarle explícitamente que esperamos que haga en el ejercicio. Los números decimales que aparecen tienen las mismas cifras en la parte decimal, con lo que la dificultad de ejercicio es baja.

Adaptación a mi grupo de alumnos: Personalmente dotaría de un escenario (una situación de la vida real) al ejercicio para que pudieran demostrar no sólo como se opera con números decimales, sino que saben reconocer qué operación de números decimales tienen que aplicar.

Adaptación a:

• Matemáticas de 2º ESO (alumnos de 13 años).
• Contenido curricular a trabajar: Operaciones con números decimales.

Para hacer el contenido más próximo al alumnado podríamos presentarlo con las siguientes situaciones:

1ª forma (fuente: genmagic.net) Utilizamos un lenguaje visual

2ª forma:  Mediante un enunciado de una situación-problema de la vida cotidiana:

“ Durante el primer trimestre el profesor de matemáticas se encargará de comprar material escolar para su uso en clase. En una primera compra de material se gastó 6,69€. A mediados del trimestre necesitó realizar una segunda compra para realizar un trabajo sobre poliedros y se gastó 15,68€. ¿Qué cantidad gastó en total al terminar el primer trimestre?

Esta es mi propuesta.

Comparando dos textos de diferentes pruebas internacionales

PISA y PIRLS evalúan la comprensión lectora a distintas edades. Os muestro una valoración sobre alguna diferencia significativa de ambos basándome en dos textos que han formado parte de esas pruebas:


“Los ratones patas arriba” (PIRLS 2001)

Texto literario ilustrado con imágenes y con un lenguaje asequible y adecuado al desarrollo de los niños de 4º curso de EP. Las preguntas que se hacen a continuación son de tipo literales, inferenciales y valorativas. Las preguntas responden a los siguientes dos grandes procesos:

• Obtención de información y realización de inferencias directas
• Interpretación, integración y evaluación.

Las preguntas están redactadas de manera clara y concisa y las opciones de respuesta también están redactadas de manera sucinta con el fin de minimizar la carga lectora de la pregunta.


“Un juez justo” (PISA).

Texto literario sin ilustraciones y con lenguaje más formal que el anterior. De nuevo tiene las tres tipos de preguntas. Las preguntas responden a los siguientes 5 procesos:

• obtención de la información,

• comprensión general,

• elaboración de una interpretación,

• reflexión y valoración del contenido de un texto,

• reflexión y valoración de la forma de un texto.

Las opciones de respuesta están redactadas de manera más elaborada

Items liberados ¿los conoces?

Tras la realización de los estudios PISA, TIMSS y PIRLS los diferentes organismos ponen a disposición de todo el mundo diferentes preguntas para que se puedan utilizar en la práctica educativa. Estas pruebas las podemos encontrar en la propia página del INEE

¿y para qué las uso? Su utilidad es básica si queremos conocer no sólo qué conocimientos tiene nuestro alumnado, sino cómo utilizan dichos conocimientos. 

En mi caso nos centraremos en Matemáticas y Resolución de problemas de PISA:

http://www.mecd.gob.es/dctm/inee/internacional/pisa2012-resolucionproblemas/preguntasliberadasmatematicasweb.pdf?documentId=0901e72b81936c1a

y preguntas liberadas de TIMSS:

http://www.mecd.gob.es/dctm/inee/recursos/pdf-web.-timss-2011-preguntasmatematicas.pdf?documentId=0901e72b81b12ae2

Las pruebas PISA a partir de 2015 serán todos en soporte digital, y como muestra podemos visitar el siguiente enlace en el que podemos verlas en dicho soporte. 

http://erasq.acer.edu.au/index.php?cmd=toMaths

En concreto os dejo el enlace de la pregunta "Calculadora de gastos de coche": http://erasq.acer.edu.au/index.php?cmd=cbaItemPreview&unitVersionId=141

Y cuando aparece un nuevo informe PISA ¿dónde me informo de todo? Actividad 2 Unidad2

Por los medios de comunicación me entero de que acaba de aparecer un nuevo informe PISA, ¿te suena esta situación?

y ahora, ¿donde me puedo informar yo sin que las conclusiones esten bajo una determinada línea editorial de un medio de comunicación?


A partir de ese momento me he puesto a bucear por la red para encontrar más información: desde el INEE hasta el ultimo blog relativo al tema, y por supuesto a través de las personas que sigo de Twitter, que indican diferentes enlaces a los que yo seguramente no habría llegado solo con mi búsqueda.  además que estas al corriente de las novedades en informes e investigaciones casi que en tiempo real. Te recomiendo @educaINEE , @educaINTEF, @educaCNIIE, etc.

Sin embargo hay un sitio donde encuentras de todo: la web del INEE

• ¿Sabías que en la web del INEE existen boletines de 4 páginas que muestran de forma muy gráfica y breve la información de estos estudios?
• ¿Sabías que la OCDE realiza también este tipo de documentos breves y que puedes encontrarlos en la web del INEE traducidos al español?
• ¿Sabías que hay un programa de visitas en el INEE, por si te interesan estos temas?
• ¿Sabías que las bases de datos de todos estos estudios se encuentran liberadas y puedes acceder a través de la web para obtener tus propias conclusiones?
• ¿Sabías que en el canal Slideshare del INEE puedes encontrar las presentaciones de todas las conferencias y congresos en los que el INEE participa?
• ¿Sabías que en el canal YouTube del INEE puedes encontrar vídeos sobre diversas evaluaciones y con análisis desde distintos puntos de vista y enfoques?

La próxima vez que salga un informe PISA (2015) ya sabremos donde informarnos y extraer nuestras propias conclusiones

¿Sabias que...

Sabes que TIMSS Advanced en 2º de bach, se centra en matemáticas avanzadas-física y España participará en 2015 por 1ª vez?

#preguntasPISA 

¿Por qué este blog?

Estamos tan acostumbrados a que cuando se habla de pruebas internacionales se nos venga a la cabeza PISA, pero..... ¿ cómo le afecta esto a nuestra práctica educativa? ¿ las pruebas internacionales me afectan a mi profesora de matemáticas de Secundaria?  ¿Sabías que existen mas pruebas internacionales a parte de ésta?

Este blog no solo pretenderme darme respuestas a estas preguntas y a otras que me planteo sobre esta etapa, sino que servirá como portafolio de evidencias de aprendizaje del curso MOOC de educaLAB.

Para empezar os dejo a continuación un resumen con las diferentes pruebas internacionales con las que nos vamos a familiarizar durante este curso:

• PISA

El Informe del Programa Internacional para la Evaluación de Estudiantes o Informe PISA se basa en el análisis del rendimiento de estudiantes a partir de unos exámenes que se realizan cada tres años en varios países con el fin de determinar la valoración internacional de los alumnos. Este informe es llevado a cabo por la OCDE, que se encarga de la realización de pruebas estandarizadas a estudiantes de 15 años. Revisa las tres áreas de: competencia de lectura, matemáticas y ciencias.

• PIRLS, 

Informe que se centra en evaluar el rendimiento en comprensión lectora, valorando

los propósitos y los procesos de comprensión de la misma, así como los hábitos y actitudes ante la

lectura en alumnos de cuarto curso de Educación Primaria. Está promovido por la Asociación Internacional para la Evaluación del Rendimiento Educativo (IEA)

• TIMSS

Examina el rendimiento en matemáticas y ciencias valorando tanto la dimensión de contenido en estas dos áreas como la dimensión cognitiva en alumnado de 4º de primaria. Lo lleva a cabo IEA

• TALIS 

Estudio Internacional sobre la Enseñanza y el Aprendizaje, es un estudio promovido por la OCDE a gran escala que se centra en las prácticas de enseñanza y aprendizaje que tienen lugar en los centros educativos.

• TIMSS Advanced

TIMSS Advanced es una variante de TIMSS para  2º de bachillerato en España, se centra en matemáticas avanzadas y física. España participa por primera vez en este estudio en 2015.

• EECL

El EECL (o ESLC en inglés), es un estudio promovido por la Unión Europea, cuya finalidad es proporcionar a los Estados miembros información comparable sobre las competencias lingüísticas en lenguas extranjeras de los alumnos europeos al finalizar la Educación Secundaria Obligatoria (en nuestro país, alumnos de 4º de ESO). En España se evaluaron inglés y francés como lenguas extranjeras.

• PIAAC

Este estudio promovido por la OCDE mide las competencias de la población adulta de 16 a 65 años. 

• TEDS-M

TEDS-M de la IEA ha sido el primer estudio internacional comparativo sobre el conocimiento adquirido por los futuros profesores de matemáticas en Educación Primaria y Secundaria Obligatoria al acabar su formación inicial.