dilluns, 14 de juliol del 2014

Una experiencia retroalimentada: el feedback

Tal y como afirma López Barajas (2004, 255) "en sus notas de campo, el pedagogo-investigador no sólo anota lo que hay en la realidad educativa sino que refleja los sentimientos de los protagonistas sociales, las significaciones e intencionalidades que adivina en ellos, y el grado de compromiso con el que observa".
Las siguientes lineas tratan de analizar una experiencia como el feedback des del punto de vista del profesor en cuanto al provecho que sus estudiantes le sacan, porqué muchas veces estos tan siquiera le dan un uso o lo entienden (Gibbs & Simpson 2004).

Esta entrada pretende presentar la experiencia de la retroacción de una de la evidencias de evaluación integradas en la asignatura de Teoría y Práctica de la Investigación Educativa, asignatura del grado de Pedagogía que se imparte en el segundo semestre del primer año de esta misma titulación.

La actividad propuesta trata de la realización del diseño de la investigación sobre un tema que los propios estudiantes escogen; a partir del cual realizan una búsqueda documental que les permite realizar un marco teórico para su proyecto y conocer las herramientas (artículos científicos, bases de datos y gestores de referencias) a nivel educativo para una correcta realización. A partir de aquí el proyecto se estructura en tres fases: en la primera los alumnos tratan de identificar el tema y su concreción junto con la redacción de preguntas de investigación y objetivos que guiarán el proyecto; en segundo lugar realizan el apartado metodológico del diseño; y finalmente, elaboran lo que serán los análisis de los datos y las conclusiones y lineas prospectivas que se pueden llevar a cabo con posterioridad.

En cuanto al feedback, este se realiza a través de rubricas utilizadas como criterios de evaluación. Estas, consensuadas por el equipo docente, permiten establecer que es lo que se les pide a los estudiantes en cada uno de los apartados de su proyecto, para que la evaluación sea igual para todo el mundo, sin que existan errores no aleatorios que sesguen sus resultados. La experiencia muestra como los alumnos muestran una mayor predisposición al uso de las rubricas como guión para ver si les falta algún punto en sus trabajos. La retroacción que se produce con ellos es más completa en tanto que junto con la puntuación en cada apartado de la rubrica (donde puede ver que es lo que le falta en esa parte del trabajo), se acompaña de una explicación personalizada de aquello que le permita maximizar su aprendizaje.


Las valoraciones que se hacen de esta herramienta son positivas. Los estudiantes pueden manejar los criterios de evaluación como un aprendizaje, es decir concebimos la evaluación como y para el aprendizaje. Si bien es cierto que en las primeras etapas no son conscientes de la herramienta que les facilitamos, a medida que avanzan en su proyecto se dan cuenta de la utilidad que tiene.
Otro factor que influye en la comprensión de las rubricas es su correcta presentación a sus usuarios, los estudiantes. Si ella, muchas veces se encuentran como delante de una tabla llena de números la cual deben interpretar. 

Cabe tener en cuenta, que sin el seguimiento por parte de los docentes, día a día en el aula o mediante correo, este tipo de retroacción tampoco permitiría un aprendizaje para los estudiantes.


- López, E. (2004). La observación participante. Metodología y crítica. Bordón, 56 (2), 253-273.
- Gibbs, G. and Simpson, C. (2004) Conditions under which assessment supports students' learning. Learning and Teaching in Higher Education 1, no. 1: 1-31.

divendres, 11 de juliol del 2014

¿PISA como instrumento de evaluación educativa o económica?

Des de sus inicios PISA se ha visto como un instrumento controvertido, pero en los últimos años esta controversia ha llevado a fuertes críticas por parte de algunos expertos como demuestra la carta publicada en el periódico inglés The Guardian con el título OECD and PISA test are damaging education worldwide (la OCDE y PISA están dañando la educación en todo el mundo); ésta, muestra la desafección de una gran parte de la comunidad educativa internacional que ve en la hegemonía instrumental de PISA como modelo de evaluación, un agravante tanto a nivel educativo como político.

La OCDE mira es la Organización garante del desarrollo económico de las grandes economías de mercado, ¿debemos cuestionarnos el modelo de calidad educativa que buscará una organización como la mencionada? Desde el inicio de las pruebas en el año 2000 el número de países participantes no ha dejado de aumentar, además de focalizar una atención mediática que siempre pone los resultados en la agenda política de los países participantes. En múltiples ocasiones los ránquines y su evolución han provocado un fuerte impacto entre la clase política, especialmente preocupada por el impacto que pueden tener los resultados y de quedar bien; unos buenos resultados siempre suponen auto-elogios a la tarea desarrollada y las decisiones tomadas, mientras que si estos son negativos no se duda en externalizarlos y se achacan a “cambios demográficos” (como eufemismo a un aumento de la inmigración) o al legado político (en el caso español a la LOGSE) como fuente de todo mal, u otros recursos en los que se trata de escurrir el bulto.

Si nos centramos en el instrumento que la OCDE utiliza para evaluar las competencias educativas, podemos observar como la homogeneización de los ítems nos lleva a una descontextualización de la prueba. Suele argumentarse que PISA es un instrumento riguroso que hace realmente comparables los resultados entre países en tanto que estandarización a escala internacional. Pero es válida esta comparación, es decir, todos los estudiantes de los distintos países que se presentan acceden a la educación de la misma manera, se tienen realmente en cuenta los distintos contextos sociales y culturales en los que el niño se desarrolla.

El resultado más o menos positivo, puede producir grandes desajustes en un sistema educativo ya de por si maltrecho debido a los múltiples cambios que padecen la mayoría de los gobiernos por enfrentamientos de carácter ideológico o económico. Es decir, los informes que la OCDE presenta respecto al panorama educativo internacional en el marco de las competencias que pretende evaluar produce un impacto sobre los gobiernos y sus políticas educativas.


Enlaces de interés:



OECD, (2011). How Do SomeStudentsOvercomeTheirSocio-EconomicBackground? OECD Publishing, 5, 4

Elosua, P. (2013). Diferencias individuales y autonómicas en el estatus socioeconómico y cultural como predictores en PISA 2009. Revista de educación, 361, 646-664.




dimecres, 2 de juliol del 2014

La evaluación de las competencias transversales a través del Portafolio Digital

Introducción

La primera entrada a este blog, tratará de explicar una investigación que se llevó a cabo con los estudiantes de Teoría y Práctica de la Investigación Educativa (en adelante TPIE). Esta asignatura corresponde al segundo semestre de primero del grado de Pedagogía, y constituye la primera de las materias de un recorrido metodológico del plan de estudios del grado en cuestión. La metodología de trabajo consiste en integrar estrategias que favorezcan el desarrollo de las competencias propuestas y que permitan al estudiante auto-gestionar su proceso de aprendizaje, utilizando el portafolio como ayuda fundamental para esto. 

Centrándonos en el uso del portafolio, estos tienen una serie de ventajas, siendo la principal el hecho de tener que objetivar las evidencias de aprendizaje. Este proceso requiere de una serie de pasos que comportan necesariamente una reflexión y valoración sobre el interés y adecuación de los documentos o evidencias seleccionadas, e inicia mecanismos de gran importancia cognitiva (Rodríguez Illera, 2009), como son: 
        a) La capacidad de reunir y de seleccionar los documentos más adecuados; 
        b) La reflexión sobre los mismos; 
        c) La justificación de su relevancia por el propósito del portafolio; 
        d) La responsabilidad del que se muestra como evidencia; 
        e) La posibilidad de dialogar sobre las evidencias y, 
        f) Discutir sobre su adecuación y mejora.
El sistema de portafolios como instrumento de evaluación alternativa nos permite, por un lado el aprovechamiento de las TIC, además del carácter orientado a la evaluación continuada y a la mejora de las competencias transversales. En este caso analizamos dos competencias transversales que se especifican en las titulaciones de la Universidad de Barcelona: 
      1) Capacidad de aprendizaje y responsabilidad (capacidad de análisis y síntesis, de visiones globales y de aplicación de los conocimientos a la práctica / capacidad de tomar decisiones y de adaptación a nuevas situaciones).
        2) Capacidad comunicativa (capacidad de comprender y expresarse oralmente y por escrito en catalán, castellano y en una tercera lengua, con dominio del lenguaje especializado / capacidad de buscar e integrar la información). 

Método

La metodología de trabajo implementada consiste en integrar estrategias que favorezcan el desarrollo de las competencias propuestas y que permitan al estudiante auto-gestionar su proceso de aprendizaje, utilizando el portafolio como ayuda fundamental para esto.
Se ha propuesto a los alumnos dos actividades individuales, para el desarrollo y posterior evaluación de las dos competencias transversales ya presentadas:
  • -   Actividad 1, de Análisis documental, tiene por objetivo el desarrollo de la capacidad de búsqueda documental en catálogos de biblioteca y bases de datos, así como la valoración de las opciones y la calidad de la información encontrada. La competencia transversal asociada a la actividad es la de toma de decisiones.
  • -    La actividad 2, de Análisis de un artículo de investigación, pretende que se desarrolle la capacidad de reconocer los elementos básicos del proceso de investigación en el ámbito educativo, desde una perspectiva crítica. La capacidad comunicativa escrita relacionada con la investigación es la competencia transversal asociada a esta actividad.

La competencia transversal de toma de decisiones fue evaluada por medio de una rúbrica consensuada por el equipo del PID y presentada a continuación (Tabla 1), con dos indicadores de evaluación para la Actividad 1.


Toma de decisiones
Indicadores/categorías
0
(inaceptable)
1
(deficiente)
2
(bueno)
3
(muy bueno)
Información
No tiene la información y no la busca.
Cree que tiene la información y por tanto no la busca.
No tiene la información, pero la busca de forma pobre o inapropiada.
Tiene la información y si no la tiene la busca adecuadamente.
Valoración de las opciones
No hay contraste;
Utiliza algunos criterios poco adecuados para contrastar;
Utiliza algunos criterios válidos para contrastar;
Utilita varios criterios válidos para contrastar;
Desecha las opciones sin argumentos.
Los argumentos para desechar las opciones son pobres.
Los argumentos para desechar las opciones son buenos.
Los argumentos para desechar las opciones son buenos y razonados.
El sistema de rubricas, nos permite realizar una evaluación más detallada además de permitir un feedback con el estudiante. Como veremos en otras entradas en el que se tratará a las rubricas como intrumento de evaluación y retroalimentación con los estudiantes. 

Referències

ANPE-COPEC (2005). Perfil Professional del Pedagog, documento unitario sobre el perfil profesional del pedagogo, firmado el 12/11/2005.
González, J. iWagenaar (2003).Tuning Educational Structures in Europe.Informe final. Fase 1. Bilbao: Universidad de Deusto.
Rodríguez Gascons, R. (2010). La definició de competències del Pedagog/a. Educació i xarxa: La revista del Col•legi de Pedagogs de Cataluny, n. 4, 35-37. Disponible en internet http://www.pedagogs.cat/doc/COPEC-Eix-4.pdf.