Compartimos  informe de la evaluación común de las iniciativas miembros de Red PAL con los resultados globales en Aritmética.
2020_ICAN-Tool_Brochure_EN

La experiencia vivida en la Evaluación Común Internacional en Matemáticas (ICAN por sus siglas en inglés) en Nicaragua, específicamente en la visita a casi 1200 hogares de 60 comunidades rurales del Municipio de Matagalpa, fue muy peculiar. La participación activa y voluntaria de 125 estudiantes y 30 docentes de la Escuela Normal José Martí de Matagalpa permitió que, además de recolectar los resultados del propio proceso de Evaluación Común, también obtener insumos para la concreción del currículum de la formación docente en esa Escuela Normal.

El acercamiento a la realidad socio-educativa en las comunidades rurales ha sido una experiencia muy impactante y ha permitido enamorarnos aún más de nuestro oficio como educadoras/es. Es mucho lo que podemos aprender del área rural. La experiencia nos fortalece en nuestro afán de seguir contribuyendo a la calidad educativa en cuanto al desarrollo de habilidades básicas en lectura, matemáticas e interacción social.

También les invitamos a visitar la página de la red PAL> https://palnetwork.org/ican/

“En camino, a ser garantes de construir aportes a CALIDAD en Educación”… Este fue el lema que inspiró la fase final del proceso de Evaluación Común de la Red PAL en la que participa el PROYECTO VIDA de ÁBACOenRed y FUPECG.

El pasado 11, 12 y 13 de febrero se realizó el proceso de capacitación a 120 encuestadoras/es y docentes de la Escuela Normal “José Martí” de Matagalpa con los siguientes objetivos:

1. Visualizar y asumir las tareas como encuestadoras/es y acompañantes del proceso de EVALUACIÓN COMÚN a realizar en 60 comunidades rurales del municipio de Matagalpa.
2. Preparación técnica y metodológica  para la ejecución de la EVALUACIÓN COMÚN en 60 comunidades rurales de Matagalpa.

La capacitación, facilitada por el equipo técnico del proyecto VIdA (Herman, Arline, Maribel y Naida) incluyó el análisis de los instrumentos para la captura de datos junto con el manual y también prácticas de campo en la  comunidad “Paz y Reconciliación” de Matagalpa.  En este proceso también participó la compañera Ana Espinoza del proyecto MIA de Veracruz, México como parte del intercambio que se genera en la Red PAL.

Imágenes de la capacitación>

Imágenes del ejercicio práctico en la comunidad “Paz y Reconciliación”>

Fase de campo de ‘Evaluación común’ – Experiencia Nicaragua>

En los fines de semana (15 y 16 de febrero;  22y 23 de febrero) las/os encuestadoras/es junto con sus acompañantes visitarán  20 hogares en 60 comunidades del departamento de Matagalpa, seleccionadas al azar.  La meta es poder visitar 1200 hogares, entrevistando a personas adultas en cada hogar y compartiendo ejercicios de matemática con niñez de esos hogares, en edades que oscilan de 5 a 16 años.

Todo el proceso se está realizando en coordinación con el Ministerio de Educación y gracia al apoyo solidario de la Escuela Normal “José Martí’ de Matagalpa.

El sábado 07 de septiembre de visitaron 5 comunidades rurales del departamento de Matagalpa para aplicar ejercicios de matemática a niñas/os de entre 5 y 16 años.  Todo esto como parte del pilotaje 2 de la Evaluación Común de la Red PAL. Compartimos bitácora gráfica del proceso realizado.

Entrega de carta de presentación de la Evaluación Común a líder comunitario, como estrategia para garantizar el trabajo en la comunidad ⇓

Mapas de las comunidades… ya ubicados los hogares, listo para hacer el muestreo con la regla de mano izquierda y cada 5to hogar ⇓

Desde los mapas, voluntarios/as y acompañantes se ubican y distribuyen en 3 sectores de la comunidad ⇓

Aplicación de instrumentos a niñas y niños⇓

Aplicación de encuestas a responsable del hogar⇓

Verificando el llenado de los instrumentos de parte de los acompañantes a las/os voluntarias/os⇓

Entrega y verificación de materiales por comunidad, ya de regreso en la Escuela Normal⇓

Ya listos, organizados los paquetes por cada comunidad⇓

El martes 03 de septiembre y jueves 05 de septiembre se realizaron las capacitaciones (a maestras/os y estudiantes, respectivamente) para la aplicación del piloto 2 de la Evaluación Común de la Red PAL.

Capacitación a acompañantes (docentes) de la Escuela Normal José Martí – Matagalpa.

Capacitación a voluntarias/os (estudiantes normalistas) de la Escuela Normal José Martí – Matagalpa.

Dentro de la metodología para la Evaluación Común de la RED PAL se incluye un primer momento de validación de los instrumentos a utilizar (PILOTO 1).

Este Piloto 1 fue realizado con niñas y niños de 2 escuelas rurales del municipio de Matagalpa.

* Previo a la aplicación de los instrumentos se desarrolló una capacitación con voluntarias/os, estudiantes de la Escuela Normal de Matagalpa ‘José Martí’.

* Aplicación de pruebas piloto con niñas y niños de la Escuela ‘Solingalpa’ en Matagala, Nicaragua.

* Aplicación de pruebas piloto con niñas y niños de la Escuela ‘Quebranda Honda’ en Matagalpa, Nicaragua.

*Posteriormente se realizó una sesión de evaluación del proceso realizado entre voluntarias/os y el equipo del proyecto VIdA*Nicaragua

1. Antecedentes

La Red de Acción Popular para el Aprendizaje (PAL, por sus siglas en inglés) es una asociación de países miembros que trabajan en tres continentes: África, Asia y América Central, para evaluar las competencias básicas en lectura y cálculo numérico de los niños, en sus hogares, a través de evaluaciones periódicas dirigidas por ciudadanos.

La Red PAL cree firmemente que las evaluaciones de las competencias básicas en lectura y aritmética lideradas por ciudadanos y hechas en los hogares son la única forma de averiguar si TODOS los niños están adquiriendo estas habilidades fundamentales que son necesarias para el progreso futuro.

Pratham, una de las mayores organizaciones de la sociedad civil que trabaja para mejorar los resultados educativos en la India, fue pionero en el modelo de evaluación dirigida por ciudadanos en 2005 y lo llamó el Informe anual sobre el estado de la educación (ASER). En los últimos 14 años, este modelo de evaluación dirigida por ciudadanos ha sido tomado y adaptado por muchos países.

En 2015, la Red PAL se estableció formalmente y constituyó una Secretaría con sede en Nairobi, Kenia.

Los principios básicos del modelo de evaluación dirigida por ciudadanos se mantienen en cada país miembro. Voluntarios ciudadanos capacitados administran estas evaluaciones, oralmente (sin suponer que el niño ya puede leer y escribir) y uno a uno.

Las evaluaciones dirigidas por ciudadanos se administran en el hogar para garantizar una mayor representación de los niños en la muestra, no solo de los niños escolarizados, que probablemente estén en la escuela el día de la evaluación. Los niños que no están matriculados en la escuela o que no asisten regularmente a la misma se incluyen en la muestra. A pesar de estas grandes similitudes, los instrumentos de evaluación reales en cada país miembro se basan en las expectativas del plan de estudios nacional para los niños en los primeros grados. Por lo tanto, los resultados de estas evaluaciones no son comparables entre los países miembro.

2. ¿Para qué una evaluación común de la Red PAL?

2.1. Perspectiva global
•Datos transnacionales de los países miembro para el monitoreo global de la educación. El ODS 4, Meta 4.1, Indicador 4.1.1 (a): proporción de niños en Grados 2 o 3 que alcanzan al  menos un nivel mínimo de competencia en i) lectura y ii) matemáticas, por sexo solo se ha  actualizado recientemente a indicador de Nivel II.

Actualmente, ninguna de las principales evaluaciones internacionales mide las habilidades de aprendizaje fundamentales para los grados 2 o 3. Y de varias iniciativas de evaluación regional, solo el Programa de Análisis de Sistemas Educativos de CONFEMEN (PASEC) y el Laboratorio Latinoamericano de Evaluación de la Calidad de Educación (LLECE) evalúan los resultados de aprendizaje de los niños en los grados 2 y 3, respectivamente.

Por lo tanto, una evaluación común en todos los países miembro fortalecerá la oferta de la Red PAL a la discusión de los resultados de aprendizaje global con datos internacionales comparables que pueden informar el desarrollo de políticas educativas. Las repetidas rondas de evaluación también pueden proporcionar tendencias interesantes a lo largo del tiempo que pueden ayudar a identificar prácticas exitosas y replicables (dentro de la Red) para mejorar los resultados de aprendizaje.

2.2. Perspectiva de la Red

•Desarrollo de la capacidad de evaluación de los países miembro

Se espera que las capacidades existentes en los países miembro para diseñar actividades de recopilación de datos para desarrollar e implementar una evaluación y un programa de informes fiables, válidos y rigurosos basados en encuestas, y de analizar, interpretar y difundir adecuadamente los datos de evaluación con el fin de informar la política educativa se fortalezca por medio de la evaluación común. Se puede desarrollar un paquete estándar de desarrollo e implementación de evaluación para la Red PAL como producto de este esfuerzo común.

•Ampliar el marco de áreas y habilidades evaluadas
El desarrollo de la evaluación común brinda a la Red PAL la oportunidad de comprender los sistemas educativos y las expectativas curriculares en todos los países miembro. También es útil para explorar las posibilidades de ampliar el marco de la evaluación para que esté mejor alineado con las definiciones completas de aritmética y lectura, a la vez que se mantiene la esencia central de las evaluaciones dirigidas por ciudadanos, siendo fácil de implementar, informar y comprender.

•Adhesión al marco de estándares de calidad de datos en toda la red
Para garantizar la comparabilidad absoluta de los resultados de la evaluación, es crucial que se sigan procedimientos estandarizados en todos los países miembro. Esto brinda a los países miembro la oportunidad de implementar estándares de calidad de datos previamente ratificados. Se espera que estas buenas prácticas en el desarrollo, implementación y análisis de la evaluación se filtren desde el proyecto de evaluación común a los programas de evaluación existentes en los países.

•Fortalecimiento del terreno de juego para las evaluaciones dirigidas por ciudadanos en las regiones existentes
Además de producir datos comparables a nivel de la Red, la evaluación común también produce datos comparables regionalmente. Se espera que este esfuerzo regional ayude a los centros regionales a llegar a nuevos miembros potenciales para que se unan al movimiento de evaluación dirigida por ciudadanos.

3. Alcance propuesto para la evaluación común de la Red

La evaluación común de la Red PAL se implementará como proyecto independiente en 1 distrito por país miembro. El siguiente mapa muestra los componentes incluidos en la evaluación común por regiones.

En 2019, la evaluación común de aritmética se implementará en todos los países miembro. Además, los países miembro de Asia del Sur desarrollaran e implementaran una evaluación común de lectura.

4. Desafíos para la evaluación común de la Red PAL

El Instituto de Estadística de la UNESCO (UIS) 2018 Data Digest afirma (pág. 22) -“Es importante reconocer que se necesitarán varios años para resolver todos los problemas metodológicos y políticos necesarios para informar sobre los indicadores de los ODS a la misma escala. Los desafíos se deben principalmente al hecho de que la iniciativa de evaluación de aprendizaje utiliza diferentes definiciones de niveles de rendimiento y, lo que es más importante, diferentes niveles de dificultad en los elementos que evalúan si se ha alcanzado la competencia”. La Red PAL entiende que desarrollar e implementar una evaluación común en los países miembro es una tarea difícil. Estos desafíos pueden ser generalmente incluidos en las categorías de: 1) desarrollo, 2) implementación y 3) comunicación.

En lo que respecta al desarrollo, la creación de marcos de evaluación para la capacidad numérica y la lectura requiere que la Red PAL complete la revisión de las teorías iniciales de capacidad numérica y lectura; los programas de evaluación internacionales, regionales y nacionales, así como las evaluaciones existentes de los países miembros. Posteriormente, se deberá crear un consenso sobre el marco entre los países miembro, tras lo cual se puede planificar y llevar a cabo una prueba de campo de las tareas de evaluación. Además de esto, el marco y las preguntas del instrumento contextual para el hogar también deberán prepararse y ponerse a prueba. Deliberaciones y la creación de consenso también son necesarios para varios temas metodológicos, como, por ejemplo, el grupo de edad objetivo de los niños para la evaluación común, los procedimientos de muestreo, etc.

Con respecto a la implementación, existe la preocupación de que los países miembro ya han finalizado sus respectivos planes de trabajo anuales para 2019 y podría ser difícil incluir el trabajo de evaluación común en esta etapa. Además, los miembros de equipo de la mayoría de los países de la Red ya están abrumados con proyectos preexistentes. Si bien la Red PAL tiene la financiación para el desarrollo y la implementación de este proyecto, se necesita la apropiación y el compromiso absolutos de los países miembro para completar la implementación con éxito.

Finalmente, la comunicación adecuada sobre la evaluación común es fundamental para alcanzar con éxito los objetivos, especialmente a nivel mundial. El mensaje común con respecto a la justificación de este trabajo deberá ser desarrollado y acordado por los países miembro para comunicarse de manera efectiva tanto internamente como con partes interesadas externas.

Para superar los desafíos mencionados anteriormente, se identificará un Grupo de trabajo de evaluación de toda la red y Equipos de gestión de proyectos específicos del país. Un equipo dedicado de la Secretaría de la Red PAL también apoyará este trabajo.