Un vistazo retrospectivo de un año: Garantizar datos de calidad en toda la Red PAL

Por Muhammad Usman, Director Adjunto de Programa, Secretaría de la Red PAL

El modelo de evaluación liderada por ciudadanos nació en la India en 2005 cuando la ONG más grande de la India, Pratham, diseñó un nuevo enfoque innovador para evaluar las competencias básicas de lectoescritura y aritmética de todos los niños, independientemente de su situación escolar. Durante los últimos once años, el modelo de evaluación dirigida por ciudadanos ha cobrado impulso en todo el Sur, donde se ha imitado y adaptado a contextos nacionales en situaciones en las que no todos los niños están en la escuela y aprendiendo.

El modelo de evaluación dirigida por ciudadanos fue diseñado cuidadosa y deliberadamente para satisfacer la realidad encontrada en los países del Sur. El uso de ciudadanos voluntarios capacitados, de simples pruebas e instrumentos y la evaluación de todos los niños son aspectos fundamentales del modelo de evaluación dirigida por ciudadanos. El diseño refleja una filosofía que es diferente a la de las evaluaciones estándar basadas en la escuela que se han desarrollado en contextos de países occidentales.

La aparente simplicidad de la evaluación dirigida por ciudadanos, que permite la participación de un gran número de “ciudadanos corrientes” está respaldada por sofisticados procesos de supervisión “entre bastidores” diseñados para garantizar que los datos generados sean fiables. Esto incluye procesos sistemáticos de muestreo, selección de socios y voluntarios, capacitación, monitoreo y revisión. Además, se utiliza la limpieza cuidadosa de datos y otros métodos para validar los datos. Sin embargo, debido a la expansión orgánica de la red a lo largo del tiempo, estos procesos no son consistentes en todos los países de la red PAL, ni visibles para personas ajenas a la red.

Enero de 2017
Enero marcó el comienzo de una estrategia de tres años recientemente desarrollada para la red. Centrados en garantizar la recopilación de datos de alta calidad, líderes de países y analistas de datos se reunieron en Aurangabad, India para el primer taller de la red sobre calidad de datos. En el taller, los participantes estuvieron de acuerdo en la necesidad de producir un marco de estándares de calidad de datos. Como punto de partida, el Grupo de Trabajo de Datos y Diseño de la Red PAL elaboró un conjunto de ‘estándares mínimos’. Además, se recopilaron de los miembros 62 documentos relacionados con la calidad de los datos de la red para informar un Marco de estándares de calidad de datos más amplio (DQSF).

Primer Taller de Datos en Aurangabad, India

Marzo de 2017
El borrador del documento de estándares mínimos se presentó en la 4ª reunión del Comité Directivo de la Red PAL en Ciudad de Méjico y se continuó explorándolo durante la reunión del Grupo de Trabajo de Diseño y Datos en Xalapa, Méjico. Los participantes acordaron mutuamente los cuatro pasos siguientes:

  1. Desarrollar un marco de “análisis rápido” para analizar los 62 documentos existentes relacionados con la calidad de los datos
  2. Llevar a cabo una revisión de la situación de las normas de calidad de datos de evaluación internacionales y regionales existentes
  3. Preparar el primer DQSF que combine la investigación y el análisis descritos en los pasos 1 y 2
  4. Reunir de nuevo a los expertos apropiados para finalizar el DQSF y redactar una estrategia de implementación

Reunión del Grupo de Trabajo en Xalapa, Méjico

Mayo de 2017
La Secretaría de la Red PAL hizo el análisis inicial de los documentos de red existentes, y se llevaron a cabo entrevistas de seguimiento por Skype con analistas de datos de toda la red.

Julio de 2017
Se identificó a la Fundación Nacional para la Investigación Educativa (NFER) para realizar una revisión de la situación de los estándares de calidad de datos de evaluación internacionales y regionales existentes para informar la creación del DQSF. El Grupo de Trabajo de Datos y Diseño de la Red PAL y la Secretaría de la Red trabajaron luego en consulta con NFER para redactar el DQSF.

Noviembre – Diciembre 2017
Comenzaron las consultas entre el Grupo de Trabajo de Diseño y Datos y el equipo de la Secretaría para preparar la celebración del segundo taller de datos en 2018. El taller convocará una vez más a líderes nacionales y analistas de datos para finalizar el documento DQSF y para comenzar a planificar su implementación, comenzando por mecanismos de auto informe y monitoreo entre iguales.

Mirada al futuro: Construir sobre los cimientos establecidos en 2017
El Marco de estándares de calidad de datos (DQSF) es un elemento central en el compromiso de toda la red de producir datos sólidos y de alta calidad de los que se informará a nivel regional, nacional e internacional. El DQSF ayudará a los países de la Red PAL a mejorar su rigor técnico, al tiempo que permite flexibilidad para adaptarse a la diversidad de procesos y ajustes al contexto local que son fundamentales para el modelo de evaluación dirigida por ciudadanos. La creación del DQSF irá acompañada por planes de implementación y monitoreo, donde los países miembro se apoyarán entre sí para cumplir con los estándares mínimos requeridos, aprender de las mejores prácticas en toda la red y ayudar a identificar al soporte técnico. El DQSF quiere ser claro y accesible a todos los usuarios, sin importar cuán familiarizados estén con las evaluaciones dirigidas por ciudadanos.