De motos, de M&E, y de impacto-penetraciones de medición del evaluador externo de HEA

 

Reloj Thomas discutir los desafíos en el campo de la evaluación del impacto.
 

Cuando usted piensa en investigadores de las ciencias sociales, usted no se imagina probablemente los ríos y los desiertos que cruzan, y lugares difíciles de alcanzar de navegación en las motos.
Pero el trabajo de Thomas de Hoop, investigador sénior en los institutos americanos para la investigación (AIRE), y sus colegas puede implicar a veces esas actividades. Eso es porque muchos sus tratos del trabajo con las poblaciones marginadas, y asegurarse de sus necesidades y opiniones consiguen reflejados pueden dar vuelta en un pedazo de una aventura.
Thomas acaba de comenzar la colaboración con el HEA como evaluador externo. Él y sus colegas ayudarán a la cohorte a construir la capacidad para conducir las evaluaciones de alta calidad del proceso y del impacto. Puesto que la colaboración acaba de comenzar, tendremos que permanecer adaptados para ver qué desafíos logísticos suben para Thomas este vez. Pero en un más tradicional, el frente técnico, él y su equipo han estado ya muy ocupados.
Lo hace qué AIRE
El AIRE conduce evaluaciones de un gran número de programas en los países en vías de desarrollo que se extienden de la educación al desarrollo en la primera infancia, a la nutrición y a los programas de la transferencia del efectivo. Su trabajo ocurre en una amplia gama de contextos, tales como contextos del refugiado, en países incluyendo Argelia, Etiopía, Líbano, y Paquistán.
En su trabajo con HEA, el equipo del AIRE quiere entregar la investigación y la evaluación de alta calidad. Y, igualmente importante, quiere construir la capacidad de los equipos de la innovación de hacer tanto cuanto sea posible ellos mismos.
 “Esperamos construir la capacidad de los ejecutores para supervisar y evaluación,” Thomas dice. “Estamos viniendo adentro pues los externos y nosotros no pudimos ser cinco años disponibles de ahora en adelante. Queremos ayudarles para mejorar en un cierto plazo, para aprender recoger una información más relevante y más confiable. La evaluación está aprendiendo realmente haciendo, y queremos trabajar así como los equipos tanto cuanto sea posible.”
Él añade, “queremos al socio con ellos en el HEA y ser un recurso para que él consiga los datos que necesitan y encontramos las mejores maneras de recoger esos datos.”
¿Cómo hace AIRE hacen la investigación?
El AIRE utiliza métodos cuantitativos y cualitativos. Esto exige el hacer de encuestas sobre el gran escala entre los hogares, así como de entrevistas y de discusiones profundizadas del grupo principal. Los investigadores del AIRE combinan siempre para arriba con los investigadores locales para tener acceso mejor a las poblaciones locales así como para construir capacidad.
Además, todas sus evaluaciones se basan en una teoría del cambio, que desarrollan junto con los ejecutores.
Teoría del cambio
Según Thomas, usted puede pensar en una teoría del cambio como cadena causal que ligue las actividades del programa a los resultados de las salidas, intermedios y finales. No es una cosa fija; podría cambiar en un cierto plazo si viene la nueva información adentro.
“Construimos una teoría del cambio comenzando con la información sobre las condiciones iniciales del contexto. Miramos qué clase de actividades los innovadores están ejecutando, y los diversos caminos con los cuales estas actividades pueden alcanzar sus objetivos finales.
“Éstos serán diferentes para los tres proyectos, porque son todos que trabajan en diversos contextos. Los contextos del refugiado diferencian ya mucho de contextos regulares del país en vías de desarrollo. Entonces hay diferencias entre diversos campamentos de refugiados.”
Thomas añade que es importante ser preparado para el hecho de que no van las cosas siempre según lo previsto.
“Hacemos evaluaciones de proceso para ver qué está consiguiendo ejecutada que fueron planeados, qué no se está ejecutando según lo previsto, y cómo los programas puede mejorar. Para hacer esto, hacemos entrevistas con los hogares influenciados por el programa, así como a otros tenedores.
“Hay dos cosas que importan realmente aquí para la colaboración eficaz con los equipos de la innovación: Eso los innovadores conoce sus programas muy bien y proporciona la entrada. Y que co-creamos las teorías del cambio con ellos. Quisiéramos que todo el mundo estuviera en la misma página; esto se asegurará de que las evaluaciones sean útiles.
“También tenemos gusto de trabajar con los innovadores para identificar las decisiones dominantes que necesitan tomar durante los meses y los años próximos, para escalar con éxito. Queremos imaginar cuáles de esas decisiones son las más cruciales y donde ellos tiene la mayoría de las dudas.”
¿Cuáles son los desafíos y las oportunidades a la evaluación en el contexto del refugiado?
La recopilación de datos puede ser desafiadora porque los investigadores locales pudieron haber limitado capacidad.
Otro desafío es el problema de la movilidad. “A menudo, usted intenta recoger datos de la misma gente en un cierto plazo, pero mucha gente en contextos del refugiado está emigrando y no está claro donde ella ahora vive, o donde ella estará dos años más adelante. Esto lo hace muy que desafía.”
Por otra parte, la propiedad del teléfono móvil es muy alta en el contexto del refugiado, que pudo presentar las oportunidades para que la recopilación de datos innovadora siga a esta gente.
¿Qué sucedió en el bootcamp? 
Thomas y sus colegas participaron en el primer bootcamp de HEA en octubre de 2016, para resolver unívoco con el planeamiento de la cohorte y del comienzo para el trabajo a continuación. Según Thomas incluso en esos pocos días hicieron mucho progreso. Él explicó que él y su equipo quieren sobre todo hacer dos contribuciones con sus evaluaciones:
- Huecos del conocimiento de la dirección en qué trabajos para mejorar resultados de la educación en el contexto del refugiado, pues no hay muchas pruebas en esto hasta ahora.  
- Identifique y dirija las preguntas de la investigación que son relevantes para los equipos de la innovación y utilice las respuestas para resolver los desafíos de escalamiento que los miembros de la cohorte están haciendo frente.
Ambas metas requieren diversos métodos de la investigación, Thomas explica, pero es complementario porque “queremos solamente escalar los programas que mejoran realmente resultados de la educación.”
En el bootcamp, los miembros de la cohorte y los miembros de equipo del AIRE subieron con dos tipos de preguntas de la investigación, que explorarán juntos ir adelante:
- El efecto de sus programas sobre los resultados de la educación para los refugiados
- Las barreras a escalar estos programas y a mantenerlos eficaces
Thomas explicó que cada uno de los equipos de la cohorte hace frente a desafíos diversos, específicos.
“Mi primer pensamiento cuando oí hablar el escalamiento es que implica la extensión, es decir alcanzando un número más grande de beneficiarios en el mismo contexto. Cuál es el caso para WUSC. Pero en el caso de Kepler, también significa la adaptación, es decir el programa comenzó en Kigali y quieren adaptar el programa para hacerlo igualmente eficaz al contexto del refugiado. ¿En cuanto a niño de la guerra, está más sobre la adaptación del programa a otros países – voluntad el acercamiento que ellos utilizó en Sudán también trabajan Jordania y Líbano?
“Es muy importante que los grupos aprenden de uno a. A pesar de sus diferencias, hacen frente a muchos desafíos similares. Por ejemplo, el género balanza-que hace mujeres seguras aplicarse a sus programas y asistir escuela-es un desafío para todos.”
¿Lección principal del bootcamp?
“Aprendimos que mucho es posible. Apenas tenemos que ser creativos en subir con nuestros diseños de la investigación. Por ejemplo, estamos mirando los programas relativamente pequeños que quieren escalar. El cálculo de su efecto sobre resultados de la educación desafiará, porque tendremos que confiar en muestras estadístico pequeñas. Esto se puede resolver en parte usando mezclado-métodos y confiando en un número más grande de escuelas del control y de más rondas de la recopilación de datos.”
 

Discuta