Evaluación y Pandemia - Evaluación de proyectos en tiempos inciertos Daniel Brandão Webinar para RedAmerica Abril, 2020
←
→
Transcripción del contenido de la página
Si su navegador no muestra la página correctamente, lea el contenido de la página a continuación
Evaluación y Pandemia Evaluación de proyectos en tiempos inciertos Daniel Brandão Webinar para RedAmerica Abril, 2020
Experto
DANIEL BRANDÃO
Socio fundador de Move Social
daniel@move.social
https://www.linkedin.com/in/dbrandao/
www.move.social
.
01. ¿Cuáles son las implicaciones de la crisis generada por el Coronavirus
sobre los procesos de evaluación?
Foco
02. ¿Cómo desarrollar evaluaciones en sistema y entornos de alta
complejidad?
Evaluación y
Pandemia 01 ¿Cuáles son las implicaciones de la crisis generada
por el Coronavirus sobre los procesos de
evaluación?
Mi aprendizaje 1. La crisis no pasará rapidamente. 2. Embrace el cambio. 3. Movimientos y cambios innovadores tienden a acelerar. 4. Oportunidad de aprendizaje
10 Mensajes a los evaluadores
1. Expect change. Facilitate change. Document changes and their implications.
2. Las evaluaciones deben cerrarse y/o reducirse.
3. Los planes tienen que ser revisados. Indicadores, estrategias, partes interesadas,
usos.
4. La evaluación se deja de lado en tiempos de crisis y urgencia. Depende de
evaluadores defender su relevancia.
5. Mantener la relevancia de la evaluación y el pensamiento evaluativo como una
forma de apoyar decisiones ancladas en evidencia (better decisions).
Referencias en la bibliografia
10 Mensajes a los evaluadores
6. Navegaremos hacia lo desconocido.
7. Real time data rules: Los datos deben recopilarse y entregarse a alta
velocidad para guiar a los inversores sociales.
8. Good enough standard for rigor.
9. Comprender las necesidades de los stakeholders.
10. Learning and fostering your community.
Referencias en la bibliografia
Consecuencias inmediatas del Covid19 COVID19 ha afectado evaluaciones en: • La prioridad de la evaluación: otras demandas se vuelven más urgentes • La capacidad de financiar evaluaciones: recortar fondos o redirigir • La viabilidad de los procesos de recopilación de datos face-to-face • Los procesos de reflexión y aprendizaje (talleres)
Consecuencias inmediatas del Covid19 COVID19 ha afectado evaluaciones en: • La prioridad de la evaluación: otras demandas se vuelven más urgentes • La capacidad de financiar evaluaciones: recortar fondos o redirigir • La viabilidad de los procesos de recopilación de datos face-to-face • Los procesos de reflexión y aprendizaje (talleres)
Soluciones inmediatas Escenarios: • Postergar • 100% Go digital • Utilizare solamente los datos que ya se han recopilado
Impacto Impulsar los enfoques orientados por systems thinking y complejidad.
Evaluación y Pandemia 00 Trayectoria a el próximo normal.
Kevin Sneader and Shubham Singhal
McKinsey and Co.
_RESOLVE
_RESILENCE
“Here, we attempt to answer the question
_RETURN
being posed by leaders across the public,
private, and social sectors: What will it take
to navigate this crisis, now that our _REIMAGINE
traditional metrics and assumptions have
been rendered irrelevant?”
_REFORM
(It is not a linear path)
https://www.mckinsey.com/industries/healthcare-systems-and-services/our-insights/beyond-coronavirus-the-path-to-the-next-normalCuestiones .
necesarias en la travesía .
PUBLICO A Mi ORGANIZACIÓN
• ¿Cuál es el impacto de la • ¿Qué nuevas preguntas • ¿Qué nuevas necesidades y
crisis sobre a quién sirve te haces? formas de estrategia social
el programa? van a emerger de la crisis?
• ¿Qué has valorado en
• ¿Qué necesidades son este momento de • ¿Vamos a seguir siendo igual
urgentes ahora? crisis? que antes del Covid19?
Call to action: Call to action: Call do Action:
Conocer lo que pasa y tomar Meditar Refletir sobre el próximo normal
decisiones para apoyar los
beneficiarios (fast survey) RETURN, REIMAGINE,
RESILIENCE REIMAGINE, REFORM,
RESOLVE & RESILIENCE RESILIENCEEvaluación y
Pandemia 02 ¿Cómo desarrollar evaluaciones en sistema y
entornos de alta complejidad?# Referencias
Un paradigma epistemológico.
Cambio cultural y científico.
Referencias en biología, física, cibernética, filosofía, otros.
Piedra angular 5 Implicaciones para evaluación
pensamiento sistemico y
Siempre cambiante, a menudo impredecible. 1. Diseñar e implementar evaluaciones para que
sean adaptativas, flexibles e iterativas;
Las relaciones de causa y efecto son a menudo
impredecibles, no lineales y multifacéticas. 2. Busque comprender y describir todo el sistema,
incluidos los componentes y las conexiones.
Todo esta conectado. Los eventos en una parte
del sistema afectan a todas las partes. 3. Centrarse en la naturaleza de las relaciones y la
complejidad
interdependencia dentro del sistema.
La interconexión puede ser más importante
que la parte. 4. Explicar las relaciones no lineales y
multidireccionales entre la iniciativa y sus
El contexto es importante. Puede impulsar o resultados intencionales y no intencionales.
detener la iniciativa.
5. Esté atento a los estándares, tanto únicos como
Los estándares emergen de las interacciones. repetitivos, en diferentes niveles del sistema.
Adaptado de Preskill, 2014Developmental Evaluation
Enfoque para sistemas complejos
DEVELOPMENTAL EVALUATION
EVALUACIÓN TRADICIONAL
Purpose: Testes sumativos y accountability. Purpose: Innovación y adaptación en ambientes
dinámicos.
Roles y relaciones: Autoridades evaluadoras externas y
funders orientados por criterios explícitos y pre- Roles y relaciones: Evaluador como parte integrada al
ordenados. equipo en el proceso de recolectar y interpretar datos,
encuadrar los problemas y testar modelos de
desarrollo.
Medidas y indicadores: orientado por objetivos pre
definidos y indicadores SMART. Medidas y indicadores: Pueden cambiar a lo largo de la
evaluación. Desarrolla las medidas mientras los
.
Resultados de la evaluación: Formales y en reports resultados se presentan.
detallados con base en practicas estándares del campo.
Resultados de la evaluación: Rápidos, real-time
Enfoque
feedback, orientados pela el aprendizaje.
Incertidumbre: Busca por controlar implementación y el
proceso evaluativo. Incertidumbre: Aprende a manejar con la ausencia de
control, conectado con lo que va emergiendo y
Estándares: Competencia metodológica y compromiso contesta de acuerdo.
con el rigor, la independencia, la credibilidad con
autoridades externas y financiadores. Estándares: Flexibilidad metodológica y adaptación,
creatividad, system thinking, abierto y ágil, tolerancia a
la ambigüedad.
Referencia: Patton,2006Better evaluation. Developmental Evaluation. In:
https://www.betterevaluation.org/en/plan/approach/developmental_evaluation
.
Bildner, J. Radically Adapting to the New World. Stanford Social Innovation Review. 2020. In:
https://ssir.org/articles/entry/radically_adapting_to_the_new_world
Free-range evaluation. Resources for #eval in a time of crisis. Blog post, 2020. In:
Bibliografia
https://tgarchibald.wordpress.com/2020/04/01/resources-for-eval-in-a-time-of-crisis/
Lys, C. The Evaluation Mindset: Evaluation in a Crisis (Blog post). 2020.
In: https://freshspectrum.com/the-evaluation-mindset-evaluation-in-a-crisis/
NFSNetwork. Webinar Challenges and Strategies for M&E in the Time of Covid-19. 2020. In:
https://discourse.fsnnetwork.org/t/post-discussion-on-challenges-and-strategies-for-m-e-in-the-time-of-covid-19/1541
Patton, M. Developmental evaluation applying complexity concepts to enhance innovation and use. New York, NY: Guilford
Press, 2010Patton, M Evaluation Implications of the Coronavirus Global Health Pandemic Emergency, Blog Post. 2020. In:
https://bluemarbleeval.org/latest/evaluation-implications-coronavirus-global-health-pandemic-emergency.
.
Preskill, H., Gopal,S., Mack,K., Cook,J. Evaluating Complexity: propositions for improving practices. FSG, 2014
In: https://www.fsg.org/publications/evaluating-complexity
Bibliografia
Sneader, K.; Singhal, S. Beyond coronavirus: The path to the next normal. March, 2020.In:
https://www.mckinsey.com/industries/healthcare-systems-and-services/our-insights/beyond-coronavirus-the-path-to-the-next-
normal
UNDP Independent Evaluation Office (IEO) Evaluation During Crisis – COVID 19– Tips on evaluating during a crisis.
Infographic. 2020. In: http://web.undp.org/evaluation/documents/infographics/Evaluation-during_crisis-COVID19.pdf
Ratnala, V. Contactless Evaluation – (in Times of COVID-19). AEA365 Blogpost. In: https://aea365.org/blog/contactless-
development-evaluation-in-times-of-covid-19-by-vardhani-ratnala/Gracias Abril, 2020
También puede leer
