Introducción al seguimiento y la evaluación participativos: el enlace perdido entre la investigación y el impacto

En un artículo anterior, hablé de por qué es importante tener en cuenta la inclusión en el diseño e implementación de un sistema de SyE y destacó algunas de las características clave de SyE inclusive. Hice el vínculo entre inclusión y participación, tanto desde un punto de vista instrumental que se enfoca en la efectividad de nuestras intervenciones como desde un punto de vista basado en principios de derechos humanos.

Así como "inclusión" se ha convertido en una palabra de moda en los círculos humanitarios y de desarrollo, también lo ha hecho "participación". Los donantes, los gobiernos, las organizaciones internacionales y las ONG defienden la participación, promoviéndola como un principio rector y una buena práctica. Sin embargo, no siempre está claro qué significa cuando una organización dice que "valoran la participación" o adoptan un "enfoque participativo" en su trabajo. Al mismo tiempo, existen muchos conceptos erróneos sobre lo que la participación en el contexto del SyE en particular significa.

Hoy, analizaremos el SyE participativo más de cerca. Veremos cómo nos desafía a pensar de manera diferente sobre el poder, el conocimiento y el rol de los profesionales y las poblaciones afectadas en el SyE. También consideraremos cuándo podríamos utilizar enfoques participativos en el ciclo de SyE. Voy a presentar el caso del SyE participativo en términos de sus beneficios y su relación con los derechos humanos, y analizaré algunos de los desafíos que podríamos enfrentar al utilizar enfoques participativos. En el próximo artículo, veremos qué tipos de métodos y herramientas tenemos a nuestra disposición para realizar un SyE participativo, incluso en entornos virtuales.

Ver la versión en inglés de este artículo.

Ver la versión francesa de este artículo.

Lo primero es lo primero: tenemos que hablar de poder

En el centro de todos los enfoques participativos de la programación humanitaria y de desarrollo se encuentra 1. el reconocimiento de que las relaciones de poder tienden a ser desiguales y 2. el objetivo de cambiar el equilibrio de poder a favor de quienes normalmente no lo tienen. Este desequilibrio es más evidente entre quienes financian, planifican, implementan, monitorean o evalúan un proyecto ('nosotros', los profesionales, especialistas o practicantes) y quienes se dice que se benefician de él ('ellos', las personas o comunidades afectadas que se denominan a menudo beneficiarios, destinatarios, población destinataria o usuarios finales).

En su forma más extrema, este desequilibrio de poder se traduce en un enfoque de arriba hacia abajo basado en una línea de pensamiento como esta: "tenemos" las habilidades, el conocimiento y la visión del mundo necesarios para juzgar qué es lo mejor. "Ellos" son vulnerables y carecen de los recursos, habilidades o conocimientos para ayudarse a sí mismos y, por lo tanto, necesitan ayuda o apoyo para el desarrollo según lo definido y entregado por "nosotros". El tipo de pensamiento utilizado para justificar este enfoque de arriba hacia abajo a menudo no es tan obvio y puede influir en nuestras acciones sin que nos demos cuenta.

El SyE también está sujeto a relaciones de poder desiguales, pero pueden ser aún más difíciles de detectar. Esto se debe a que tendemos a pensar en la investigación, el seguimiento y la evaluación, que son todas formas de indagación, que es el proceso de hacer preguntas y buscar respuestas, como actividades completamente objetivas. Pensamos que el conocimiento, los datos y la evidencia son neutrales y no se ven afectados por las relaciones sociales. Los enfoques tradicionales de la investigación en ciencias sociales, en cuyos métodos confiamos para el SyE, generalmente involucran a un experto externo que estudia a las personas de acuerdo con una agenda de investigación predefinida con métodos y herramientas preestablecidos. El investigador, sin la participación de las personas que están siendo investigadas, formula preguntas de investigación, diseña estudios, extrae datos de sujetos de investigación y selecciona información para su análisis y uso posterior.

¿Qué es el SyE participativo?

Para comprender lo que podría significar y lucir "participación" en el contexto del SyE, primero debemos comprender en qué se diferencian los enfoques participativos de la investigación en ciencias sociales de los enfoques tradicionales. En resumen, los enfoques participativos desafían las creencias convencionales sobre el conocimiento, la capacidad y el propósito de la investigación. Buscan romper las relaciones de poder tradicionales entre investigadores y sujetos de investigación. El proceso de indagación y la producción de conocimiento se convierten en actividades colaborativas, en lugar de ser tecnocráticas, unilaterales y extractivas.

Un enfoque participativo de la investigación no es una metodología específica o un conjunto de métodos particulares, sino un conjunto de principios y prácticas para llevar a cabo la investigación. El término puede describir una variedad de marcos y enfoques utilizados en muchos campos, desde la salud, la educación y la antropología hasta la asistencia humanitaria y el desarrollo. Estos enfoques comparten algunos supuestos básicos:

  • Todos tenemos prejuicios, ya sean conscientes o inconscientes, y los investigadores y practicantes profesionales no son una excepción.
  • No es necesario tener una formación profesional o académica para participar en una investigación o hacer una contribución valiosa al conocimiento. Por lo tanto, el proceso de investigación es una oportunidad de aprendizaje mutuo tanto para los profesionales como para otras partes interesadas.
  • Las personas más cercanas a un problema o intervención tienden a saber más sobre él y cómo les afecta. Por lo tanto, pueden ayudar a generar conocimientos más relevantes y correctos que los que podría generar un extraño por sí solo.

Todos los enfoques participativos involucran a partes interesadas que generalmente no están involucradas en el proceso de investigación y producción de conocimiento. En nuestro trabajo como profesionales de SyE, las partes interesadas más excluidas suelen ser las personas y las comunidades que son los beneficiarios previstos de una intervención. Es la participación de estas partes interesadas en lo que me enfocaré en este artículo (usando "comunidades" como abreviatura).

La medida en que las comunidades participan en un enfoque determinado variará de acuerdo con los objetivos finales de nuestro proceso de SyE. Estos pueden variar desde ser funcionales hasta ser transformadores. Podemos pensar en los procesos de SyE como funcionales cuando buscan producir nuevos conocimientos en un campo en particular o sobre el desempeño de una intervención en particular de acuerdo con las preguntas y los objetivos establecidos por los profesionales. Podemos pensar en ellos como transformadores cuando usamos SyE y el conocimiento que producimos con el propósito de actuar o cambiar según lo definido e impulsado por la comunidad. En consecuencia, podemos pensar en los niveles de participación como en un continuo, volviéndose más o menos efectivos y significativos según los objetivos del proceso de SyE y la distribución de poder dentro de él.

Continuum de participación
Continuum de participación

En un extremo de la escala, el practicante informa o consulta con la comunidad. Esta es la participación sólo de nombre. Las organizaciones a veces lo usan para legitimar un hallazgo o decisión en particular, incluso si no hay codirección sobre el proceso de SyE o propiedad conjunta sobre los resultados. En el otro extremo de la escala, vemos una colaboración significativa entre el profesional y la comunidad que incluye la toma de decisiones y el liderazgo compartidos, o el empoderamiento de las comunidades para liderar el proceso de SyE por sí mismas y actuar sobre sus resultados. El rol del practicante aquí es facilitar más que dictar.

Ejemplos de enfoques y marcos participativos más transformadores, que se utilizan especialmente en contextos de desarrollo, incluyen:

  • Investigación acción participativa (IAP)
  • Investigación participativa basada en la comunidad (CBPR)
  • Aprendizaje y acción participativos (PLA)
  • Evaluaciones rurales participativas (ERP)
  • Evaluación participativa transformadora

¿Cuándo podríamos utilizar enfoques participativos en nuestros procesos de SyE?

Para que la participación sea efectiva y significativa, debe integrarse en cada fase de nuestro ciclo de SyE, cuando nosotros:

  • Planificamos y diseñamos el sistema o la actividad de SyE
  • Recopilamos y analizamos datos
  • Actuamos en base a los hallazgos de SyE
  • Reflexionamos sobre la efectividad del sistema de SyE para mejorar el próximo ciclo.

La comunidad debe participar en cada fase, y debemos actuar sistemáticamente sobre los resultados de la participación durante cada fase en las fases posteriores del ciclo. También debemos centrarnos en construir y mantener relaciones culturalmente receptivas entre los profesionales y los participantes a lo largo del ciclo de SyE. Esto fomenta la confianza y la seguridad, mejora la calidad de la participación y por lo tanto genera hallazgos más representativos y útiles para un mayor impacto.

Fases del ciclo de SyE
Fases del ciclo de SyE

Les avantages du S&E participatif

Il existe à la fois des raisons pratiques et des considérations relatives aux droits humains pour l'utilisation du S&E participatif dans les interventions humanitaires et de développement.

Los beneficios del SyE participativo

Existen razones instrumentales y consideraciones de derechos humanos para utilizar el SyE participativo en las intervenciones humanitarias y de desarrollo.

La participación mejora la calidad del SyE y nuestras intervenciones

Hay beneficios de tener la participación de la comunidad durante todas las etapas del ciclo de SyE. La combinación de la experiencia teórica y metodológica de los profesionales con el conocimiento y las experiencias del mundo real de las comunidades participantes puede mejorar nuestros procesos, herramientas, datos y hallazgos.

Fase Beneficios Notas y ejemplos
Planear - Indicadores y preguntas de seguimiento y evaluación más relevantes y significativos, ya que se relacionan con la vida de los participantes.
- Más motivación comunitaria para participar en los procesos de SyE.
- Expectativas más realistas sobre los resultados del proceso de SyE y la intervención.
- Indicadores de conceptos abstractos como "mejora del bienestar", "disminución de la angustia" o "reintegración de ex niños soldados"
- Las expectativas más realistas pueden, a su vez, generar menos frustración y una mayor satisfacción de la comunidad.
Diseñar - Herramientas más útiles y culturalmente relevantes.
- Mejor manejo de temas sensibles o tabú en nuestros métodos, procesos y herramientas de recolección de datos, ya que la comunidad sabe mejor cómo abordar estos temas de una manera culturalmente aceptable.
- Capacidad para generar conocimientos tanto cualitativos como cuantitativos, ya que los enfoques participativos son compatibles con ambos tipos de investigación.
- Procesos de recopilación y análisis de datos más inclusivos, ya que la comunidad puede identificar mejor las barreras a la participación.
- El uso de terminología local nos ayuda a formular mejores preguntas de encuestas y entrevistas porque los encuestados las entienden mejor.
- Los métodos participativos para producir datos numéricos pueden ser preferibles a las encuestas convencionales en términos de rentabilidad y la capacidad de colocar valores numéricos en categorías cualitativas complejas (como la clasificación de riqueza o bienestar).
- Las barreras a la participación pueden incluir un momento o lugar inadecuado para la recopilación de datos, o sentirse inhibido en ciertos entornos debido a las estructuras de poder de la comunidad.
Recolectar - Mayor confianza en el proceso de recolección de datos porque está diseñado y / o liderado por la comunidad, lo que genera mayores tasas de participación y, por lo tanto, datos más representativos.
- Capacidad mejorada para capturar respuestas e ideas inesperadas pero significativas debido a un proceso flexible y abierto.
- Capacidad mejorada para capturar datos sobre temas sensibles, ya que los participantes pueden estar más abiertos a compartir puntos de vista y creencias. utilizando diferentes modos de expresión y a través de actividades grupales.
- Datos de alta precisión mediante la recopilación de datos grupales.
- Los diferentes modos de expresión incluyen modos visuales (p. Ej., Mapeo corporal), escrito (p. Ej., Llevar un diario), oral (p. Ej., Narración de cuentos) y tangible (p. Ej., Contar con objetos pequeños)
- La recopilación de datos grupales es especialmente precisa si se trata de conocimiento público, de modo que los participantes puedan corregir o agregar información antes de llegar a un consenso (las aplicaciones incluyen mapeo de la comunidad y del censo)
Analizar - Capacidad mejorada para lidiar con la complejidad en el análisis aprovechando la comprensión de la comunidad del contexto cultural, social y político.
- Capacidad mejorada para verificar datos y validar hallazgos y conclusiones.
- Capacidad mejorada para generar conocimientos a partir de datos que son relevantes a nivel local.
- Aprendizaje mutuo y beneficio para los profesionales y las comunidades.
- En el contexto de una evaluación, la causalidad se investiga más fácilmente al explorar la comprensión de los encuestados de los factores clave que contribuyeron a un impacto identificado (por ejemplo, utilizando diagramas de flujo participativos).
- Los resultados y las conclusiones se vuelven más válidos a través del debate y la discusión en la comunidad, lo que permite reconciliar las diferencias o que las personas "estén de acuerdo en no estar de acuerdo".
- Las comunidades pueden beneficiarse de la participación como un proceso de empoderamiento que ayuda a identificar y fortalecer las capacidades locales, mientras que los profesionales y las organizaciones cumplen con requisitos más funcionales (por ejemplo, informes de donantes) y aprenden para futuras intervenciones.
Actuar - Comunicación más eficaz y culturalmente competente sobre los hallazgos.
- Capacidad mejorada para traducir los hallazgos en acciones significativas.
- Más oportunidades para que las comunidades piensen y desarrollen soluciones por sí mismas, y para que las intervenciones integren el conocimiento, las estrategias y las capacidades locales.
- Impacto potencialmente positivo en la cohesión social en la comunidad debido a la colaboración y la dinámica de poder cambiante a favor de grupos e individuos marginados.
- La acción significativa puede incluir hacer un cambio dentro del proyecto basado en datos de monitoreo, o que la comunidad use los hallazgos de SyE para obtener o mejorar un servicio o para hacer valer sus derechos.
Reflejar - Mejor comprensión de la eficacia y la calidad de nuestro sistema de M&E.
- Aprendizaje más profundo y útil para futuras mejoras.
- Comprender la utilidad de nuestras herramientas y métodos de recopilación de datos, y la calidad de nuestros procesos de M&E (en términos de participación e inclusión especialmente)
Adaptado de “A Short Guide to Community Based Participatory Action Research: A Community Research Lab Guide” by J.C. Burns, D.Y. Cooke, and D.Y. Schweidler, C., 2011, Advancement Project-Healthy City Community Research Lab;
“Participatory Approaches” por Gujit, I., 2014, Methodological Briefs: Impact Evaluation 5, UNICEF Office of Research, Florence;
“Who Counts? The Quiet Revolution of Participation and Numbers” por R. Chambers, 2007, Institute of Development Studies;
y “Who counts? The power of participatory statistics” por J. Holland, 2013, Practical Action Publishing.

Los beneficios de la participación para nuestros procesos de SyE también tienen efectos positivos en nuestras intervenciones. Se vuelven más sensibles a las necesidades y prioridades reales (en lugar de supuestas), más eficaces y más capaces de mitigar las posibles consecuencias negativas. La participación también conduce a una mayor responsabilidad y transparencia y puede hacer que los resultados sean más sostenibles debido a una mayor apropiación y empoderamiento de la comunidad.

La participación es un derecho

Además de ser una buena práctica, la participación es un derecho humano. La participación en este sentido se refiere a la implicación efectiva y significativa de las personas en los procesos de toma de decisiones que les afectan. Varios tratados internacionales describen aspectos de este derecho, incluido el Pacto Internacional de Derechos Económicos, Sociales y Culturales y el Pacto Internacional de Derechos Civiles y Políticos. Otras convenciones y declaraciones internacionales han fortalecido el derecho a participar de grupos particulares, incluidas las mujeres, los niños, las personas con discapacidad, los pueblos indígenas y las personas pertenecientes a minorías nacionales o étnicas, religiosas y lingüísticas. La Declaración sobre el derecho al desarrollo también se refiere a la “participación libre y significativa en el desarrollo” (art. 2), reconociendo que la participación es “un factor importante en el desarrollo y en la plena realización de todos los derechos humanos” (art. 8.2). Establece que toda persona “tiene derecho a participar, contribuir y disfrutar del desarrollo económico, social, cultural y político” (art. 1.1).

Los desafíos del SyE participativo

Aunque el SyE participativo tiene muchos beneficios, no deja de tener sus desafíos. Aquí hay algunas cosas a tener en cuenta si queremos hacerlo bien:

  • Ser inclusivo y representativo

    Necesitamos pensar críticamente sobre el poder a lo largo del ciclo de SyE, teniendo en cuenta no solo las relaciones de poder entre el profesional y la comunidad, sino también las que existen dentro de la propia comunidad. Nuestro rol como profesionales es trabajar para lograr una mayor equidad en estas relaciones a través de la facilitación y evitar que las desigualdades se reproduzcan en los procesos de SyE. Nuestros métodos, herramientas y procesos deben elegirse y diseñarse para incluir a los grupos marginados y aquellos en riesgo de discriminación. De lo contrario, pueden estar dominados por voces poderosas en la comunidad y nuestros hallazgos no serán representativos y, por lo tanto, menos válidos. Por ejemplo, los hombres pueden dominar a las mujeres y los adultos pueden dominar a los jóvenes en las discusiones de grupo. Los líderes políticos, culturales y religiosos pueden dominar la toma de decisiones y la priorización en la comunidad.

  • No hacer daño: considerando la ética y la seguridad

    Realizar un SyE participativo de una manera ética y segura requiere una planificación y comunicación cuidadosas. Esto se debe a que a menudo implica una interacción social intensa y a largo plazo entre los profesionales y otros participantes. Necesitamos considerar la mejor manera de obtener el consentimiento libre, previo e informado de la comunidad; establecer las normas y reglas básicas que deben seguirse durante todas las interacciones sociales; y decidir cómo recopilamos, almacenamos, analizamos, interpretamos y divulgamos los datos para que no infrinjan la privacidad de los participantes ni los dañan de ninguna manera.

    Necesitamos sopesar los beneficios de los métodos participativos con los riesgos. Es importante tener en cuenta que estos métodos exigen tiempo y energía de las personas, pueden crear expectativas que podrían convertirse en una fuente de frustración e incluso aumentar las tensiones entre individuos y grupos de personas. También debemos tener especial cuidado cuando trabajamos con poblaciones vulnerables, como los niños. Por ejemplo, los facilitadores deberían ser cuidadosamente examinados y capacitados sobre los derechos y la protección del niño, se debería ofrecer atención psicosocial a los participantes y deberían existir mecanismos de derivación, entre otros. Existen estándares, normas y pautas de participación a las que los profesionales pueden referirse (consulte la lista de lecturas adicionales a continuación para ver algunos ejemplos).

  • Recursos, velocidad y escala

    Los facilitadores capacitados son fundamentales para garantizar la confiabilidad de los datos recopilados mediante métodos participativos. Una buena facilitación depende de habilidades, actitudes y comportamientos especiales, y requiere capacitación y experiencia. Los miembros de la comunidad también pueden necesitar algo de capacitación para aprender a usar de manera efectiva los métodos y herramientas propuestos. Estos requisitos pueden resultar en costos iniciales potencialmente más altos y una implementación más lenta, incluso si los resultados finales siguen siendo muy rentables (en comparación con alternativas como las encuestas convencionales a gran escala, por ejemplo). Construir y gestionar buenas relaciones laborales y confianza también puede llevar más tiempo, al igual que la discusión y la negociación que se requieren para tomar decisiones compartidas en cada fase del proceso.

    Por lo tanto, puede resultar más difícil ampliar el SyE participativo sin dejar de mantener un nivel adecuado de representatividad. También significa que no todos los enfoques participativos serán aceptables en todas las circunstancias: por ejemplo, si la necesidad inmediata de salvar vidas en una crisis humanitaria supera los beneficios de la participación. Incluso en circunstancias desafiantes como estas, sin embargo, todavía es posible y deseable fomentar la participación en la medida en que se pueda hacer de manera segura y ética. Podemos utilizar estrategias en el extremo inferior del continuo de participación (que informan, consultan o involucran) y asegurarnos de que todos los grupos estén al menos representados, incluso si no pueden participar directamente.

  • Escepticismo y no aceptación entre los tomadores de decisiones

    El SyE participativo es metodológicamente flexible y diverso. Las preguntas, los métodos y las herramientas de investigación se diseñan de forma colaborativa y se adaptan al contexto. Esto contrasta con los enfoques convencionales de la investigación en ciencias sociales, y especialmente con la investigación cuantitativa, que tienden a tener formas más rígidas de hacer las cosas y, a menudo, todavía se considera que producen hallazgos más válidos y confiables. Los métodos participativos están sujetos a muchas de las mismas críticas metodológicas y epistemológicas que los métodos cualitativos. Su aplicación al SyE en contextos humanitarios y de desarrollo también es todavía relativamente limitada en comparación con otros campos. Si queremos utilizar un SyE participativo, esto a menudo significa que tenemos que persuadir a otros de su utilidad y legitimidad. Es especialmente importante asegurar la aceptación y el apoyo para este tipo de participación de los tomadores de decisiones que tienen poder sobre el proyecto, como los donantes, y aquellos que tienen el poder de efectuar cambios, como los responsables de la formulación de políticas. No podemos pedir a las comunidades que dediquen su tiempo y energía a participar en SyE si no creemos que los responsables de la toma de decisiones tomarán nuestros hallazgos en serio.

Participación, poder y acción: algunas reflexiones finales

Los enfoques participativos de la asistencia humanitaria y el desarrollo no son nuevos. Sin embargo, la participación en los procesos de SyE no es tan común como la participación en la planificación o implementación del proyecto. Esto puede deberse a que las creencias tradicionales sobre la investigación y la producción de conocimiento son aún más comunes y predomina una visión funcional del propósito del SyE. Quizás también se deba a que los enfoques participativos requieren que miremos críticamente el poder y, en última instancia, lo redistribuye. Por lo tanto, el SyE participativo no se trata solo de "ellos", sino también de "nosotros". Valora el conocimiento, las perspectivas y las capacidades locales y busca empoderar a las comunidades a través del SyE. También nos insta a estar más abiertos a aprender de los demás y a reflexionar sobre nuestro propio rol en la dinámica de poder, tanto como profesionales de SyE como profesionales humanitarios y de desarrollo en general.

Este tipo de autorreflexión puede resultar incómodo y conflictivo. El tema del sexismo sistémico, el racismo y el capacitismo en los sectores de la ayuda humanitaria y el desarrollo merece más palabras y más atención de la que puedo dedicar al tema aquí. Las complejas relaciones de poder entre los profesionales y las comunidades afectadas se basan en la historia de los propios sectores, que evolucionaron dentro de estructuras y discursos coloniales y patriarcales de larga data. Si bien estos temas se han abordado recientemente de manera más abierta en el contexto de #MeToo, #AidToo y el movimiento Black Lives Matter, la necesidad de reflexión y conversación está lejos de terminar.

Los enfoques participativos de SyE nos invitan a pensar en qué sistemas de creencias son privilegiados en nuestro trabajo, qué conocimientos y prioridades importan más y por qué hacemos el trabajo que hacemos en primer lugar. Si nuestro objetivo final es apoyar el impacto del mundo real y el cambio transformador a través de SyE, entonces la participación de las comunidades afectadas es una condición previa. No se puede tener empoderamiento sin participación: el empoderamiento no es algo que "hacemos" a otras personas, sino que es en sí mismo un proceso participativo que involucra a las personas en la reflexión y la investigación para comprender el poder que tienen y tomar medidas para el cambio como ellos lo definen. Como expertos técnicos y custodios de datos, evidencia y conocimiento, los especialistas en SyE tienen el poder de influir en cómo se realiza el SyE y qué voz cuenta. Podemos defender con autoridad la participación en SyE como medio para un fin y como un fin en sí mismo.

El equipo de ActivityInfo desea agradecer a la Sra. Naomi Falkenburg por esta guía detallada y perspicaz sobre Monitoreo y Evaluación inclusivos. La Sra. Falkenburg es un socio certificado de ActivityInfo desde julio de 2020.

Naomi Falkenburg es una consultora independiente que trabaja con actores humanitarios y de desarrollo para diseñar, gestionar y aprender de sus intervenciones y realizar investigaciones y análisis profundos. Naomi cree que las intervenciones más impactantes están basadas en la evidencia y son inclusivas, y le apasiona empoderar a otros para que utilicen el SyE con este fin. Antes de convertirse en consultora, Naomi trabajó en varias agencias de la ONU y ONG internacionales en África Occidental, Europa y Asia Oriental, en temas como igualdad de género, inclusión de la discapacidad, migración y desplazamiento forzado, trabajo decente y desarrollo de habilidades para jóvenes, y digital. inclusión. Está certificada en gestión de proyectos para el desarrollo (Proyecto DPro) y miembro de la Asociación Internacional de Profesionales en Asistencia y Protección Humanitaria (PHAP). Naomi tiene una maestría del Departamento de Desarrollo Internacional de la Universidad de Oxford y una licenciatura en Política y Estudios Internacionales de la Universidad de Warwick.

Fuentes y lectura adicional

Ejemplos de directrices para la investigación participativa y el SyE