Evaluación descentralizada para la toma de decisiones basada en la evidenciaOficina de Evaluación del WFP

Sistema para el Aseguramiento de la Calidad de las Evaluaciones Descentralizadas (DEQAS)

Control de Calidad para el Informe de Evaluación DescentralizadaVersión Junio 2018

[Título de la evaluación descentralizada]Contenido General

Requisitos generales Observaciones/estatus

Tamaño: El informe debe ser conciso y no exceder las 46 páginas, excluyendo los apéndices y el resumen ejecutivo.Accesibilidad Está escrito de manera clara y comprensible La manera como están estructurados los hallazgos de la

evaluación le permite al lector entender los mismos Los mensajes clave están resumidos y resaltados El informe presenta un buen balance entre la información

descriptiva y la analítica Se hace uso correcto de la terminología El informe no contiene errores de gramática, ortografía ni de

puntuación El tono del informe es constructivo El lenguaje usado en el informe es simple y claro. El informe es

de fácil lectura.

Credibilidad El informe presenta los aciertos y fallas, y los aspectos positivos

y negativos de manera balanceada. El informe plantea asuntos críticos, si es necesario Los hallazgos y conclusiones del informe están completamente

basados en evidencias.Formato

Se han usado los formatos y plantillas del WFP Las siglas están explicadas cuando se usan por primera vez Las páginas y los párrafos tienen numeración electrónica Incluye tabla de contenidos y listado de tablas, gráficas, figuras

y apéndices Se ha hecho uso pertinente de tablas y diagramas y los mismos

están numerados Se incluye listado de siglas El informe provee las fuentes de los datos/citas usados (ya sea

directamente en el pie de tabla/gráfico o en las notas al pie de página)

Portada

Hace uso del Formato para Informe DEQAS del WFP El título de la evaluación descentralizada es el mismo que el

incluido en los TDR Indica fecha y estatus (borrador/final) del informe en la portada

Resumen EjecutivoRequisito general: El resumen ejecutivo debe proveer una síntesis completa y balanceada de los hallazgos, conclusiones y recomendaciones de la evaluación, en no más de 5 páginas.

Contenido Esperado Criterios de evaluación Observaciones/estatus

Introducción con: las características principales de

la evaluación, incluyendo el tipo y periodo de laevaluacions, su propósito y objetivos,

los usuarios principales/audiencia esperada, el contexto y el tema de la evaluación.

Metodología Hallazgos clave respecto a todas

las preguntas de la evaluación

El resumen ejecutivo es coherente, evidente y está completo

La mayor parte de la sección incluye los hallazgos y conclusiones clave

Todas las recomendaciones se presentan de manera breve

El Resumen ejecutivo E D I n f o r m e C o n t r o l d e C a l i d a d – V e r s i ó n j u n i o d e 2 0 1 8 P a g e 2 | 10

Conclusiones generales Recomendaciones

puede ser utilizado de manera particular como apoyo en la toma de decisiones

Su tamaño no excede las 5 páginas

1. IntroducciónRequisito general: Resumen sucinto del tema, el contexto y las características de la evaluación, explicando claramente cómo y por qué la misma se llevó a cabo. No debe exceder las 5 páginas.

Contenido Esperado Criterios de evaluación Observaciones/estatus

Indicación clara de las razones de la evaluación

Objetivos específicos Alcance de la evaluación Partes interesadas en la evaluación Usuarios específicos y cómo los

mismos usarán los hallazgos de la evaluación

La introducción prepara el escenario de la evaluación con claridad, incluyendo su justificación, alcance, las partes interesadas y los usuarios.

La información es sucinta y está enfocada

1.1 Resumen del tema de la evaluaciónInformación factual sobre el tema de la evaluación, incluyendo: El tipo de intervención (operación, actividad, área temática, modalidad de transferencia, proyecto piloto) Alcance geográfico del tema de la evaluación Fechas relevantes: fecha de aprobación, fecha de inicio y fecha de finalización La producción planeada al momento del diseñoo Número de beneficiarios

(planeados y revisados), desagregados por género/actividad

La información es relevante y esencial para entender el tema de la evaluación:o De qué se tratao Cuándo se diseñóo Cuál es el

objetivo/alcance beneficiarios

o Cuáles son los resultados planeados

o Quién participa en su implementación

o Cuál es el valor de las contribuciones clave (valor en $)

o Cuál es la producción planeada (MT, Efectivo y

E D I n f o r m e C o n t r o l d e C a l i d a d – V e r s i ó n j u n i o d e 2 0 1 8 P a g e 3 | 10

o Cantidad de las transferencias (alimentos, dinero en efectivo, cupones) planeados y reales

o Cualquier otra cifra de producción planeada y real

Resultados planeados en el momento del diseño y reales Actividades clave Socios principales (gobierno, ONG, bilaterales, multilaterales) Recursos (porcentaje de los requerimientos totales que haya sido financiado) y donantes claves. Si los recursos proceden de un fondo común, o si son un componente/parte de una actividad de alguna de las operaciones, se debe mostrar la parte asignada al tema de la evaluación Evaluación del Marco lógico o de alguna herramienta similar desde la perspectiva de la evaluación Presentación de cualquier otra actividad, intervención u operación previa o simultánea relevante Presentación de cualquier ajuste al diseño original Inclusión de referencias a:o Evaluaciones o revisiones anteriores relacionadas con el temao Mapas/gráficos para ilustración (a incluir en apéndices)

Valor en $ de los cupones)

Resalta los asuntos relevantes de evaluaciones y revisiones anteriores relacionadas con la evaluación

Se explican las dimensiones de género

Se explican las diferencias entre el diseño original y la implementación, según corresponda

1.2 ContextoResumen del contexto directamente relacionado con la evaluación, incluyendo: Pobreza y seguridad alimentaria y

nutrición Políticas y prioridades del gobierno

La información es relevante y necesaria para entender las implicaciones para el tema de la evaluación

Los indicadores socioeconómicos son pertinentes y se ha

E D I n f o r m e C o n t r o l d e C a l i d a d – V e r s i ó n j u n i o d e 2 0 1 8 P a g e 4 | 10

Asuntos humanitarios Datos clave relacionadas con ODS

2 / ODS 17 en el contexto (región, país, nivel subnacional / local)

Dimensiones de género dentro del contexto

Eventos externos clave Características de la asistencia

internacional en el área Otras intervenciones o actividades

del WFP en el área Programas o acciones por parte de

otros actores clave

identificado la información y datos de tendencias más actualizados

Se describe el contexto del género en el país

La información se extrae de y es consistente con el informe de inicio, el cual se ha actualizado, según corresponda.

La información está explícitamente dirigida al tema de la evaluación y no está presentada de manera genérica.

1.3 Metodología de la evaluación y limitaciones

Resumen de la metodología empleada en la evaluación

Presentación de las preguntas principales de la evaluación

Presentación y justificación de los criterios de evaluación aplicados (y de ser posible, interpretados para el tema)

Inclusión de un resumen del enfoque metodológico general

Presentación de los métodos y muestreo específicos usados

Se expresa cómo se plantearon la validez y la confiabilidad

Explicación de las limitaciones encontradas en los métodos o en la disponibilidad de los datos y las estrategias de mitigación aplicadas/implicaciones en los hallazgos

Explicación de las consideraciones de género para los métodos de recopilación de datos

La información le permite al lector entender cómo se llevó a cabo la evaluación

El enfoque metodológico es integral y presenta un enfoque sistemático que genera confianza en la credibilidad de la evaluación

El enfoque metodológico es coherente, lógico y está en línea con los TDR y con el informe de inicio

Los métodos específicos y el muestreo aplicado son pertinentes al enfoque metodológico y son factibles/apropiados

Se incluyen las limitaciones encontradas y sus efectos en la evidencia

La declaración sobre la validez y la confiabilidad genera confianza en la

E D I n f o r m e C o n t r o l d e C a l i d a d – V e r s i ó n j u n i o d e 2 0 1 8 P a g e 5 | 10

Inclusión de un apéndice específico con los detalles completos

Describir cómo la evaluación ha considerado y gestionado la ética, y qué medidas de seguridad se aplicaron durante la evaluación.

evidencia Los métodos demuestran

que se tuvieron en cuenta la equidad de género y el empoderamiento de las mujeres

La metodología completa se suministra en un apéndice (actualizado desde el Informe de Inicio con relación a su implementación real).

2. Hallazgos de la evaluaciónRequisito general: Esta sección constituye la parte más extensa del informe de evaluación. Debe contener información que soporte la(s) conclusión(es) del equipo de evaluación frente a las preguntas claves de la evaluación. No debe exceder las 30 páginas.

Contenido Esperado Criterios de evaluación Observaciones/estatus

Presentación clara del análisis de datos con referencia a todas las preguntas de la evaluación, incluyendo la información triangulada.

Los hallazgos están corroborados con evidencia fiable que ha sido verificada en cuanto a su exactitud, consistencia y confiabilidad

Exposición de las limitaciones o de la falta de evidencias

Indicación de si la evidencia no da resultados concluyentes

Citación exacta de las fuentes de información

Los hallazgos corroboran adecuadamente las

Los hallazgos han sido formulados de manera clara y se basan en la evidencia recolectada

Los hallazgos están triangulados

Los hallazgos usan fuentes externas de información confiables

Los hallazgos abarcan los criterios de evaluación seleccionados

Se proveen las fuentes de información y, cuando la evidencia no presenta resultados concluyentes, se indica claramente.

Los hallazgos abordan E D I n f o r m e C o n t r o l d e C a l i d a d – V e r s i ó n j u n i o d e 2 0 1 8 P a g e 6 | 10

conclusiones y recomendaciones hechas por el equipo de evaluación (información en la próxima sección)

Todos los hallazgos usan un lenguaje inclusivo en cuánto al género (y la equidad) y los datos están desagregados.

Los hallazgos están presentados de manera que muestren consideración al género y a la cultura.

cualquier limitación o falta de evidencias

Se hace uso de ayudas visuales claras y de fácil comprensión para ilustrar la discusión

Las fuentes de información están citadas

Los hallazgos tienen un balance entre el detalle y la síntesis

Los hallazgos reflejan el análisis de género y abordan la inclusión, incluyendo el uso de datos desagregados por género. Se presentan hallazgos por cada pregunta de evaluación

3. Conclusiones and RecomendacionesRequisito general: Las conclusiones y recomendaciones son un componente central del informe de evaluación. Se deben incluir lecciones aprendidas y buenas prácticas, según corresponda. La sección no debe exceder las 5 páginas.

Contenido Esperado Criterios de evaluación Observaciones/estatus

3.1 Conclusiones

Las conclusiones son un resultado lógico de los hallazgos y están basadas en la evidencia

Se hace clara referencia a los hallazgos

Valoración breve y balanceada de los hallazgos de la evaluación con relación a los criterios de evaluación y a las

Las conclusiones se generaron de manera lógica a partir de los hallazgos, haciendo una conexión clara y explícita a los mismos

Se presenta un panorama concluyente, formado a partir de las secciones anteriores del informe

Se incluye un resumen frente a los criterios de evaluación

E D I n f o r m e C o n t r o l d e C a l i d a d – V e r s i ó n j u n i o d e 2 0 1 8 P a g e 7 | 10

preguntas seleccionadas. Esta información puede estar organizada por criterio, tema o por pregunta de evaluación

Las conclusiones son sucintas y sintetizan los hallazgos comunes

Se reconocen los diferentes grupos de partes interesadas y los aspectos de género en las conclusiones

No se presenta ninguna evidencia nueva que no se halla presentado en los hallazgos

Las conclusiones son imparciales y están libres de sesgo

3.2 Lecciones aprendidas y buenas prácticas (opcional)

Presentación de lecciones que el WFP y sus socios puedan usar en contextos a futuro para mejorar los proyectos y programas del WFP.

Inclusión de lecciones negativas y positivas

Presentación de buenas prácticas que representan estrategias o intervenciones exitosas que han tenido buen desempeño;

Las buenas prácticas que están en desarrollo se pueden presentar (es decir, intervenciones que tienen potencial para su buen desarrollo)

Las lecciones presentadas contribuyen a ampliar el aprendizaje

Las lecciones indican de manera específica lo que se debe repetir o evitar para guiar las acciones a futuro

Las buenas prácticas se pueden replicar potencialmente

Las buenas prácticas describen el por qué han funcionado

E D I n f o r m e C o n t r o l d e C a l i d a d – V e r s i ó n j u n i o d e 2 0 1 8 P a g e 8 | 10

3.3 Recomendaciones

Uso de párrafos cortos para describir un máximo de 10 recomendaciones, pertinentes todas al tema de la evaluación

Las recomendaciones se derivan de manera lógica a partir de los hallazgos y de las conclusiones y están conectadas claramente a la evidencia

Las recomendaciones son realistas/factibles

Las recomendaciones están priorizadas, llevan una secuencia y están dirigidas a grupos objetivo específicos

Se abarcan los asuntos de género dentro de las recomendaciones, según corresponda

Las recomendaciones se derivan de manera lógica de los hallazgos y de las conclusiones

Están basadas en el análisis y en la evidencia recolectada

Son realistas (se pueden implementar), y presentan opciones razonables para el mejoramiento

Son claras y específicas y están agrupadas//presentadas con un orden lógico

Están priorizadas y tienen un plazo claro para su implementación

El grupo objetivo para cada recomendación es claro y pertinente a los usuarios específicos de la evaluación

El género está integrado dentro de las recomendaciones y, de ser posible, se dan recomendaciones para mejorar el desempeño del WFP en cuanto a cuestiones de género.

Apéndices Observación Observaciones/estatus

Los Apéndices deben sustentar y extender el texto Los apéndices están listados

E D I n f o r m e C o n t r o l d e C a l i d a d – V e r s i ó n j u n i o d e 2 0 1 8 P a g e 9 | 10

del informe principal.Deben incluir: Términos de Referencia Documentos revisados Entrevistas a Partes

interesadas y/o detalle de cualquier otra técnica cualiltativa utilizada

Herramientas de recopilación de datos

Explotación de datos cuantitativos (aquellos relevantes para el análisis)

Bibliografía Listado de siglas y

acrónimos

y numerados Los Apéndices están

referenciados, según corresponda, en la parte principal del informe

Se incluyen las herramientas para la recopilación de los datos

No todos los documentos de trabajo se incluyen

E D I n f o r m e C o n t r o l d e C a l i d a d – V e r s i ó n j u n i o d e 2 0 1 8 P a g e 10 | 10