UNN131September 1982

Manual parael seguimiento y evaluaciónde proyectos agrícolasy de desarrollo rural

D.J. Casley y D.A. Lury

Pub

lic D

iscl

osur

e A

utho

rized

Pub

lic D

iscl

osur

e A

utho

rized

Pub

lic D

iscl

osur

e A

utho

rized

Pub

lic D

iscl

osur

e A

utho

rized

Manual parael seguimiento y evaluación

de proyectos agrícolasy de desarrollo rural

D.J. Casley y D.A. Lury

Dependencia de Seguimiento y Evaluación,Departamento de Agricultura y Desarrollo Rural

Banco Mundial.Septiembre de 1982

NOTA DEL TRADUCTOR

No existe aún una traducción aceptada universalmente de lapalabra inglesa "monitoring", cuando se refiere a la ejecuci6n deproyectos, al idioma castellano. Diversos traductores han utilizado lasvariantes "vigilancia", "acompañamiento", "observaci6n", y "seguimiento".La primera tiene una connotacion demasiado activa, casi policial, en tantoque la segunda, de amplia utilización en el idioma portugués, nos haparecido demasiado pasiva. El término "observaci6n" es todavía más pasivoy, peor aún, induce a error, porque se confunde con los métodos deobservación de la realidad (ver, por ejemplo, las Partes 5 y 6, másadelante). Se ha escogido, entonces, el término "seguimiento", a pesar deno ser totalmente satisfactorio, porque tiene en castellano una connotaci6nactiva, requiere de un sujeto que sigue, de un objeto que es seguido y, enmuchos casos, de una meta a alcanzar o un objetivo a lograr. Más aún, elque sigue debe estar comparando permanentemente su ubicación respecto de lacosa o persona seguida, y las velocidades relativas de uno y otro, ypronostica d6nde se encontrarán éstos en cada uno de los siguientesmomentos, tareas muy similares a las del "seguimiento" (monitoring) de unproyecto. El término compuesto "control de seguimiento", utilizado ya enalgunas publicaciones del Banco, parecería técnicamente mejor, pero, enaras de la brevedad, se ha utilizado s6lo "seguimiento" en este texto.

En algunos países y grupos se usa directamente la trasliteraci6n"monitoría". Esta palabra no ha sido aceptada en castellano, pero podríabasarse un argumento al respecto en el hecho de que la palabra castellana"monitor" significa casi con perfecta coincidencia lo que "monitoring"quiere decir en inglés cuando se usa respecto a la ejecución de proyectos.Sin embargo, se decidió rechazar la facil tentaci6n de intentar darlecurso, porque no se ha encontrado una manera satisfactoria de formar elverbo y el adjetivo correspondientes. "Monitar" suena extraño y ni"monitorear" ni "monitorizar" suenan a buen castellano. Tampoco parecebien hablar de una cosa o variable "monitada", "monitoreada" o"monitorizada". ¿C6mo se dice la "accion y efecto de" ejercer la tarea quela Real Academia le reconoce al "monitor"? -

PREFACIO

La convicci6n de que es necesario seguir la ejecuci6n de losproyectos agricolas y de desarrollo rural, y luego evaluarlos, se haextendido rápidamente en los iltimos años. Una alta proporción de dichosproyectos incluye hoy componentes específicos para este prop6sito.

En muchos casos, dicha convicción no ha estado acompañada de lacapacidad de diseñar sistemas que permitan ejercer el seguimiento y llevara cabo la evaluqción a costos razonables. La Unidad de Seguimiento yEvaluación, en el Departamento de Agricultura y Desarrollo Rural del BancoMundial, ha llevado a cabo, durante los pasados tres afños, investigacionesanalíticas, seminarios regionales, y estudios de caso sobre experienciascon sistemas de seguimiento y evaluaci6n.

Este Manual, preparado en conjunto con las Pautas, establece enalgún detalle las cuestiones relativas a la ejecución de sistemas deseguimiento y evaluaci6n y discute varios aspectos de la obtenci6n y elanálisis de datos. El trabajo preparatorio inicial fue el resultado de unesfuerzo conjunto del personal de la Unidad de Seguimiento y Evaluaci6n.Al preparar este Manual, los autores sintetizaron este trabajo y utilizaronsu propia pericia en estos campos.

Como se indica en la introducci6n, se espera que este Manual seaútil a quienes tienen la responsabilidad de administrar sistemas deseguimiento y evaluaci6n, así como a los encargados de la administraci6n deproyectos. El Manual no es un texto extenso. Más bien, en el se elaboraaquellos conceptos que se estimaron esenciales para seguir y evaluarproyectos, y se provee un marco de referencia para dichos sistemas. Elprop6sito básico de los sistemas de seguimiento y evaluaci6n es proveer unaherramiento para la administraci6n de proyectos. Al discutir los aspectosrelativos a obtenci6n y análisis de datos, el Manual destaca métodossimples y pragmáticos, que son a veces olvidados en esta era de avanzadoscomputadores y abstrusos análisis econom5tricos.

Leif E. ChristoffersenDirector Adjunto

Departamento de Agricultura y Desarrollo Rural

INDICE

Página

Prefacio

PARTE 1: MARCO PARA EL SEGUIMIENTO Y LA EVALUACION DEPROYECTOS AGRICOLAS Y DE DESARROLLO RURAL 1

1.1 Introducci6n 11.2 Seguimiento y evaluación: El marco básico 41.3 El seguimiento y la administración del proyecto 61.4 La evaluaci6n: Examen de los resultados 71.5 El seguimiento y la evaluación en el ciclo de

un proyecto 10

PARTE 2: SEGUIMIENTO 16

2.1 Administraci6n y seguimiento 162.2 Especificaci6n de objectivos y metas 182,.3 Seguimiento y contabilidad financiera 202.,4 Seguimiento de la dotaci6n de personal 212.5 Seguimiento de la infraestructura y de los

sistemas de entrega 232.6 Funci6n de la unidad de seguimiento 252.7 Comentarios finales 26

PARTE 3: EVALUACION: PROBLEMAS CONCEPTUALES Y OBJECTIVOSBASICOS 27

3.1 Introducción 273.2 Un modelo experimental científico 293.3 Cuasi-experimentación: El diseño de

grupos no-equivalentes 333.4 Cuasi-experimentación: El diseño de

series cronológicas interrumpidas 353.5 Investigaci6n de relaciones mediante

estudios de casos 373.6 Conclusiones prácticas 37

PARTE 4: LA SELECCION DE VARIABLES E INDICADORES 39

4.1 Los criterios para la selecci6n 39

Página

4.2 Respuestas medidas mediante escalas eindicadores sustitutos 43

4.3 Indicadores para el seguimiento 454.4 Indicadores para la evaluación 514.5 Información clasificadora o básica 58

PARTE 5: FUENTES DE LOS DATOS PARA SEGUIMIENTO Y EVALUACION 60

5.1 Datos existentes y organismos que recopilan 60

datos5.2 Utilización de datos ajenos al proyecto y

compatibilidad con los mismos 635.3 Fuentes de datos específicos de cada proyecto 645.4 ¿Estudios de casos o encuestas muestrales? 675.5 Combinaci6n de varios métodos de investigación 70

PARTE 6: METODOS DE OBSERVACION DIRECTA 72

6.1 Observaci6n directa 72

6.2 Observación rápida: Observación e investigaci6n 756.3 El estudio de casos 79

PARTE 7: EL MUESTREO Y EL DISEÑO DE ENCUESTAS MUESTRALES PARAEL SEGUIMIENTO Y LA EVALUACION 87

7.1 La l6gica básica del muestreo 877.2 La elección de la unidad y la base del muestreo 88

7.3 Elecci6n del procedimiento de muestreo 90

7.4 Tamaño de la muestra requerido y precisi6n dela encuesta 94

7.5 Componentes del error de la encuesta 100

7.6 Opciones fitiles para el diseño de muestras 102

7.7 Conclusiones 112

PARTE 8: OBTENCION DE DATOS MEDIANTE ENTREVISTAS Y MEDICIONES 113

8.1 Limitaciones de la entrevista y la medici6n 1138.2 Observaci6n y medici6n 115

8.3 La entrevista: Los períodos de recuerdo yde referencia 118

8.4 El tipo de entrevista 120

8.5 Diseio del cuestionario 124

Página

PARTE 9: ELABORACION Y ANALISIS DE DATOS 137

9.1 Introducci6n 1379.2 Preparaci6n de los datos 1389.3 Elaboración de datos 1409.4 La escala adecuada del análisis 1419..5 Presentaci6n y representaci6n de los datos 1439.6 Descripción y medici6n de la desigualdad 1519.7 Cuadros 2 x 2 1549.8 Normalización 1599.9 Advertencias sobre los análisis de correlaci6n

y regresión 161

PARTE 10: PRESENTACION DE LOS DATOS 167

10.1 Conversi5n de los datos en información 16710.2 Presentaci8n de la información 16810.3 Presentación de informes 171

Lista de Figuras

1 . Ciclo de los proyectos: Datos necesarios yfuentes de informaci6n 12

2 . Estimación de la labor realizada por losagentes de extensi5n 22

3 . Lista de comprobación de la informaci6n relativaa las prácticas de explotaci6n agrícola 123

4 . Ejemplo de un formulario sobre la composici6nde la familia 128

5 Cultivos presentes por parcela 1296 . Ejemplo de cuestionario sobre la familia 1307 . Ejemplo de un formulario precodificado 1328 . Ejemplo de un cuestionario estructurado o formal 1359 . Meta y rendimiento por área 14710 . Gráfico de rendimiento acumulado 15011 . Curva de Lorenz 152

Lista de Cuadros

1 . Variaciones aleatorias en torno a una tendencia 82 . Número de explotaciones agrícolas por tamaño de

explotaci6n 1053 . Rendimientos y producci6n bruta de maíz y maní

correspondientes a los períodos de cosechasde 1971 143

4 . Rendimientos y producci6n bruta de maíz y manícorrespondientes a los períodos de cosechasde 1972 144

5 . Maíz: Rendimientos medios por acre y producci6nbruta, 1971-72 145

6 . Maíz y maní: Cambios porcentuales en el rendi-miento medio por acre y en la producci6nbruta, 1971-72 146

7 . Meta y rendimiento por área 1488 . Distribuci6n del tamaño de las explotaciones 1519 . Adopci6n de la práctica por los agricultores del

proyecto y los de fuera del proyecto 15510 . Diferencias relativas al rendimiento por áreas

debidas a diferencias estructurales 16011 . Cálculo de las tasas normalizadas 16112 . Valores de b 1 , b 2 cuando b1 =2, b 2 =1 16413 . Efecto del error de medici6n al azar en la

correlaci6n entre una raz6n (Y/Z) y sucomponente común (Z) en que los dos estánrelacionados linealmente 165

14 . Ingresos por beneficiario 17315 . Número de fincas según el número de parcelas

de terreno 17416 . Distribuci6n porcentual de la parcela por zonas 174

PARTE 1

MARCO PARA EL SEGUIMIENTO Y LA EVALUACION DEPROYECTOS AGRICOLAS Y DE DESARROLLO RURAL

1.1 Introducci6n

El presente Manual se ha preparado juntamente con las "Pautaspara el dise?o de sistemas de seguimiento y evaluaci5n de proyectosagropecuarios y de desarrollo rural". En las Pautas se presentan a grandesrasgos materias importantes para el establecimiento y la operaci6n dedichos sistemas. En el presente Manual se examinan más a fondo estasmaterias y se exponen recomendaciones para abordarlas.

El Manual está orientado, en primer lugar, a los que trabajan enproyectos específicos, cuya tarea consiste en operar los sistemas deseguimiento y/o evaluaci6n, y, en segundo lugar, a los encargados deadministrar el proyecto, con el objeto de que puedan determinar mejor losresultados que cabe esperar de sus operaciones de seguimiento y evaluaci6n.

Al establecerse esta finalidad, se plantea inmediatamente unalimitaci6n. Aun cuando la estructura correcta del grupo administrador delproyecto y su relaci6n con el personal encargado del seguimiento yevaluaci6n tienen gran importancia en la mayoría de los casos, los queutilizan el Manual se encontrarán en una situación en que estas estructurasy relaciones ya se han decidido. Quizá sea posible introducir algunosreajustes conforme avance el proyecto, pero puede ser difícil modificar laestructura de la administraci6n o reorganizar en grado considerable dentrode esa estructura el personal de seguimiento y evaluaci6n.

Otro asunto de gran interés es el papel que corresponde a lossistemas de seguimiento y evaluaci6n en la evaluaci6n de la actuaci6n de lagerencia del proyecto. También en este caso, es poco lo que puede ofrecerun Manual que se ocupe de la evaluación en un contexto de proyectosespecíficos. Dicha evaluaci6n se lleva a cabo en otro lugar, y lascomparaciones de un conjunto de proyectos o de evaluaciones de proyectoscon programas nacionales de desarrollo formarán parte de las actividadescentrales de evaluaci6n, que pueden incluir o no la evaluaci6n individualde los distintos proyectos.

Además, las recomendaciones relativas a la recopilaci6n de datosbásicos anteriores a la ejecuci6n del proyecto deben ser orientadas más alos encargos de la preparación de proyectos que a aquéllos que reci5nentran en contacto con el proyecto cuando comienza la etapa de ejecuci6n.Estos asuntos no deben pasarse por alto, puesto que conviene considerar lasactividades dentro de su marco general. No obstante, con frecuencia seabordan como si fueran advertencias. Los objetivos del personal de

- 2 -

seguimiento y evaluación deben ser fijados de acuerdo con la estructura de

administraci6n y el lugar que ocupe dicho personal en esa estructura.

Especialmente, los intentos de remediar la falta de datos básicos

anteriores al proyecto durante la etapa inicial de éste no deberán absorber

tal proporci6n de los recursos de que se disponga que se descuiden las

necesidades de informaci6n de la gerencia.

Debido a que está orientado hacia una amplia gama de lectores, el

Manual contiene cierto material elemental (aunque de carácter

fundamental). Es posible que para el profesional experimentado algunas de

las secciones sean redundantes o repetitivas, pero se confía que el Manual

será tanto una obra de consulta como de lectura.

Tal como indica su título, el Manual se ocupa de proyectos

agrícolas y rurales. Estos proyectos son de muy diversas, clases, pero

tienen características comunes para las cuales se pueden formular

principios generales de seguimiento y evaluación. Estos principios son los

siguientes:

(a) La poblaci6n a la que se trata de beneficiar es la poblaci6n

rural (o una parte de la misma) que habita una zona

específica de un país.

(b) Los resultados se han de obtener generalmente induciendo

cambios en los sistemas de cultivo o en la reacci6n de los

agricultores ante las limitaciones percibidas, con el fin de

mitigarlas. (Pueden incluirse otros componentes dentro de

este enfoque principal, pero raras veces aislados del mismo).

(c) La mayoría de las personas a las que se trata de beneficiar

suelen ser pequenos agricultores de la zona (por definici6n,

en el caso de proyectos de desarrollo rural; relativamente

hablando, esto se aplica también a muchos proyectos agrícol-

las), pero también se suele prever un cambio general a nivel

comunitario.

(d) Aun cuando posiblemente el paquete técnico ofrecido se haya

puesto a prueba (tanto experimental como prácticamente) en

otras zonas, no siempre es posible predecir con exactitud la

reacción de los beneficiarios en un determinado caso antes de

que se ejecute el proyecto.

(e) El efecto que se pretende obtener puede verse eclipsado en-el

corto plazo por fen6menos naturales y artificiales ajenos al

control de la gerencia del proyecto, que pueden producir

efectos más intensos que el propio proyecto.

Si se consideran los objetivos del proyecto como una secuencia,tal como se indica a continuación, se puede establecer más facilmente unadistinci6n entre las funciones de seguimiento y evaluaci6n.

(a) El objetivo inmediato es proporcionar insumos que sonnecesarios para lograr el desarrollo agrícola o rural.Ejemplo: Los insumos pueden proporcionarse en forma deinstalaciones físicas, como un sistema de riego o undispensario, recomendaciones que se espera que losbeneficiarios adopten o la prestación de servicios comocrédito, fertilizantes, agua potable, medicinas, etc.

(b) Se espera que los beneficiarios del proyecto usarán estosinsumos para generar productos.Ejemplo: En muchos proyectos los productos consisten enproducción agrícola o ganadera, pero pueden ser también laadquisición de habilidades profesionales, una mayorasistencia a las escuelas, mejor utilización de los serviciosde higiene, etc.

(c) A su vez, estos productos producirán efectos en la poblaci6nobjetivo.Ejemplo: Por lo común, el efecto será un cambio en el nively la distribución de los ingresos y gastos, pero tambiéncabe esperar otros efectos en materia de salud y de ordensocial.

(d) Por último, estos efectos tendrán repercusiones en la vidasocial y económica de la comunidad.Ejemplo: Como resultado del mejoramiento de los ingresos,es posible que se establezcan en la zona servicios queofrezcan mayores ingresos y oportunidades de empleo o, comoresultado del mejor nivel de salud y educación, es posibleque mejore la calidad de vida.

Los efectos y las repercusiones mencionados llegan a confundirse;la diferencia entre ellos es principalmente de grado a lo largo de tresdimensiones: tiempo, magnitud y alcance. Los efectos se pondrán demanifiesto antes, tienen que ver con los beneficiarios directos y guardanrelacion con aspectos específicos de la actividad rural. Las repercusionesse refieren al resultado final en su totalidad, teniendo en cuenta tantolos efectos directos e indirectos como la difusión e imitación, queproducen cambios en el conjunto de la comunidad.

Los insumos y productos físicos son mensurables, por lo menos enteoría. En cambio, los efectos y las repercusiones no solamente son

- 4 -

difíciles de medir, sino que pueden resultar difíciles de atribuir al

estímulo proveniente del proyecto. Al formular el proyecto, se habrán

adoptado ciertos supuestos "razonables" en relación con los efectos

probables y su relaci6n causal con el proyecto, pero es preciso reexaminar

constantemente dichos supuestos, teniendo presente lo que ocurra durante la

ejecuci6n del proyecto.

Es preciso diseñar los sistemas de seguimiento y evaluación de

manera que indiquen el logro de los objetivos del proyecto, expresados como

metas que han de alcanzarse en ciertos plazos. Si las metas son imprecisas

y han de alcanzarse en plazos indeterminados, no será posible definir con

precisi6n el sistema de seguimiento. No obstante, es preciso mantener

cierto equilibrio; la precisi6n debe ser reflejo de lo que es factible.

Existe el riesgo de que una precisi6n excesiva de las metas y de los plazos

dé lugar a un esfuerzo excesivo de recopilación de datos. Generalmente, un

esfuerzo tal no será eficaz, en funci6n de su costo, para el proceso

decisorio.

Los costos de las actividades de seguimiento y evaluaci6n deben

guardar relaci6n con la posible mejora en la ejecuci6n del proyecto y con

la mejora en la formulaci6n de proyectos complementarios o semejantes.

1 .2 Seguimiento y evaluaci6n: El marco básico

Las funciones de seguimiento y evaluaci6n están relacionadas,

pero son diferentes. Seguimiento es la entrega de información a la

gerencia y el aprovechamiento de esa informaci6n para determinar el

progreso en la ejecuci6n y para tomar decisiones oportunas para asegurar

que se mantiene el progreso de acuerdo con los plazos previstos. El

seguimiento determina si se están entregando los insumos del proyecto, si

éstos se están utilizando como se había previsto, y si producen los efectos

iniciales programados. El seguimiento es una actividad interna del

proyecto, una parte fundamental de una buena administraci6n y, por

consiguiente, parte integral de la labor cotidiana de la gerencia. La

evaluaci6n, por su parte, valora los efectos generales del proyecto, tanto

pretendidos como no pretendidos, y sus repercusiones. Establece

comparaciones para las cuales es preciso disponer de informaci6n externa al

proyecto en lo que se refiere al tiempo, el área o la poblaci6n. Las

funciones relativas que corresponden al seguimiento y a la evaluación

varian según sea el tipo de proyecto. La distribución en una zona extensa

de un paquete tácnico con el que ya se han obtenido buenos resultados y que

tiene por objeto beneficiar a un determinado cultivo o actividad agrícola

exige un seguimiento cuidadoso, pero posiblemente requerirá menos atenci6n

a la evaluación. Es posible que un proyecto innovador y en pequeia escala

sea más fácil de seguir, pero su evaluaci6n será a la vez difícil y

trascendental.

- 5 -

Las etapas iniciales para diselar un sistema de seguimiento yevaluaci6n son las siguientes:

(a) Examen de los objetivos del proyecto, a fin desistematizarlos siguiendo la secuencia indicada en laSecci6n 1.1.

(b) Identificaci6n de los usuarios de la informaci6n a serprovista por los sistemas de seguimiento y evaluaci6n. Enlo que respecta al primero, los usuarios serán losadministradores del proyecto. El tipo de informaci6n que secomunique se adecuará a las necesidades de cada nivel deadministraci6n. Los usuarios de la evaluaci6n van desde lagerencia del proyecto hasta los planificadores nacionales,pasando por la direcci6n general o ministeriocorrespondiente.

La evaluaci6n utilizará los datos obtenidos por medio del sistemade seguimiento para ayudar a explicar las tendencias que se observen en losefectos y a valorar las repercusiones del proyecto. Si los datos generadospor el sistema de seguimiento revelan una desviacion importante conrespecto a las expectativas, será preciso realizar una evaluaci6n sobre lamarcha para examinar los supuestos y premisas en que se bas6 el disenooriginal del proyecto. Dicho examen, como sucede también en el caso -de laevaluaci6n retrospectiva, puede ser de gran valor para la administraciónsectorial en su funci6n de formulaci6n de políticas.

El seguimiento debe estar integrado en la organizaci6n jerárquicadel proyecto, pero la evaluación, con sus perspectivas más amplias queexigen informaci6n comparativa, no es necesariamente un elemento integralde dicha organizaci6n. Puede justificarse un mecanismo central deevaluaci6n cuando:

(a) La pericia técnica necesaria para interpretar los datosrelativos a la evaluación no existe, o resulta antiecon6micapara cada proyecto individual.

(b) Los datos que se necesitan se remontan a una fecha anterior ala iniciación del proyecto y llegan hasta un período que vamás allá de su terminaci6n.

(c) Es necesario contar con datos provenientes tanto de dentrocomo de fuera de la población afectada por el proyecto parallevar a cabo comparaciones.

- 6 -

Aun cuando se haya centralizado el diseio y el análisis, se

utilizarán los recursos para recopilación de datos de que disponga el

proyecto para obtener una gran parte de los datos que. se.necesiten para la

evaluación. Si la misma unidad recoge datos que se van a utilizar, a la

vez, pra una ulterior evaluación y pra el seguimiento rápido y oportuno, es

preciso que este último no sufra como consecuencia de las mayores

exigencias de la primera.

1 .3 El seguimiento y la administración del proyecto

Dentro del proyecto, la necesidad fundamental es la de seguir el

progreso logrado. Suponiendo que la evaluación previa del proyecto' haya

sido realizada cuidadosamente, es decir, que hay un supuesto a priori bien

fundamentado de que ciertos estímulos e insumos producirán ciertos

productos, efectos y repercusiones, la función que corresponde a la

gerencia en la fase inicial de ejecución es la de crear las condiciones que

pongan en marcha esta sucesi6n de hechos.

En los primeros aios de la ejecución del proyecto se pondrá

énfasis en el seguimiento del progreso físico y financiero y de la entrega

de los insumos a los que hayan de recibirlos. Los registros y

documentación del proyecto, debidamente organizados, constituyen la fuente

principal para este aspecto del seguimiento. En esta etapa, la gerencia

debe también ocuparse del destino que se dé a estos insumos y de la:

reacción de los beneficiarios.

Las tasas de aceptación y, lo que es más importante, las tasas de

aceptación repetida, ofrecen a la gerencia una idea clara de si el proyecto

está dando o no los resultados esperados. Es importante obtener

información sobre las actitudes y opiniones de los beneficiarios, a, fin de

explicar toda divergencia entre el comportamiento real observado y el

previsto al formular el proyecto. Un comportamiento imprevisto puede

determinar el éxito o el fracaso del proyecto.

El seguimiento de la ejecución del proyecto no requiere

necesariamente sistemas complicados de datos. Una acumulación subjetiva de

impresiones por parte del personal del proyecto puede constituir un sistema

de seguimiento. Si se aplican normas de administración basadas en el

sentido común, el sistema de seguimiento puede limitarse a un mínimo de

parámetros que hayan de registrarse periódicamente. Se trata de que la

recopilación de datos sea lo más objetiva posible y, sobre todo, de que se

cuente con los medios necesarios para cotejar, resumir y presentar la

información a los responsables de tomar las decisiones. La necesidad de

que el personal del proyecto registre el progreso logrado juntamente con

sus impresiones subjetivas sigue existiendo, aun cuando se cuente con una

unidad de seguimiento, ya que esos informes sn una fuente esencial para el

sistema.

- 7 -

Una vez que la gerencia se ha cerciorado de que el sistema deentrega de los insumos está funcionando, deberá prestar atenci6n a losproductos originados por el proyecto, es decir, hacerse la pregunta: ¿seestán obteniendo los resultados previstos? No obstante, el concentrarse enmedir el producto no debe ser a costa del seguimiento del sistema deentrega de los insumos. La medici6n de los productos es más bien unafunci6n de evaluaci6n, ya que determinar las tendencias no es una tareafácil en vista de las influencias ex6genas que existen, y muchas veces nopuede llevarse a cabo sin contar con series cronol6gicas que se extiendanpor muchos añlos. No obstante, la gerencia necesita estimaciones de laproducci6n, y en este Manual se examinan más adelante los medios paraobtenerlas.

La clave de un mecanismo satisfactorio de seguimiento es laentrega peri6dica y oportuna a la gerencia del proyecto de información quefacilite la adopci6n de decisiones. Esto puede lograrse contratando alpersonal necesario al comenzar la ejecución del proyecto, considerando adicho personal como parte del grupo de la gerencia e indicándole el ordende prioridad de la informaci6n que necesita la gerencia.

1.4 La evaluaci6n: Examen de los resultados

La evaluaci6n tiene por objeto determinar si se están alcanzandoo se alcanzarán los objetivos del proyecto en lo que respecta a losproductos, efectos y repercusiones previstos. Esto da lugar a una revisi6nde los resultados obtenidos y de las enseñanzas que se derivan paraproceder a introducir mejoras en una fase ulterior del proyecto o enproyectos análogos que se lleven a cabo en otros lugares.

El nivel de productos obtenidos es un indicador del resultado dela utilización que los beneficiarios hagan de los insumos del proyecto. Sison considerables, es posible que las variaciones de los productos sepongan de manifiesto ya durante la fase de ejecuci6n del proyecto. Enotros casos (por ejemplo en la salud, a consecuencia de la prestaci6n deservicios de higiene como insumo), es posible que los efectos no sean tanrápidos en aparecer. Y, en la mayoría de los casos, las repercusiones dedichos efectos en la calidad general de vida de la comunidad será unproceso que se seguirá desenvolviendo con lentitud. La creaci6n de unsistema de evaluación exigirá la elaboraci6n de una serie de datos quecomience antes de la ejecuci6n del proyecto y continúe más allá del períodode ejecuci6n. A diferencia del sistema de seguimiento, que insiste en unaelaboración rápida, el sistema de evaluaci6n requiere un período másprolongado antes de que puedan deducirse incluso conclusiones tentativas.

No siempre se comprende el grado en que incluso una variabilidadmoderada puede afectar a la situaci6n general. En el ejemplo siguiente

- 8 -

puede apreciarse la forma en que funciona la variabilidad; se simulan tres

conjuntos de resultados, sometiendo una tendencia lineal a una variacion

aleatoria. La tendencia va de 1.000 a 2.000 durante cinco años; la

variabilidad que se utiliza en las simulaciones es normal (en el sentido

estadístico) con una desviaci6n típica del 15 por ciento de los valores de

la tendencia. Las tres series fueron las primeras que se obtuvieron; no se

trató de obtener variaciones extremas.

Cuadro 1: Variaciones aleatorias en torno a una tendencia

Ario Tendencia Simulaciones

1 2 3

0 1000 950 632 1163

1 1200 1170 1284 1423

2 1400 1213 1522 1316

3 1600 1596 1714 1748

4 1800 1942 1945 1498

5 2000 1658 2192 1668

Las tres simulaciones tienen una probabilidad similar y todas

ellas dan por supuesto que la tendencia subyacente tiene de hecho lugar

como base sobre la que se impone la variaci6n aleatoria. Supongamos, en

cambio, que tres zonas hayan tenido las cifras de tendencia como metas

anuales, y que se produjeron como resultados las series antes indicadas.

¿Se las consideraría igualmente satisfactorias? Por lo tanto, es

importante que, antes de deducir cnclusiones apresuradas sobre los

resultados relativos, se considere la influencia de la variabilidad

natural.

La evaluación debe ir más allá de la cuantificaci6n de las

variaciones que ocurren; debe determinar la forma en que el proyecto

contribuye a dichas variaciones. Pero la zona de aplicaci6n del proyecto y

los beneficiarios están también expuestos a influencias ex6genas que el

proyecto no puede controlar; dichas influencias no se pueden predecir en

cuanto a su cronología o magnitud. Por consiguiente, el establecer la

relaci6n de causalidad entre los insumos y los efectos y repercusiones del

proyecto plantea el problema más difícil de la evaluación. Estas

cuestiones se examinan en la Parte 3.

-9-

Además de analizar las series cronol6gicas, la evaluaci6ngeneralmente requerirá estudios a fondo de la validez de ciertos supuestosimplícitos en la justificaci6n del proyecto. ¿Se comprenden bien losfactores socioecon6micos determinantes del comportamiento de losbeneficiarios del proyecto? ¿Se mantendrá estable el mercado en que hayade colocarse la producci6n adicional cuando se incorpore al sistema elmayor suministro? Se beneficiarán los familiares de los beneficiarios conlos ingresos originados, o éstos serán absorbidos de manera que no lleguena las familias? Estas son interrogantes que la gerencia del proyecto,abrumada por las numerosas tareas de ejecuci6n, no tiene tiempo paraexaminar, a menos que uno o más de estos factores amenace el proceso deejecuci6n y, para entonces, posiblemente, sea demasiado tarde. Dichosestudios facilitarán el proceso de evaluaci6n sobre la marcha a que se hahecho menci6n anteriormente. Será necesario que intervenga el grupodedicado al seguimiento. Esto sirve de ilustraci6n de la tesis, a la quese vuelve a hacer referencia más adelante en la Partes 2 y 3, de que en lapráctica existe una relaci6n estrecha entre el seguimiento y la evaluaci6n,a pesar de tratarse de funciones diferentes.

¿Hasta qué punto deben normalizarse los datos recopilados dentrode un proyecto para permitir comparaciones entre proyectos o con seriesnacionales de datos? Si se trata de un solo proyecto que abarca unapequeia superficie del país y que es el único de su tipo, la respuesta aesa pregunta puede ser "muy poco". Pero los proyectos de desarrolloagrícola y rural, considerados individualmente, abarcan con frecuenciagrandes zonas geográficas, y colectivamente, una gran parte del país. Losrecursos para seguimiento y evaluación existentes en cada proyecto puedenconstituir, en conjunto, una parte muy importante del total de recursosestadísticos del país. Hay, pues, poderosas razones para que estosrecursos contribuyan a las necesidades nacionales de información,estableciendo la normalización adecuada de los diseios de las encuestas,del contenido de los datos y del tratamiento analítico. Muchas de lasnecesidades de datos relativos a los productos y a los aspectossocioecon6micos son semejantes en distintos proyectos, y son tambi5nsimilares a las necesidades a nivel nacional. Esta normalización no debedistraer la atenci6n de las necesidades de la administraci6n del proyecto;en realidad, puede ayudar a la gerencia del proyecto a determinar susnecesidades con una visión más amplia.

Además, es posible que las pericias obtenidas en la recopilaci6ny análisis de datos, si se limitan al proyecto, se desperdicien, una vezque se haya terminado el proyecto. Esto no redundaría en beneficio de lasituaci6n general de las estadísticas en el país. Es preciso identificar yaprovechar las posibilidades de apoyo mutuo entre los organismos nacionalesque recopilan datos y las unidades del proyecto dedicadas al seguimiento yevaluaci6n, en beneficio de ambos.

- 10 -

1.5 El seguimiento y la evaluaci6n en el ciclo de un proyecto

En la terminología del Banco Mundial, el ciclo de un proyecto

tiene las siguientes etapas:

1. Identificaci6n2. Preparaci6n

3. Evaluaci6n previa4. Negociaci6n y Presentaci6n a la Junta Directiva

5. Ejecuci6n y Supervisi6n6. Evaluación Retrospectiva

En la Figura 1 se presentan estas etapas y se establecen sus principales

necesidades de datos y las fuentes posibles en que pueden obtenerse éstos.

Por supuesto, la sumariedad de la figura no permite presentar muchos de los

aspectos que surgen a lo largo del proyecto, pero sí ofrecen un panorama

general.

Las cuatro primeras etapas preceden a las actividades del

proyecto sobre el terreno, pero se presentan aquí para indicar la

informaci6n básica del proyecto. Esta informaci6n será también útil para

los que trabajan en proyectos en ejecuci6n que, a menudo, participan en la

preparación de propuestas para fases ulteriores de actividades del

proyecto, ya sea mediante la continuaci6n de éstos o mediante su repetici6n

en otros lugares. Esta información indica también que algunas de las

actividades de seguimiento y evaluaci6n en las etapas-5 y 6 solamente

pueden dar los resultados previstos si se planean debidamente en las tres

primeras etapas.

En general, el seguimiento tiene lugar en la etapa 5 y la

evaluaci6n en etapa 6. Pero, como ya se ha indicado y se vuelve a tratar

en las Partes 2 y 3, en la práctica no hay una separaci6n tan precisa entre

las dos funciones como la seialada en la Figura 1.

La decisión fundamental a tomarse en las etapas anteriores a la

ejecuci6n es si se debe o no llevar a cabo una encuesta en gran escala para

obtener datos básicos. La decisi6n que se tome afecta a la totalidad de la

evaluaci6n que se efectúe durante los años futuros. Se justifica una

encuesta con una muestra probabilística si se intenta obtener la misma

información en otras etapas del ciclo del proyecto, incluido el período

posterior al desembolso completo de los fondos del proyecto. En la

evaluaci6n se hará hincapié en una comparaci6n longitudinal de estas

muestras probabilísticas. Por muy conveniente que sea realizar y analizar

dicha encuesta en una etapa apropiada anterior a la ejecución, para ello

hay que contar con una organización capaz de llevarla a cabo. Por lo

general, no suele ser aconsejable contratar esa encuesta con un instituto

- 11 -

universitario que únicamente tenga experiencia y los necesarios medios enla esfera de pequefios estudios en profundidad. Si no existe unaorganizaci6n adecuada, la alternativa es depender del sistema deseguimiento para obtener indicadores longitudinales más sencillos, perocontinuos, complementados por encuestas muestrales en pequeña escala, deáelecci6n posiblemente dirigida, para poner de manifiesto las variacionesrelativas entre los grupos (incluyendo, por lo menos, un grupocuasitestigo). Para esto puede resultar conveniente que participeninstituciones locales.

En la etapa de preparación del proyecto son necesarios algunosdatos sobre las características demográficas y socioecon6micas de lapoblaci6n,, independientemente de si se realiza o no una encuesta paraobtener datos básicos. Para este fin, puede muy bien servir una encuestabasada en entrevistas rápidas que utilice una muestra dirigida o porcuotas, que posiblemente incluya un cuestionario a nivel de la comunidad.En esa etapa solamente se requieren niveles aproximados. En consecuencia,el problema del período que recuerdan los entrevistados y la simplificaci6nexcesiva de las preguntas, que es inevitable en una entrevista breve, noson necesariamente limitantes. El costo de una encuesta de esa naturalezaes moderado en relaci6n con los demás costos de la preparaci6n y evaluaciónprevia del proyecto, pero raras veces se lleva a cabo debido a la falta demedios de que dispone el país para realizar encuestas.

En esta etapa podría también ser de gran valor una investigaciónsocioeconomica, efectuada por uno o dos profesionales competentes, quedeterminen las actitudes y limitaciones de los probables beneficiarios. Enmuchos proyectos se dan por sentadas ciertas reacciones de losbeneficiarios que luego no se producen debido a no haberse analizadosuficientemente este asunto.

Una vez que se llega a la etapa de ejecuci6n y supervisi6n, elsistema de seguimiento debe mantenerse dentro de sus objetivos. Noborresponde a este sistema llevar a cabo, en partes más avanzadas delciclo, encuestas que debían haberse realizado anteriormente.

En la etapa de evaluaci6n retrospectiva se dispondrá de seriescronol6gicas de datos solamente si al comienzo se llev6 a cabo una encuestapara obtener datos básicos y se la repiti6 luego dos o tres veces. Estarepetición constituye una obligaci6n importante, y lo mejor es contratar denuevo a la misma entidad que llev6 a cabo la encuesta original. De estemodo, no solamente se mantiene la continuidad, sino que se evita dedicar elsistema interno de seguimiento a actividades de es magnitud.

Cada proyecto--con la posible excepción de los que repiten enforma idéntica uno anterior--tiene hasta cierto punto características

singulares. Por consiguiente, el establecer una tipología y un calendario

- 12 -

para las actividades de seguimiento y evaluación puede resultar equívoco,

encubriendo las características individuales de un proyecto, que requerirán

un sistema de informaci6n adaptado especificamente a sus- circunstancias.

En la Parte 4 se trata con cierto detalle la selección de

indicadores, y en.las Partes 5, 6 y 7 se examinan las fuentes de los

datos. Antes, las Partes 2 y 3 consideran nuevamente las características

distintivas del seguimiento y la evaluaci6n.

FIGURA 1

Ciclo de los proyectos: Datos necesarios y fuentes de informaci6n

Etapa Datos necesarios Fuente

Identificaci6n Area o zona del proyecto, Archivos administrativos,

productos, beneficiarios censos, encuesta nacional

y medio ambiente. y local, estimaciones delMinisterio de Agricultura.

-13 -

Etapa Datos necesarios Fuente

Preparaci6n Insumos técnicos. Examen profesional.Estudios de factibilidad.

Características socioeco- Encuestas rurales exis-

n6micas de la poblaci6n tentes y/o estudio encar-del proyecto. gado especialmente por la

Oficina Nacional de Esta-

dística o por otros.

Informaci6n de mercado. Archivos administrativos,encuestas de mercado

existentes y/o estudiodel mercado encargado

especialmente.

Actitudes de los benefi- Estudio de casos prácti-ciarios, limitaciones que cos encargado especial-les afectan. mente.

Si se necesita una encues- Encuesta de datos básicosta de datos básicos para encargada especialmentela evaluaci6n a largo (efectuada de preferencia

plazo, indíquese el conte- por la Oficina Nacionalnido de la misma, enfoque de Estadística).fundamental y escala.

Evaluaci6n Financieros y sobre orga- Ministerios, organismosPrevia nización y métodos. de distrito, agencias.

Factores macroecon6micos. Cuentas nacionales, estu-

dios sectoriales, planesde desarrollo.

- 14 -

Etapa Datos necesarios Fuente

Indicadores del area o Datos específicos de la

zona del proyecto. zona normalmente dispo-nibles y resultados ob-tenidos en etapas ante-

riores.

Negociaci6n yPresentación Ninguno.

a la JuntaDirectora

Ejecuci6n (a) Financieros Gran parte de estos datos

y Supervisi6n Personal provendrán de la activi-Construcci6n dad interna del proyecto

Insumos físicos (v6ase la Parte 2), ya

Insumos de servicios sea como parte del pro-Comercializaci6n ceso normal de informa-Utilizaci6n de los ci6n o como resultado de

insumos estudios especiales or-Producción ganizados con recursos

Tasas de aceptaci6n del proyecto.

(b) Reacci6n de los Aquí la línea de demar-beneficiarios caci6n entre seguimiento

Determinaci6n de pro- y evaluaci6n se vuelveblemas borrosa. La realizaci6nSi se ha planeado de estudios de casos

anteriormente, prácticos y de encuestas,Encuesta durante la y los análisis minucio-ejecuci6n. sos, pueden requerir

recursos externos al

proyecto.

Análisis de series crono-

l6gicas y comparacionescon datos externos.

- 15 -

Etapa Datos necesarios Fuente

Evaluaci6n (a) Si se ha planeado Véase la nota inmediata-Retrospectiva anteriormente: mente anterior. La eva-

Encuesta posterior al luaci6n requerirá unproyecto. análisis en el que par-Coordinación de los ticipen personas ajenas

datos para revisión al proyecto.y análisis.

(b) Evaluación a largo Encuesta y/o estudios deplazo de la permanencia casos prácticos encarga-de los resultados. dos especialmente. e-

sultados pertinentes delas actividades de laOficina Nacional de Es-tadística y del Ministe-rio de Agricultura.

___________ ________________________ 1______________________t

- 16 -

PARTE 2

SEGUIMIENTO

2.1 Administraci6n y seguimiento

En la Parte 1 se han expuesto a grandes rasgos las interacciones

entre el seguimiento y la evaluaci6n. La existencia de estas interacciones

ha dado lugar al concepto común de que el seguimiento y la evaluación son

inseparables, tal como indica la frecuente abreviatura S y E. No obstante,

como se ha explicado en la Parte 1, hay diferencias precisas en la funci6n

que corresponde a cada una, y la experiencia indica que el seguimiento no

da buenos resultados a menos que se la distinga de la evaluaci6n.

Solamente así puede utilizarse debidamente como instrumento de gesti6n

dentro del sistema de informaci6n para la gerencia del proyecto.

El sistema de seguimiento debe considerarse como parte de la

administraci6n general y, como tal, se le debe asignar los fondos

correspondientes. Una queja común entre directores de proyecto es que los

servicios de seguimiento no ofrecen informaci6n pertinente y oportuna. Así

suele suceder cuando dichos servicios les son impuestos como organizacion

paralela, lo cual da lugar a que los directores de proyecto concluyan que

su funci6n principal es proporcionar información a terceros, con poca o

ninguna significaci6n para el proyecto. Esto no sucede si el seguimiento

se considera como una funci6n de administración, bajo el control del

director del proyecto, que tiene por objeto satisfacer sus necesidades de

informaci6n y que trabaja de acuerdo con un plan cronol6gico convenido de

antemano y con los recursos facilitados a tal efecto.

En general, solamente se debe considerar el uso de consultores

independientes para que desempe?íen las siguientes funciones de seguimiento:

(a) Asesorar sobre el diseño general del sistema de seguimiento

en la etapa de preparación del proyecto.

(b) Realizar estudios específicos, instrucciones precisas en

cuanto a lo que deben hacer, de quién dependen y cómo deben

informar. Entre esos estudios figuran los

tecnológicos/científicos, de control de calidad y causales.

(c) Proveer capacitaci6n y asesoramiento sobre metodología de las

encuestas.

La evaluaci6n es un asunto distinto y en ella deben participar

personas ajenas a la gerencia del proyecto. En este contexto, la

evaluación de los resultados del proyecto y la actuaci6n de la gerencia

- 17 -

incluye la evaluaci6n de las actividades de ésta relacionadas con elseguimiento.

Esta separación entre seguimiento y evaluación reduce lo que enun seminario se identific6 como "el temor de los elementos de evaluaci6n delos servicios de S y E ... que se transmite a todas las divisiones delproyecto. En estas circunstancias, la unidad de seguimiento puedecontribuir muy poco al progreso del proyecto". La integración delmecanismo de seguimiento en las actividades de la gerencia no eliminará,por supuesto, toda la desconfianza que se siente contra cualquier grupo quelleve a cabo este tipo de función.

La importancia que se atribuye a la funci6n de seguimiento en lagerencia no exige que ista determine desde el principio todas susnecesidades de información. Esa determinación será un proceso continuo,según progrese la ejecución, en el que habrá interacciones y una corrientede asesoramiento en ambos sentidos. Pero debe dejarse bien sentado cuálesson las necesidades que tienen prioridad y quién toma las decisionesdefinitivas.

Este enfoque del seguimiento orientado hacia la gerencia puedeoriginar problemas institucionales difíciles en proyectos complejos en losque intervengan varios organismos, como suele suceder en los proyectos deagricultura y de desarrollo rural. Pero estas dificultades no se reducensolamente al seguimiento; son inherentes al establecimiento de unaestructura eficaz de gestión del proyecto. Si se definen con precisión lasfunciones de la gerencia, no es difícil colocar en un lugar apropiado launidad de seguimiento e identificar los cauces de información que conducena las distintas áreas de la gerencia. Si no se puede establecer unaestructura de administración eficaz, casi es mejor no seguir adelante.Así, pues, el argumento es el mismo que antes; en la función deadministración va incluido el seguimiento de lo que se hace; la gerenciasolamente puede funcionar en forma eficaz cuando obtiene la necesariainformación.

Cuando varios organismos especializados participan en laejecución de un proyecto y cada uno de ellos tiene a su cargo un componentedistinto, la gerencia del proyecto puede estar en manos de un órganocoordinador. En ese caso, al formular el proyecto debe considerarse nosolamente la ubicación de la unidad central de seguimiento (con lo que seconsigue que la información necesaria afluya a la gerencia coordinadora),sino también el mecanismo necesario para el intercambio de informaciónentre los organismos que participan en los diversos niveles de operacionesen el terreno. Una de las funciones que corresponde a la unidad deseguimiento es, pues, la de establecer estas líneas de comunicación, demanera que se satisfagan las necesidades de cada nivel de gerencia y seeviten duplicaciones innecesarias en los sistemas de información.

- 18 -

Organizado de este modo, el sistema de seguimiento originará

informaci6n que es preciso conservar para la evaluaci6n. Un ejemplo lo

ofrece un informe de seguimiento de un proyecto que contenía una secci6 l.

"sobre la actuaci6n de los diversos colonos, en la que una característica

destacada era que los más deficientes eran generalmente las personas

locales ... Una razón de ello parece ser que sus objetivos se limitan a lo

que se ofrecíia antes de que comenzara el proyecto ... En cambio, los que

han venido de fuera parecen trabajar con mayor esfuerzo y tienen un mayor

deseo de triunfar". Es preciso asegurarse de que resultados de. este tipo

se comuniquen a los encargados de la evaluación. En realidad, los

evaluadores deben tener acceso a todos los datos obtenidos por el sistema

de seguimiento. Esto no debe crear dificultades si la gerencia ha

establecido un sistema satisfactorio de seguimiento y ha actuadó durante la

ejecuci6n del proyecto de acuerdo con la información recibida. En estas

circunstancias, la gerencia querrá que los servicios de evaluación tengan

ésto en cuenta.

Si se cree que los datos provenientes del seguimiento revistirán

especial importancia para la explicación causal, es preciso integrar muy

estrechamente el seguimiento y la evaluaci6n (véase la Parte 3). En este

caso, es preciso prestar gran atención a la preparación y coordinaci6n del

alcance y los plazos relativos a la recopilaci6n de datos.

2.2 Especificaci6n de objetivos y metas

La especificaci6n minuciosa de los objetivos del proyecto

facilita el seguimiento, según demuestran los casos siguientes:

Caso A

El proyecto consiste en la terminación de un plan de colonizaci6n

y la mejora del drenaje en tierras costeras bajas. En la parte

relativa a colonizaci6n, se procederá.al desmonte de 8.000

hectáres de terreno ondulado que serán ocupadas por 800 familias,

y se dedicarán al cultivo de la cala de azúcar. Se prolongará

una línea ferroviaria para el transporte del azúcar, se mejorarán

los caminos y se establecerán lotes y servicios para un nuevo

poblado. La mejora del drenaje comprende la reconstrucci6n de

rompeolas y de drenes internos en 26.400 hectáres de tierras

dedicadas a la caia de azúcar. Se han fijado metas de producción

de caia.

Este proyecto es relativamente sencillo. Sus operaciones pueden

dividirse funcionalmente. El seguimiento se puede llevar a cabo

del mismo modo, mediante informes sobre los fondos gastados,

obras terminadas, etc. que se comuniquen a una pequeña unidad a

las 6rdenes del director del proyecto. Puesto que la cosecha se

elabora y se paga en un punto central, es posible registrar en

- 19 -

éste los datos sobre producción, rendimiento e ingresos, y sepuede disponer de estos datos sin dificultad.

Caso B

Los objetivos principales son:

(a) Dar a conocer la tecnología de cultivos múltiples junto conuna mejora de las actividades ganaderas, a fin de elevar la

intensidad de uso de la tierra y elevar los ingresos

agropecuarios.

(b) Crear nuevas oportunidades de empleo para los agricultores

de subsistencia y, en especial, para los jornaleros.

(c) Prestar apoyo a las actividades de investigaci6n sobrecultivos múltiples.

(d) Mejorar el bienestar rural por medio de servicios de salud

pública.

Entre los objetivos secundarios figuran mejoras de lainfraestructura. En este caso, los objetivos son más numerosos

y de carácter multisectorial. Será preciso evaluarlos, pero su

descripci6n no da orientaciones obvias al sistema de

seguimiento. No obstante, normalmente se habrán especificado en

la documentaci6n del proyecto las metas de ejecuci6n que darán

lugar a que se alcancen estos objetivos. La unidad de

seguimiento, en consulta con la gerencia, deberá elegir losindicadores para medir estos objetivos y las unidades en que se

hayan de medir. Habrá que determinar la manera en que deba

medirse -la intensidad de uso de la tierra, los ingresos, la

creaci6n de empleo, el bienestar rural, etc., y la importanciarelativa que se dará a cada uno de estos aspectos, y cuál de

.ellos puede abordarse únicamente mediante encuestaslongitudinales de evaluaci6n.

Por consiguiente, a los efectos del seguimiento, lo que reviste

particular importancia son las metas operativas que aparecen como etapas

intermedias para alcanzar los objetivos del proyecto. Si los objetivos son

imprecisos, las especificaciones de las metas serán también imprecisas o

inadecuadas. Corresponde a la gerencia desglosar las metas al nivel dezona o de función para que las utilicen los niveles administrativos

inferiores. La tarea del seguimiento consistirá en determinar el progreso

realizado, comparándolo con los niveles fijados como meta.

La información que se obtenga durante el proceso de ejecuci6n

dará lugar, a veces, a ajustes de las metas relativas a los diversos

- 20 -

componentes del proyecto y de los recursos asignados para alcanzarlas. A

su vez, esto motivará reajustes del sistema de seguimiento, y así

sucesivamente.

Es preciso especificar con precisión y seguir con exactitud las

metas relativas a los desembolsos financieros, proporción de las diversas

clases de personal y construcción de la infraestructura. Se pueden también

fijar metas en relación a las reacciones de los beneficiarios y los

productos, pero conviene evitar una precisión excesiva al fijarlas. La

dificultad al seguir el cumplimiento de las metas relativas a los

productos, cuando intervienen influencias exógenas debidas al azar, se

demostró en el ejemplo hipotético de los aumentos de tendencia que aparece

en el Cuadro 1. Las cifras anuales posiblemente no sirvan de guía hasta

que se haya establecido una serie cronológica prolongada, y el examen de

dichas series cronológicas es más bien una tarea de evaluación.

2.3 Seguimiento y contabilidad financiera

Los procedimientos de contabilidd y los informes financieros

tienen gran importancia en la mayoría de los sistemas de información para

la gerencia; hay que reconocer la relación que tienen con otras

informaciones a ser obtenidas por el sistema de seguimiento. Es preciso

que la gerencia del proyecto haga participar a los contralores financieros

en el diseño del sistema de seguimiento. Los contralores financieros y su

personal tienen que participar tanto en el seguimiento financiero como en

el no financiero. La gerencia tiene también que examinar cuidadosamente

los planes de seguimiento financiero, a fin de asegurarse de que el sistema

de información financiera ofrecerá--al igual que el resto del mecanismo de

seguimiento--los datos necesarios en forma oportuna. Los servicios de

contabilidad son a veces tan deficientes como otros servicios de

seguimiento cuando se trata de proporcionar datos oportunos y bien

presentados.

Es indispensable que haya uniformidad en la clasificación de las

cuentas preparadas para planear, para informar y para comparar con los

datos de seguimiento. Especialmente, es necesario distinguir con cuidado

entre gastos de capital y gastos ordinarios. Un ejemplo, a un nivel

desagregado, es la necesidad de registrar uniformemente bajo el mismo item

los gastos en pequeias herramientas. Asimismo, es fundamental que haya

uniformidad en la valoración, y que se siga un sistema previamente

convenido de ajuste por inflación.

La información contable no debe dejarse sin utilizar o aislada.

La comparación de los estados de gastos y del progreso físico realizado

ayuda a evitar los excesos de costos y mejora el control de los trabajos en

el terreno. Al mismo tiempo actúua como control. Por ejemplo, en un

proyecto había cierta tendencia a que algunos informes provenientes de

organismos y ministerios exageraran la actuación de éstos. Si las cuentas

- 21 -

financieras indicaban que no se había desembolsado la correspondientecantidad, se prescindía del informe sobre ejecuci6n física hasta que éstefuese confirmado de otra forma.

Con frecuencia, aunque no necesariamente siempre, el informefinanciero es el más exacto de los dos. A veces, la informaci6n financierase retrasa. Por ejemplo, cuando programas de construcci6n en pequeñaescala son llevados a cabo a nivel local por varios organismos, muchasveces se recibe la informaci6n bastante tiempo después de que se hayanterminado las obras. A veces, los estados financieros son incorrectos. Enun proyecto relativo a plantas de congelaci6n y conservas, las cifras sobremárgenes de utilidades y sobre ventas eran inferiores a la realidad, perose habían exagerado los gastos de producci6n y generales, con fines deevasi6n fiscal. Estos problemas pueden evitarse únicamente mediante unasupervisi6n atenta en el terreno, que lleve a cabo comparaciones. Tambiénen este caso deben ir juntos el seguimiento financiero y el seguimiento delprogreso físico realizado.

2.4 Seguimiento de la dotación de personal

La primera etapa en el seguimiento de la dotaci6n de personal delproyecto es la de comprobar mediante los registros administrativos si elpersonal para el proyecto se está contratando dentro de los plazosprevistos. Si no se contrata a su debido tiempo al personal especializado,o si se han producido retrasos en la creación de oficinas en una o másesferas, es preciso tomar medidas con urgencia y volver a programar losplazos. La gerencia ya habrá seguramente identificado elementos crucialesy los estará vigilando cuidadosamente. También en este caso hace falta unsistema flexible e iterativo, ya que lo que es crucial en una etapa puedeser distinto de lo que es en otra.

La rotaci6n de personal es un problema persistente y de granimportancia. Reviste particular gravedad en el caso del personal que ocupacargos clave, puesto que es más susceptible de recibir ofertas interesantsde otros empleadores. Por ejemplo, a veces no se aprovechan plenamente lascomputadoras debido a la dificultad de retener analistas competentes en suspuestos el suficiente tiempo para que terminen programas de elaboraci6n dedatos de gran magnitud. En el presente Manual las recomendaciones sobre eldiseño y análisis de encuestas se presentan teniendo en cuenta estadificultad. Si se vigila cuidadosamente la rotaci6n de personal, será másfácil hacer preparativos para casos imprevistos y aprovechar en forma6ptima los recursos disponibles.

El seguimiento de la calidad del trabajo realizado por elpersonal es más difícil. Por ejemplo, en un proyecto de extensión agrícolael crecimiento en el número de agentes de extensión se especifica conclaridad y su seguimiento es relativamente fácil. También es posibleseguir la prestaci6n del servicio de extensi6n registrando el tiempo que

- 22 -

los agentes pasan en el terreno y el número de visitas efectuadas. En la

mayoría de los casos, estos indicadores ofrecen una medida razonable de la

eficiencia potencial del servicio y permiten..también clasificar

provisionalmente los niveles de su desempeño. Con tal fin, los agentes de

extensión deben llevar un registro de sus actividades, y los supervi.sores

de los servicios de extensión deben utilizar un formato uniforme en sus

informes. Aunque necesariamente de carácter subjetivo, la estimación de la

labor realizada comparándola con criterios comunes permitirán formular

juicios preliminares. Si es puede llegar a un acuerdo sobre los criterios,

será posible establecerse una escala sencilla para medir el desempefio de

las funciones. En la Figura 2 se presenta un ejemplo en el que la

estimación se efectúa sobre una escala de cinco niveles.

Figura 2: Estimación de la labor realizada por los agentes de extensión

Escala

Criterios1 2 3 4 5

A. Proporción del tiempo el el terreno

B. Cumplimiento de los plazos

C. Conocimiento de las técnicas

D. Actuación en las sesiones observadas

E. Información proveniente de los agricultores

F. Iniciativa

Al principio será difícil conseguir que un gran número de supervisores

utilice estas escalas uniforme y significativamente. Una calificación

universal de "promedio" no sirve. Un número par de puntos en la escala

contribuye a evitar la concentración en el punto medio. Es preciso

observar a su vez la distribución de las calificaciones para asegurarse de

que se logra la finalidad básica de detectar la actuación excepcional

(tanto la buena como la mala). A medida que avanza el proyecto, es posible

majorar la normalización de las estimaciones y se efectúan comparaciones

con los indicadores más directos.

- 23 -

Se pueden idear otros indicadores de las actividades deextensi6n. Puesto que la finalidad principal es la de estimular el cambioen las prácticas agrícolas y en el comportamiento de los agricultores, losverdaderos indicadores para el seguimiento son las tasas de adopci6n de lasrecomendaciones que se hayan hecho y sus derivados, por ejemplo, la demandade insumos que hagan los agricultores. Estas pueden seguirse utilizandouna encuesta muestral de beneficiarios del servicio; tambi6n puedeincluirse su reacci6n ante el servicio prestado. Esta medici6n de laadopci6n como instrumento de seguimiento se expone con mayor detalle en laParte 3. Sin embargo, los resultados de estos indicadores no son lasolución definitiva. En un seminario celebrado en el Banco se inform6 que"Algunos agentes de extensión creen que el indicador real de su desempeno,la productividad agrícola, sirve para desalentar a los asignados alocalidades poco privilegiadas o pobres en la que raras veces se dispone deinsumos agríco-las y/o los agricultores no pueden permitirse suutilizaci6n. Proponen que se utilicen otros indicadores, además de laproductividad, para medir su actuaci6n individual". El sistema de informesdel personal que se ha indicado en el párrafo anterior puede ayudar aatender esta propuesta. Además, los informes arrojarán luz sobre lasaptitudes de los supervisores. Esta cita indica también la importancia deestimular el espíritu de trabajo y de cooperaci5n. El sistema deseguimiento debe también tener en cuenta esto y detectar indicios de siocurren cambios en estos atributos.

2.5 Seguimiento de la infraestructura y de los sistemas de entrega

Corresponde al sistema de seguimiento el vigilar el progreso dela construcci6n según un predeterminado camino crítico y el comparar laentrega de los insumos con las metas. La selecci6n de indicadores sueleser inequívoca.

Es necesario comprobar de manera especial la calidad de laconstrucci6n y de los materiales que se utilicen en la misma. Estascomprobaciones deben ser planeadas y ejecutadas por personal técnicocompetente. Algunas de ellas se programarán de manera que coincidan conetapas de terminaci6n, y con frecuencia se especifican en los contratos.Las inspecciones a intervalos determinados al azar contribuyen a garantizarque no se empleen materiales inferiores o que no se escatima el trabajo.Es mejor identificar los trabajos que no se han realizado bien, aun despuésde haberse terminado, que aceptar a ciegas lo que se haya hecho. Una delas maneras más eficaces de evitar que las cosas vayan mal es demostrar quehay un seguimiento continuo y que los indicios de deficiencias se comunicansin tardanza a la gerencia para que ásta tome las medidas que corresponda.

En este contexto, el seguimiento es una función de carácter másamplio que la que lleva a cabo una unidad pequefia. El personal profesionaldel proyecto, como los ingenieros, llevarán a cabo estas comprobaciones einspecciones. Se ha mencionado que la unidad de seguimiento deberá ser

- 24 -

considerada como parte del grupo de la gerencia; ahora es evidente que el

seguimiento es una de las funciones de todos los miembros del grupo de lagerencia.

En forma análoga, el seguimiento debe observar el, sistema de

entrega para asegurarse de que los beneficiarios reciben fertilizantes,insecticidas o equipo en el momento oportuno, en la cantidad debida y al

precio que corresponda. Si se trata de un plan de crédito, es preciso

adoptar las medidas necesarias para que los criterios utilizados para la

selecci6n, el tiempo necesario para adoptar la decisión y el nimero de

personas a las que se deneg6 el crédito, así como el número de créditos

concedidos, sean documentados en cada caso.

El seguimiento vigoroso y continuo de la entrega de insumos

únicamente dará resultados si el personal de seguimiento y los gerentes

pasan suficiente tiempo en el terreno y son apoyados por el personalsupervisor de actividades en el terreno. Deben llevar un registro diario

de sus actividades y presentar peri6dicamente informaci6n sobre la

proporci6n del tiempo dedicado a trabajar en el terreno. Cada nivel de la

gerencia requiere inspecci6n por parte de sus superiores; los que llevan a

cabo las funciones de seguimiento deben a su vez ser supervisados de la

misma manera.

La oportunidad de las entregas puede considerarse de dos

maneras. En primer lugar, ¿se entregaron los insumos en el momento

previsto? Este aspecto puede muchas veces resolverse observando los

registros administrativos y los informes del personal sobre los trabajos

realizados. Por medio de estas fuentes no solamente debe poder mostrarse

que se entregaron "x" toneladas de fertilizantes, sino también que se

entregaron en un lugar de destino específico y en una cierta fecha. Pueden

surgir dificultades cuando los productos pasan por las manos de más de un

organismo y--como sucede a menudo--exista competencia o rivalidad entre

éstos. El personal de seguimiento debe investigar cuidadosamente cada

discrepancia que haya en los informes.

En segundo lugar, suponiendo que los insumos se entregaron en el

momento previsto, ¿era ése el momento oportuno teniendo en cuenta las

circunstancias prevalecientes? Por ejemplo, es posible que se haya

adelantado la época de la siembra debido a que las lluvias comenzaron

pronto, mientras que quizás se program6 la entrega de las semillas teniendo

en cuenta una distribución más normal de las precipitaciones pluviales. En

ese caso, el sistema de seguimiento se verá sometido a la prueba más

rigurosa. ¿Pudo detectar el problema a tiempo para permitir que la

gerencia remediara la situaci6n?

El logro de los objetivos del proyecto supondrá una sucesi6n de

operaciones planeadas, cada una de las cuales habrá de terminarse en una

fecha específica de manera que puedan continuar las etapas ulteriores. En

- 25 -

los últimos aios se han elaborado varios procedimientos para ayudar a lagerencia, como, por ejemplo, el método del camino crítico. Si la gerenciaadopta uno o más de estos procedimientos, es necesario organizar el sistemade seguimiento de manera que se adapte a dicho procedimiento. Siinicialmente no se utiliza ninguno de esos métodos, el seguimiento puedeindicar la necesidad de que se instituyan, si comienzan a ocurrir retrasosy anomalías.

2.6 Funci6n de la unidad de seguimiento

Como ya se ha observado, la funci6n de seguimiento corresponde ala gerencia y también a cada uno de los miembros del personal delproyecto. La unidad de seguimiento contribuye al funcionamiento delsistema de seguimiento de las formas siguientes:

(a) Identifica, en colaboraci6n con la gerencia, las metas deejecución del proyecto y los indicadores para determinar elprogreso comparándolo con dichas metas.

(b) Coteja, resume y divulga la información proveniente de losdiversos organismos y del personal dedicado a la ejecuci6ndel proyecto.

(c) Analiza los archivos administrativos y los registrosrelacionados con la ejecuci6n del proyecto.

(d) Recopila y analiza los datos de los beneficiarios que senecesitan para complementar los registros e informes de quese dispone.

(e) Mantiene, en forma recuperable, las diversas seriescronológicas de datos como medio auxiliar para llevar a cabola evaluación ulteriormente.

(f) Prepara informes que pongan de relieve las conclusiones delos diversos análisis y, en la medida pertinente, presentauna gama de opciones lógicas sobare las que tenga quedecidir la gerencia.

En la Parte 10 se examinan el tipo y frecuencia de los informes.Según se expone allí, la comunicación de informaci6n va desde laactualizaci6n frecuente de un gráfico colocado sobre la pared de la oficinadel director del proyecto hasta informes analíticos de considerableenvergadura sobre la situaci6n del proyecto. Al organizar la unidad, espreciso dotarla de flexibilidad para que pueda reaccionar con rapidez antecambios importantes. Si hay una sequía, el gobierno modifica una políticaseguida hasta entonces u ocurre otro hecho inesperado, hay que llevar acabo análisis especiales y preparar informes de emergencia.

- 26 -

Con el fin de informar con una frecuencia convenida, se fijarán

plazos dentro de los cuales deban llegar los datos o la informaci6n a la

unidad de seguimiento. Los plazos dependerán de la dispersi6n del

proyecto, tanto desde el punto de vista geográfico como entre organismos, y

de la eficiencia del sistema de comunicaciones. Es importante fijar plazos

que sean razonables y puedan cumplirse. Es mejor conceder un plazo de

quince días para la presentaci6n de informes de carácter rutinario (después

de que haya transcurrido el período al que se refieren) y que este plazo se

cumpla, que fijar un plazo de diez días y que éste no se cumpla.

La integraci6n satisfactoria de la unidad de seguimiento dentro

de la gerencia exige que la unidad no parezca actuar como un "fiscalizador"

o "inspector" de las actividades del proyecto. El grado en que la unidad

participe en la formulaci6n de recomendaciones o en el proceso decisorio

dependerá del tipo de estructura de administración. No obstante, mucho

dependerá también de las personalidades que intervengan y del éxito que

estas tengan en su actuaci6n como agencia de informaci6n para el proyecto.

2.7 Comentarios finales

En esta Parte preliminar se ha insistido en que:

(a) El seguimiento es distinto de la evaluaci6n.

(b) El seguimiento es parte integral de la gerencia.

(c) La unidad de seguimiento debe ser una dependencia al

servicio de la gerencia y estar estrechamente identificada

con ésta.

(d) El nucleo de un sistema de seguimiento está constituido por

registros prácticos y básicos, tanto administrativos como

financieros.

(e) La información que facilita el personal del proyecto es un

elemento importante para los fines del seguimiento.

(f) La obtención de suplementarios deberá utilizarse para

rellenar lagunas en la información disponible y no para

duplicar fuentes ya existentes.

(g) La clave del éxito es la combinaci6n de una actuaci6n

oportuna, informes concisos y flexibilidad al reaccionar

ante acontecimientos imprevistos.

- 27 -

PARTE 3

EVALUACION: PROBLEMAS CONCEPTUALES Y OBJETIVOS BASICOS

3.1 Introducción

La experiencia demuestra la necesidad de prestar a los aspectosde administraci6n del seguimiento la atenci6n particular dada en la Parte2. Esto no significa, sin embargo, que pueda prescindirse de la evaluaci6ndentro del contexto de un proyecto concreto. Como se ha indicado en laParte 1,' la evaluación tiene por objeto determinar si se han alcanzado, ose están alcanzando, los objetivos del proyecto. Lo ideal es que laevaluaci6n no solamente trate de cuantificar las realizaciones, sino quedetermine la influencia del proyecto en su logro. Además, debe detectarlos cambios imprevistos que ocurran, tanto beneficiosos como perjudiciales,y examinar su posible relaci6n causal con el proyecto.

La experiencia acumulada en investigaciones socioecon6micasdemuestra que solamente en raras ocasiones se alcanzan plenamente estosobjetivos ideales. En esta Parte se exponen las razones de ello, se fijanobjetivos menos rigurosos para la evaluación específica de proyectos, y seofrecen indicaciones de c6mo pueden alcanzarse éstos. Se presentan losfundamentos l6gicos para establecer el cambio y la causalidad del cambio,con el fin de indicar las dificultades que surgen al aplicarlo a laevaluación de proyectos agrícolas y de desarrollo rural y de demostrar losmotivos por lo que no es probable que varios de los enfoques científicosden resultados satisfactorios. Los procedimientos más limitados que luegose proponen pueden ser valorados teniendo presentes estos argumentos.

El método más exacto para establecer concatenaciones causales esel método experimental desarrollado por las ciencias naturales. Si seexamina un modelo científico experimental, pueden apreciarse lascaracterísticas que son esenciales para su eficacia, pero que no suelenpoder reproducirse en los estudios de evaluación de proyectos. Lasciencias sociales han desarrollado un conjunto de técnicascuasi-experimentales para adaptar el modelo de las ciencias naturales almedio social. Una alternativa también satisfactoria es la denominadamétodo del modus operandi, que funciona en forma parecida a como el métodoque utiliza un ladron para llevar a cabo sus crímenes revela su identidadal detective. Este método depende de las expectativas normales sobre elcomportamiento que se producen en la vida cotidiana de una sociedad. Unejemplo en la agricultura es el hecho de que, cuando una semilla nuevafunciona de una cierta manera, la expectativa es que continuará haciéndolodel mismo modo. Los resultados se atribuirán a la misma, a menos que sedescubra también la influencia de otros factores.

- 28 -

Las ciencias sociales (incluido el derecho) y la historia emplean

y adaptan ambos métodos. El modelo experimental es de uso común en la

psicología social. El método del modus operandi lo utilizan los

historiadores para establecer una sucesi6n de actos cometidos por una

persona o por un grupo (quién estaba en qué lugar y quién cometió qué

actos), considerar sus repercusiones probables y, de este modo, atribuir

responsabilidades. Con frecuencia, se utilizan evidenciascircunstanciales.

Un método afín consiste- en evaluar el efecto probable de un acto

preguntándose: ¿Qué es lo que probablemente habría ocurrido si no hubiera

sucedido X ? Esto se denomina el "hecho contrario". La secuencia de

acontecimientos en el caso hopotético del "hecho contrario", con la que se

compara la secuecia de acontecimientos efectivamente ocurridos, es

originada por una sucesi6n de relaciones verosímiles de causalidad.

Pueden hacerse dos comentarios. En primer lugar, muchos de los

mejores pensadores, del pasado y contemporáneos, se han ocupado de los

problemas relativos a causas y efectos. Esto ha dado lugar a una extensa

serie de publicaciones sobre el tema que aumenta constantemente. En este

Manual se ha adoptado como un marco para el análisis un concepto de

causalidad basado en el sentido común.

En segundo lugar, las ciencias sociales no han tenido mucho éxito

en establecer leyes de causalidad como las que existen en las ciecias

naturales. Entre las razones que se suelen mencionar figuran las

siguientes:

(a) La gran diversidad y variabilidad del comportamiento humano.

(b) El carácter adaptable y reactivo del comportamiento humano.

(c) La imposibilidad de experimentar, y de reproducir

experimentos, en la mayor parte de los medios sociales.

En consecuencia, resulta generalmente imposible establecer con todo rigor

la concatenación causal que los evaluadores deben descubrir. Normalmente,

tendrán que contentarse con demostrar que es verosímil que el proyecto haya

logrado los efectos previstos y que no se han producido efectos secundarios

desfavorables de importancia que neutralicen los beneficios obtenidos. El

interrogante que se plantea es el siguiente: ¿Qué debe considerarse como

verosímil? Sin embargo, a ese interrogante no se le puede dar, por su

propio carácter, una respuesta que sea única y sencilla. Las normas,

técnicas y sugerencias que se exponen en este Manual, tomadas en conjunto,

ofrecen un marco para decidir lo que es verosímil en las circunstancias

específicas de los diversos proyectos.

Los grandes proyectos de desarrollo no son experimentos, salvo en

el sentido muy general de que intervenciones relativamente independientes

- 29 -

en los sistemas sociales puedan describirse en términos generales como"experimentos sociales". Los proyectos se planean y financian porqueexiste un conjunto de conocimientos y experiencias que indican que ciertasactividades producirán normalmente ciertos resultados; dicho de otro modo,que tienen un modus operandi. En este conteaxto, la evaluacion consiste enestablecer si estas expectativas se han convertido en realidad en un casodeterminado. Pero ésto quizá sea adelantarse al argumento: ante todo espreciso considerar el modelo científico.

3.2 U¡ modelo experimental científico

El método básico divide los objetos en estudio en dos grupos.[io de ellos, denominado el grupo de tratamiento, se somete al estímulo ointervenci6n causal predeterminado, generalmente denominado el"tratamiento" (que en el marco de este Manual es el proyecto). El otrogrupo, denominado grupo de control, no recibe el tratamiento y su progresoofrece la base de comparación.

La situaci6n puede representarse mediante el diagrama siguiente:

GR IPO Q1E RECIBE Xta, Yta -- TRATAMIENTO Xtd, YtdEL TRATAMIENTO. etc. APLICAD etc.

GRIPO 'IE CONTROL Xcay Yca Xcd, Ycdetc. etc.

Las variables de efecto (las características de situaci6n o comportamientoque se supone la intervenci6n modificará, representadas por X, Y, etc. enel diagrama) se miden en los dos grupos, antes y después de que se apliqueel tratamiento. Los cambios que ocurran en el nivel de estas variables enel grupo que recibe el tratamiento se comparan entonces con loscorrespondientes cambios en el grupo de control; las diferencias detectadasse atribuyen al tratamiento. Si el tratamiento puede aplicarse a distintosniveles de intensidad (por ejemplo, funcionarios de extensión que visitanuna vez al mes o una vez cada tres meses o una vez al ano), puede habervarios grupos a los que se aplica el tratamiento, uno para cada nivel.Generalmente, este sistema expandido da resultados más válidos, puesto que,al relacionar los cambios en el nivel de los efectos con los cambios en elnivel de tratamiento, se establece con mayor precisi6n la relaci6n decausalidad. Esto puede permitir ejercer un control mas eficaz enaplicaciones futuras.

- 30 -

Cuando se experimenta con material inerte, no es necesario un

grupo de control; puede suponerse que el material que no se somete al

tratamiento permanecerá igual y que no hacen falta observaciones sobre el

mismo, pero no es posible esperar esta constancia cuando se trata de

poblaciones humanas.

Para hacer inferencias sobre causa y efecto con certeza, es

necesario que los dos grupos tengan una composici6 n idintica antes de que

se aplique el tratamiento a uno de ellos. Por supuesto, esa identidad es

imposible y, por lo tanto, lo que se trata de conseguir es "equivalencia",

que es una relaci6n menos precisa; por ejemplo, el estudio de gemelos.

Pero aún este concepto de equivalencia es demasiado restrictivo y limitaría

mucho los estudios. Por lo tanto, se trata de conseguir .una cierta

equiparaci6n por bloques. Los miembros de los dos grupos se equiparan

según sea su posici6n respecto de las variables que se considera probable

influyan en su reacci6n ante la intervenci6 n. Las variables utilizadas

para equiparar podrían ser la edad, sexo, categoría socioecon6mica, nivel

de estudios, superficie cultivada o numero de miembros de la familia. Es

ya difícil obtener y mantener una equiparación satisfactoria respecto de

una variable, lograrlo en varias variables es sumamente difícil.

Un método utilizado con frecuencia para lograr la equivalencia es

la aleatorizaci6n. Este método consiste en asignar los sujetos al azar a

los grupos de tratamiento y de control, de manera que éstos sean

equivalentes en "promedio". De este modo, no es probable que ninguno de

los grupos reaccione de manera especialmente favorable o desfavorable al

tratamiento. Así, en un ensayo de fertilizantes, el terreno se divide en

varias parcelas y los distintos tratamientos con fertilizante se asignan

aleatoriamente a los mismos. (Naturalmente, pueden disenarse experimentos

mucho más complicados que este modelo aleatorio sencillo, pero éstos no son

pertinentes al argumento que aquí se presenta).

Es preciso comprender el carácter restrictivo de este modelo. No

se trata simplemente de obtener una muestra aleatoria de sujetos; esos

sujetos tienen que asignarse luego en forma aleatoria a los grupos de

tratamiento y de control. En varios proyectos realizados en el pasado, en

los que era posible efectuar una asignación aleatoria, no se hizo así; se

asign6 a la gente basándose en un criterio de necesidad mis bien que en uno

de aleatoriedad; por ejemplo, a los nilos más pobres se les puso en el

grupo de tratamiento pra que reciban leche gratuita, es decir, el

tratamiento.

La asignaci6n aleatoria es generalmente poco práctica en los

proyectos de agricultura y desarrollo rural. Puede suceder que un proyecto

abarque a ciertos pueblos y excluya a otros cercanos que son semejantes en

algunos sentidos. Pero es muy improbable que los pueblos del proyecto

hayan sido seleccionados con criterio aleatorio (aun cuando el comenzar los

trabajos del proyecto en una parte de una zona completa y homogénea puede

- 31 -

considerarse como una aproximaci6n). El hecho de que precisamente esos

pueblos hayan sido elegidos suele significar que son distintos de losexcluidos por alguna raz6n, y a menudo se espera que estas mismasdiferencias influyan en su reacci6n ante la intervenci6n del proyecto. Siel proyecto tiene por objeto beneficiar a los agricultores más pobres, esevidente que no sirve tener un grupo de control integrado por agricultoresde mayores medios.econ6micos. Los grupos no aleatorios ofrecen informaci6nvaliosa (véase la secci6n 3.3), pero, al deducir conclusiones, es precisoprestar atención al hecho de que no son equivalentes.

Cuando los objetos son seres vivientes, hay un cambio natural conel transcurso del tiempo, un progreso hacia la madurez (que se denominaefecto de maduraci6n) que complica la evaluaci6n, aun cuando los grupossean equivalentes al principio. Además, el medio ambiente influye tambiénen las variables seleccionadas para medir los efectos del proyecto.Algunos de los cambios inducidos por el medio ambiente pueden ser mayores

que los previstos como resultado del proyecto. En la agricultura y eldesarrollo rural son comunes las fluctuaciones dentro del año y las grandesvariaciones de un alío a otro, debido principalmente a la variabilidad delas condiciones meteorológicas. El "mensaje" o "senal" del proyectoquedará oculto muchas veces por el conjunto de efectos que producen estosotros factores. Tampoco es probable que los dos grupos experimentenexactamente la misma sucesi6n de cambios ambientales a lo largo del tiempo

y del espacio. Puede ocurrir que haya un nuevo mercado en una zona o un

nuevo camino en otra. Resulta en ese caso difícil distinguir las

diferencias entre los grupos de tratamiento y de control entre las que sedeben al tratamiento y las que han sido originadas por causas ex6genas.

En el modelo experimental los grupos de tratamiento y de controlpueden aislarse bien entre sí y frente al mundo exterior. Dichoaislamiento no resulta posible en la mayor parte de las circunstancias que

rodean a los proyectos. Uh aspecto de ésto es la imitaci6n. Si algunosagricultores adoptan nuevas prácticas, puede haber otros que las copien.

Esta imitaci6n es muchas veces parte del diseio del proyecto. Aún en el

caso en que no lo sea, no es conveniente, por razones iticas, impedirlo. Entodos los casos, su existencia es importante al realizar la evaluaci6n

definitiva del impacto ejercido por el proyecto.

Las reacciones humanas pueden perturbar también de otras maneraslas condiciones experimentales. En los experimentos médicos se da al grupode control un placebo--una píldora o tratamiento que se espera no produzca

cambio fisiol6gico alguno--para tener en cuenta la posibilidad de que los

resultados sean ocasionados por los efectos psicol6gicos de recibir un

tratamiento y no por los efectos de la innovacion que se esti ensayando.

Desde luego sería ridículo considerar la posibilidad de utilizar un placebo

en el medio agrícola; sería difícil organizar visitas de los agentes de

extensi6n que no comunicaran informaci6n útil. Además, ello constituiría

un desperdicio de recursos y sería contraproducente.

- 32 -

Iha situaci6n semejante, que afecta al grupo de tratamiento, sedenomina el efecto de Hawthorne, denominado así según la fábrica en la quelos experimentos demostraron que la productividad era estimulada por elhecho de que el grupo constituía un foco de interés más bien que porverdaderas modificaciones de las condiciones de trabajo. Cabe concebir que

un grupo de agricultores, a los que anteriormente se había descuidado,reaccione favorablemente a cualquier proyecto en que participen,independientemente de cuál sea su contenido.

Así surge otro factor más que viene a confundir las cosas, factorcorriente en los experimentos médicos y en cuya prevenci6n se utiliza elprocedimiento de pruebas doblemente an6nimas. Esto ocurre cuando los queadministran el tratamiento prestan mayor atenci6n a los que lo reciben que

a los demás. En consecuencia, es posible que un agente de extensi6nofrezca consejos más detallados y cuidadosos a los agricultores que recibenel crédito que a los que no lo reciben. No sería conveniente desalentar el

estímulo o entusiasmo en la puesta en marcha de un proyecto, pero elpeligro es que una parte del efecto que se registre se deba a este estímulogeneral y no a otros insumos específicos del proyecto. Al efectuar laevaluaci6n, es preciso considerar lo que sucede cuando se retira o reducela presión intensa ejercida por el proyecto.

Por supuesto, podría considerarse que estos efectos sonbeneficios del proyecto, que emanan de la organizaci

6n del proyecto y no de

su contenido, pero la evaluaci6n tendrá normalmente como objetivodeterminar la eficacia de los insumos específicos aportados.

En los experimentos científicos suele haber pocas p&rdidas de

cualquiera de los dos grupos. En los estudios humanos puede suceder quelos sujetos no estén dispuestos a continuar participando, al cansarse conel tiempo de las entrevistas, o puede ocurrir que se trasladen a otrolugar. La composición de los grupos de agricultores que participaron enalgunos planes de PILER (en México) ha variado continuamente, aun cuandolas variaciones han quedado ocultas en cifras relativamente estables de la

poblaci6n total. Las pérdidas de este tipo son especialmente perjudicialessi ocurren a un ritmo distinto en los dos grupos. Puesto que larepercusi6n definitiva del proyecto no puede determinarse hasta que hayatranscurrido bastante tiempo después de la terminaci6n del proyecto, es

sumamente difícil mantener grupos satisfactorios, aun cuando sea posibleestablecerlos al principio. Además, cuanto mis largo sea el período deejecuci6n, mayor será la posibilidad de que ocurran cambios importantes de

maduraci6n y del medio ambiente que afecten a los grupos de manerasdistintas.

En síntesis, en los proyectos de desarrollo no suele ser posible

obtener grupos equivalentes o lograr una asignación aleatoria. Lasexigencias de la equiparación son rigurosas, y, aun cuando se obtenga

equivalencia al principio del proyecto, durante el curso del mismo se

- 33 -

producirán casi con toda seguridad pérdidas distintas de sujetos en ambosgrupos, que ocasionarán una falta de equivalencia. Por consiguiente, senecesitan métodos distintos del modelo científico experimental. Por esaraz6n, conviene considerar cuasi-experimentos, elaborados paracircunstancias en las que se trate de encontrar las relaciones de causa aefecto en situaciones en las que los grupos de control y de tratamiento noson equivalentes, o en los que no hay grupo de control.

3.3 Cuasi-experimentaci6n: El diseño de grupos no equivalentes

Se han definido los cuasi-experimentos como " experimentos quetienen tratamientos, mediciones de resultados y unidades experimentales,pero que no utilizan la asignaci6n aleatoria ... las comparaciones dependende grupos no equivalentes que difieren entre sí de varias maneras distintasademás de la presencia de un tratamiento cuyos efectos se estén ensayando.La tarea ... (pues) ... es básicamente la de separar los efectos de untratamiento de los que se deban a la falta de comparabilidad inicial entrelas unidades promedio de cada grupo de tratamiento".

Hay dos disefios básicos para los cuasi-experimentos. El primerode ellos es el "diseio de grupos no equivalentes". Este diseñío mantiene laidea de un grupo de control y otro de tratamiento (o de varios grupos detratamiento), ilustrado en la sección anterior, pero sin asignaci6naleatoria. La equiparaci6n o comparaci6n por bloques se efectúa en laetapa de análisis, después de que se han establecido los grupos teniendo encuenta la situaci6n en el terreno. Aun cuando se aplaza la equiparaci6n,es necesario tener en cuenta en la etapa de planeamiento la intenci6n dehacerla más adelante. La elecci6n de los datos que hayan de recopilarsedeterminará hasta qué punto se puedan utilizar las técnicas analíticas deque se disponga en las etapas posteriores de evaluaci6n. En consecuencia,es preciso determinar antes de comenzar la recopilación de datos lasvariables que pueden utilizarse luego en análisis de covarianza o paranormalizaci5n. Naturalmente, los factores que complican la situaci6n,antes examinados, que pueden hacer más inciertas las deducciones causalesaun cuando la aleatoriedad o la equiparación detallada anticipada seanposibles, continuarán influyendo en el disefño de grupos no equivalentes.Resulta difícil juzgar por anticipado si serán más o menos perjudiciales.

Los otros problemas del diseño de grupos no equivalentes tienenque ver con establecer si las diferencias entre los cambios experimentadospor los dos grupos cuasi-experimentales se deben o no a causas distintasdel tratamiento. Probablemente los factores de variaci6n del medioambiente y de maduraci6n se verán agravados en el caso de los grupos noequivalentes. El hecho de que no sean equivalentes puede dar por resultadoque se vean expuestos a una evolución socioeconomico distinta. Si hay unaserie de observaciones, en vez de encuestas de "antes" y "después", puedeser posible identificar (y, por consiguiente, tener en cuenta) los hechosque puedan perturbar el medio ambiente. Es muy probable que ocurra una

- 34 -

maduración distinta en los dos grupos si el grupo de tratamiento seauto-selecciona, puesto que probablemente estará integrado por las personasmás dinámicas o capaces, o por los que estén en condiciones de beneficiarsemás del tratamiento.

Una versión de este problema es la tendencia a que los ricos sehagan más ricos, y los.pobres más pobres; o "nada tiene tanto 9xito como elpropio éxito". En esta situaci6n, aun en el caso de que un grupo detratamiento--en este caso, los pobres--continúe siendo pobre (o, enrealidad, empeore su situaci6n) en relaci6n con el grupo de control másrico, puede aducirse que su situaci6n se habría deteriorado aún más de no

haber sido ior el tratamiento. Es posible que dicho argumento sea cierto,pero es dificil de demostrar. Se trata de un argumento basado en el "hechocontrario" y necesita datos básicos s6lidos para establecer con un gradorazonable de confianza cuál habría sido la tendencia en el caso de que nohubiera habido tratamiento. Este es un ejemplo en el que hay que utilizarsimultáneamente información proveniente de series cronológicas.

Cuando los grupos son equivalentes, los mismos indicadores ytécnicas de medici6n funcionarán en forma semejante con ambos. Mientraslos grupos no equivalentes no sean excesivamente diversos, continuaráexistiendo esta situación. No obstante, si hay determinadas diferenciasentre los grupos respecto de algunas variables, surgirán nuevos problemas.Son especialmente arriesgados los indicadores que se miden medianteescalas, debido a los efectos de "valor mínimo" o "valor máximo" que seproducen debido a que los extremos de la escala funcionan de maneradistinta que el resto de la escala. Por ejemplo, si al principio un grupoestá cerca del extremo superior de una escala (que no puede pasar del100%), su tasa de crecimiento utilizando este indicador será muy distintaque la de un grupo que comience en un valor inferior en la escala.

Si el cambio que probablemente producirá el tratamiento no esimportante en relaci6n con los cambios que se producen como consecuencia dela influencia de factores sociales y económicos (y así es como sucede conmuchos proyectos), la magnitud de la muestra necesaria para medir losefectos será grande. (En la Parte 7 se examina con mayor detalle lacuestión de los tamaios de las muestras). Es posible que el grupo decontrol tenga que ser más o menos del mismo tamafio. Se tropezará muchasveces con resistencia para utilizar una gran proporción de los recursos de

que se dispone para recopilar datos sobre personas o empresas que no son deinterés directo para el proyecto. Hay una tendencia natural a concentrarla atenci6n en el grupo al que se aplica el tratamiento. Esto puedecompensarse si el grupo de control está constituido por beneficiarios deuna fase ulterior del proyecto; de este modo, los datos de "control"pasarán a constituir en una etapa posterior datos "básicos".

Sin embargo, en los diseños cuasi-experimentales puede utilizarse

como control un grupo muestral ya existente. Podría también haber otras

- 35 -

encuestas muestrales en marcha en las cercanías del proyecto. Si elproyecto tiene una zona extensa de aplicaci6n, los datos de una encuestaregional o nacional pueden utilizarse con fines de control. Si se hallanen marcha investigaciones que s6lo son parcialmente pertinentes, quizá seaposible ampliarlas para obtener nueva informaci6n útil. Ese procedimientoserá sin duda mas econ6mico que la creaci6n, mantenimiento y observaci6n deun grupo especial de control, y liberará recursos para el estudio intensivodel grupo de tratamiento (el proyecto) o para estudios conexos. Otraventaja de utilizar de esta manera un grupo muestral ya existente es quelos datos relativos a este grupo quizá se remonten al pasado. Además, yase habrá prestado atencion a las cuestiones relativas a indicadores ymétodos de recopilar los datos y, por lo tanto, puede aprovecharse estaexperiencia.

No todas las encuestas existentes ofrecen un grupo útil decontrol, pero los mayores medios de'investigaci6n de que actualmente sedispone en muchos países en desarrollo y el creciente número y amplitud delas encuestas sobre hogares rurales parecen indicar la conveniencia deinvestigar esta posibilidad.

Cuando se establecen grupos especiales de tratamiento y decontrol, los datos se registrarán y avalizarán normalmente en relaci6n concada persona perteneciente a cada uno de los grupos. Pero posiblemente losgrupos muestrales no mantengan los mismos miembros durante el período delproyecto; en este caso, reviste especial importancia que el análisisincluya un estudio minucioso de la variación registrada dentro del grupo,así como de las diferencias entre los grupos. Cuando se utiliza una seriede grupos de composición variable, la variaci6n dentro de los grupos es unode los pocos instrumentos de que se dispone para desentrañar los factorescausales.

3.4 Cuasi-experimentación: El diseño de series cronol6gicasinterrumpidas

El segundo tipo de cuasi-experimento es el diseñío de seriescronol6gicas interrumpidas. En su modalidad más sencilla, ésto suponesimplemente la comparación de un grupo de tratamiento antes y después deltratamiento. Si el tratamiento se extiende durante un cierto período, comosucede en el caso de la mayoría de los proyectos agrícolas y de desarrollorural, la comparaci6n entre "antes" y "después" se verá reforzada si seobtiene tambián la situación existente a mitad del período. Sin embargo,como el nombre "serie cronológica interrumpida" indica, este diseñofunciona mejor cuando los datos se obtienen en forma de una seriecronol6gica normal y el tratamiento es una "sacudida" repentina de duraci6nrelativamente breve que se produce en algún punto de la serie; por ejemplo,la modificaci6n del precio de un producto agrícola que entra en vigor enuna fecha especíifica. Esta última condición representa un inconvenientedel modelo en muchos proyectos en que los insumos que van a producir los

- 36 -

cambios son distribuidos, necesariamente, a lo largo de un período

prolongado.

El diseño más sencillo es el más práctico para la mayoría de los

proyectos agrícolas y de desarrollo rural. Si se adopta, es necesario

incorporar todos los medios posibles que refuercen lo que es un diseio

deficiente. Más adelante se examina la forma en que ésto puede hacerse.

Será más fácil identificar las concatenaciones causales si se

puede combinar el diseño de series cronol6gicas interrumpidas con el diseño

de grupos no equivalentes antes expuesto. Si no es posible identificar

ningún grupo de control, o solamente es posible un control rudimentario

mediante otras fuentes de datos, el comienzo de la serie cronol6gica tiene

que servir de control con el que se puedan comparar los acontecimientos que

ocurran en el grupo de tratamiento. En estas circunstancias, es esencial

realizar una encuesta anterior a la ejecución del proyecto, puesto que esta

es la única manera de asegurarse de que la medición de la situación

existente antes del proyecto no está "contaminada" por ningún efecto del

proyecto. Si el proyecto supone construcción en gran escala, cuyos

beneficios no se harán sentir hasta que se terminen las obras de

ingeniería, el punto base de la serie cronológica puede establecerse

durante esta fase del proyecto. Sin embargo, la construcción y el empleo

que ésta origine producirán casi sin duda algunos efectos considerables.

Por ejemplo, en una serie de proyectos, el empleo proporcionado por la

perforación de pozos fue tan beneficioso para los agricultores que estos

prefirieron continuar empléandose en ampliaciones del programa de

construcción, en vez de volver a sus tierras y utilizar el agua de que

ahora disponían para aumentar la producción, como era la intención

original.

Toda inferencia acerca de la causa en este marco no experimental

dependerá de la disponibilidad de información minuciosa sobre el progreso

del proyecto obtenida mediante el sistema de seguimiento. Esta combinacion

del método no experimental y el sistema de seguimiento sienta las bases

para el método del modus operandi mencionado al comienzo de esta Parte. La

descripción de la sucesi6n de hechos ocurridos durante el proyecto

contribuirá a explicar los efectos y a llegar a una conclusión verosímil

sobre la causa.

La serie cronológica interrumpida se utiliza para detectar

cambios en los niveles y en las tasas de variación. Probablemente tendrá

que transcurrir algún tiempo hasta que estos cambios se difundan a través

del grupo de tratamiento. Aun cuando el proyecto ofrezca una intervencion

repentina, por ejemplo, al comenzar a fluir el agua por los canales de

riego, los beneficios definitivos solamente se percibirán después de que

haya transcurrido cierto tiempo. En consecuencia, el período de evaluación

retrospectiva--la encuesta después del proyecto--deberá ser suficientemente

largo para medir el cambio y también la persistencia del mismo. Cuanto más

- 37 -

prolongada sea la serie cronol6gica, mayores probabilidades habrá de teneren cuenta en el análisis las vriaciones estacionales y cíclicas.

Es necesario asegurarse de que durante todo el periodo dereferencia se mantienen los m5todos aplicados en las encuestas y la calidadde la recopilaci6n de datos. Si varian estos factores, el análisis puededar resultados falsos.

3.5 Investigaci6n de relaciones mediante estudios de casos

En lo expuesto hasta aquí, se ha dado por sentado que el examendel cambio y de la causalidad del cambio se lleva a cabo por medio deencuestas de los grupos seleccionados, de tal manera que puedan hacerseinferencias sobre la poblaci6n en general. Es posible realizar un examenminucioso de "representantes" de los grupos de tratamiento y de control sise mantiene muy reducido el número de casos. Así puede lograrse laequivalencia necesaria, y la profundidad de estudio que un observadorcompetente puede lograr a este micronivel le permite identificar losfactores determinantes del cambio diferencial, por lo menos dentro de loslímites razonables-o verosímiles de confianza antes indicados.

En las Partes 5 a 7 se expondrán con mayor detalle lascircunstancias en las que conviene utilizar encuestas muestrales o estudiosde casos. No obstante, conviene subrayar aquí que los estudios de.casospueden ser el medio más adecuado para que el evaluador investigue lacausalidad. Sin duda, son más sencillos de organizar que las serieslongitudinales de datos, que exigen una base de referencia cronol6gicamenteapropiada y una continuaci6n más allá del período de ejecuci6n.

3.6 Conclusiones prácticas

En esta Parte, que ha partido del marco de un riguroso modeloexperimental y que ha tenido en cuenta la dificultad de aplicarlo tal comose utiliza en las ciencias naturales, se ha tratado de progresar hacia unconjunto de objetivos prácticos para la evaluación específica de proyectos.

A continuaci6n se presenta un resumen de las directricesofrecidas:

(a) Adoptar disenos basados en la utilizaci6n de grupos decontrol equiparados inicamente cuando puedan satisfacerselas condiciones rigurosas para su selecci6n.

(b) Buscar y aprovechar datos de control menos rigurososprovenientes de otras encuestas, especialmente de las deámbito nacional o regional.

- 38 -

(c) Encargar estudios minuciosos de casos, a fin de analizar a

fondo fen6menos específicos que se supone afectan el

funcionamiento del proyecto, utilizar los resultados

obtenidos mediante estos estudios de casos para ayudar a

formular conclusiones o relaciones "verosímiles".

(d) Dépender del análisis de series cronol6gicas Gnicamente si

se encarga a tiempo una encuesta para obtener datos básicos,

previindosé la realizaci6n de encuestas ulteriores de

verificaci6n.

(e) Seleccionar indicadores que puedan medirse con exactitud

mediante los métodos disponibles de recopilaci6n de datos.

(f) Mantener la posibilidad de comparar los datos a lo largo del

tiempo, utilizando a tal fin la misma metodología en las

encuestas, la misma calidad en la recopilaci6n de datos y

los mismos análisis.

(g) Considerar como un todo el sistema de seguimiento y

evaluaci6 n, utilizando la interacci6n entre las distintas

reflexiones que ofrece sobre el progreso del proyecto para

asegurarse de que las conclusiones a que se llegue mediante

el análisis estadístico rutinario son confirmadas por

evidencia observada.

- 39 -

PARTE 4

LA SELECCION DE VARIABLES E INDICADORES

4.1 Los criterios para la selección

En las primeras partes del Manual se han expuesto los preceptosque deben seguirse en el diseio de sistemas de seguimiento y evaluaci6npara los proyectos agricolas y de desarrollo rural. En esta Parte seexpone la cuestión fundamental de las variables o indicadores que han demedirse con estos sistemas. En vista de la gran diversidad de proyectos yde los niveles distintos de recursos de que se dispone para la recopilaci6nde datos,, es evidentemente imposible presentar una lista definitiva devariables que hayan de medirse; lo que es apropiado en un proyecto puedeno serlo en otro, y lo que es factible de medir en un medio puede serimposible en otro distinto. Por otra parte, no se cumplirán los fines delManual enumerando simplemente todo lo que se haya propuesto en diversasdirectrices o utilizado en varios proyectos con mayor o menor 5xito. Elexamen de la experiencia acumulada hasta ahora permite recomendar algunasvariables por considerarse que tienen bastantes probabilidades de ser útilen la mayoría de los casos, o descartar otras que han resultado dificilesde recolectar o de relacionar con los objetivos de los proyectos. Eso esprecisamente lo que se trata de hacer aquí. Conviene considerar, antetodo, las variables recomendadas. Las que aquí se critican puedenincluirse, pero sabiendo de antemano que exigirán una determinada pericia yrecursos para utilizarlas.

A veces se establece una distinci6n entre variable e indicador,reservándose esta última denominación para los coeficientes derivados devariables, o para las transformaciones del valor de una variable en uníndice o en una escala. Pero la distinci6n no es precisa; puede escogerseuna variable como indicador si, de alguna manera, su valor representa másque su significado intrínseco en su contexto limitado. Por ejemplo, lamortalidad infantil es una variable que se ha utilizado en muchos casospara representar mucho más que las defunciones de menores de un año,sirviendo como indicador de la posici6n relativa que ocupa la sociedad enlo que respecta al desarrollo de la salud pública. Por lo tanto, paraevitar confusión, se utilizará el vocablo "indicador" para significartambién "variable", a no ser que para presentar un argumento sea necesarioestablecer una distinción entre ambos.

Las preguntas de carácter general que pueden hacerse alseleccionar indicadores son:

(a) ¿Puede definirse sin ambigüedad en las condicionespredominantes?

- 40 -

(b) ¿Puede medirse con exactitud en las condiciones

predominantes y con un costo aceptable?

(c) Cuando se mide, ¿indica "el estado de una condición? de una

manera específica y precisa?

(d) ¿Es una medida no sesgada del valor que interesa?

(e) Cuando se considera como un conjunto de indicadores que han

de medirse, ¿contribuye especialmente a explicar una parte

de la variación ocurrida en la situaci6n de la que es

reflejo?

Antes de considerar los indicadores que son apropiados para medir

el progreso del proyecto hacia cada objetivo por separado, conviene hacer

algunos comentarios sobre estas preguntas para preparar el terreno.

(a) Definici6n sin ambigiedad

Muchos indicadores econ6micos y sociales que se han definido con

precisi6n en relaci6n con una sociedad industrial y orientada hacia el

dinero no son aplicables a pequeñíos agricultores que viven a un nivel de

semisubsistencia en los países en desarrollo. Ejemplo de ello son el

desempleo o subempleo y los ingresos.

En un medio en que predominan los asalariados, es posible definir

con claridad el desempleo y el subempleo, aun cuando también en estos casos

hay ciertas dificultades. La definici6n de estos términos en relaci6n con

los pequeios agricultores ha sido dificil y todavía se debate en los foros

internacionales y en las publicaciones sobre materias sociales. ¿Que

constituye una jornada completa de trabajo en el caso de una familia que

tabaja en una explotaci6n agricola de una hectárea? ¿Qué significa "que

busca activamente empleo" en una situaci6n en la que no hay ninguna

posibilidad de encontrarlo?

Los ingresos de una familia agrícola que vive a un nivel de

semisubsistencia son susceptibles de una diversidad casi infinita de

definiciones. ¿Se deben valorar los alimentos producidos para el consumo,

domistico, y en caso afirmativo, a qué precio? Las variaciones de tamafo y

composici6n de una explotaci6n ganadera hacen dificil determinar lo que son

ingresos y lo que es capital. ¿Qué se va a hacer con el intercambio de

alimentos entre vecinos? ¿Son brutos o netos los ingresos agrícolas

después de deducir el costo de los insumos? En un estudio reciente se

llega a la siguiente conclusión: "Los economistas que determinan el v4lor

de la mano de obra familiar (si ha de cargarse como costo de producción) y

del consumo familiar tienen mucho más c9ntrol sobre el nivel declarado de

ingresos que los propios agricultores". /

I/ Information for Decisionmaking in Rural Development: Report for USAID

(Washington, D.C.: Development Alternatives Ltd., 1978).

- 41 -

(b) Medici6n exacta

Aun cuando sea posible definirlos, muchos indicadores sondifíciles de medir cuando se trata de campesinos analfabetos que no estánacostumbrados a utilizar unidades uniformes de medida. Las publicacionesdemográficas indican lo difícil que es obtener con exactitud datos tanfundamentales como la edad o la mortalidad.

El rendimiento de los cultivos puede medirse con exactitudmediante la siega parcial de la cosecha (véase la Secci6n 4.4), pero estemétodo requiere tiempo y pericia y, tal como se suele aplicar, puedeproducir únicamente estimaciones globales relativas a toda la localidad yno estimaciones para las diversas explotaciones.

La medici6n de los ingresos, cualquiera que sea la definici6n quese d5 a este concepto, es sumamente difícil y no solamente en el caso delos pequenos agricultores. En el informe antes mencionado se llega a laconclusión, después de examinar numerosos intentos de medir los ingresos,de que "si la medici6n de los ingresos tiene por objeto obtenerestadísticos (valores medios) en un determinado momento, volver a medir losingresos en un segundo momento y atribuir las diferencias a la intervenci6ndel proyecto, la situación actual de adelanto de las encuestas estadísticasno producirá mediciones con suficiente exactitud para corroborar dichasconclusiones".

Dado que los ingresos constituyen una necesidad primordial parala mayoría de los usuarios de los datos de evaluaci6n, ésta es unaconclusi6n importante que más adelante se considerará con mayor detalle.

(c) Especificidad y precisión

La especificidad y precisi6n tienden a disminuir al avanzar a lolargo de la sucesi6n de insumos, productos, efectos y repercusiones. Esposible que la entrega de los insumos en una zona controlada del proyectosea específica, es decir, una variaci6n en la tasa de entrega indica unavariaci6n real en la ejecución del proyecto. El producto logrado comoresultado será menos específico, ya que el rendimiento puede oscilarestacionalmente según las variacines meteorol6gicas en grado mayor que latendencia subyacente debido a la utilizaci6n de los insumos. Los ingresos,como un índice del efecto causado por el proyecto, pueden verse influidosen grado aún mayor por influencias ex6genas.

Desde el punto de vista del seguimiento de la ejecución, laprecisi6n puede ser un criterio práctico para elegir los indicadores; parala evaluación de los resultados la precisi6n puede ser imposible delograr. Para la evaluaci6n debe contarse por lo menos con una serierazonable de valores del indicador a lo largo del tiempo. Utilizado comoserie cronol6gica, la tendencia del indicador puede indicar la tendencia dela condición que tiene por objeto representar, teniendo debidamente en

- 42 -

cuenta el efecto perturbador de las influencias estacionales y aleatorias.

(d) Sesgo

Evidentemente conviene que, siempre que se mida un indicador,

este sea reflejo del verdadero valor de la condición que representa. Sin

embargo, al medir el cambio que ocurre a lo largo del tiempo, puede que no

importe la presencia de un sesgo en el nivel absoluto en cada momentocronol6gico, siempre que permanezcan constantes el sentido y la magnitud de

dicho sesgo, ya sea en términos absolutos o relativos, para distintos

niveles del indicador.

Así, por ejemplo, el volumen de una cosecha comprada por unajunta de comercializaci6n será normalmente una estimación sesgada de lacosecha total vendida (a menos que exista un monopolio), pero los cambios

del volumen adquirido por la junta pueden ser un buen indicador del cambio

registrado en el volumen total vendido, siempre que permanezca constante la

proporción del mercado total que corresponde a la junta de

comercializaci6 n. En forma análoga, la estimación de la producción de un

agricultor puede ser sesgada, pero si el sesgo relativo permanececonstante, la variación proporcional de esta estimación a lo largo del

tiempo indicará con exactitud la verdadera variación de la producción.

El problema es si dicho supuesto de constancia del sesgo absoluto

o relativo está justificado. En los años de buenas cosechas, posiblemente

baje el precio en el mercado abierto y los agricultores quizá vendan una

mayor parte de su cosecha a la junta de comercializaci6n a un precio

estable garantido. En los aios de malas cosechas, el agricultor quizás se

aproveche de los elevados precios que predominan en el mercado y

posiblemente las ventas a la junta de comercializaci6 n disminuyan

proporcionalmente mucho más que el descenso registrado en el volumen total

vendido. O bien puede suceder que los agricultores declaren cada vez una

proporción menor de su producción a medida que ésta se eleve para no

indicar que ha mejorado su prosperidad.

(e) Explicación parcial de la variación

Al seleccionar los indicadores para un sistema de seguimiento y

evaluación, se trata de reunir un conjunto en el que cada indicador,

considerado individualmente, explique una parte de la variación global

registrada en las condiciones objeto de estudio, y, en conjunto, expliquen

una gran proporción de la variación total. En un sistema bien documentado

y cuantificado puede determinarse la contribución de cada variable mediante

técnicas estadísticas como, por ejemplo, el análisis multivariante, en que

se determina paso a paso el aporte de cada una y decidiendo si cada

variable debe incluirse en la ecuación explicativa según el aporte que le

corresponda. *ichas posibilidades no suelen presentársele al que diseña

los sistemas de seguimiento y evaluación. No obstante, mediante estudios

- 43 -

anteriores o incluso por intuicion es posible a veces identificar unindicador que tenga una correlaci6n tan estrecha con otro que la inclusi6nde ambos contribuirá poco más que la inclusi6n de cualquiera de los dos porsí solos. Ejemplos de pares que a veces, pero no invariablemente, tienenuna gran correlaci6n son:

ingresos - gastossuperficie sembrada - cantidad de semilla utilizadaalfabetismo - años de educaci6n escolarproducci6n de cultivos comerciales - ventas de cultivos comerciales

Habrá casos en que resulte interesante conocer el grado en que nose mantenga la relaci6n. Por ejemplo, la falta de correspondencia entre lacantidad de semilla utilizada y la superficie sembrada puede indicarprácticas deficientes de siembra. En ese caso, ambos indicadores son, porsupuesto, necesarios. Otra razón para incluir dos indicadoresestrechamente relacionados entre sí tiene que ver con las fuentes de erroral medirlos. Si solamente es posible medir un indicador en formaaproximada, o con cierto grado de sesgo, quizá merezca la pena medir otroindicador conexo en la esperanza de que el conjunto de ambos reforzará lasconclusiones que puedan deducirse, aun cuando los dos sean susceptibles deerrores de medici6n. Así puede suceder si las fuentes del error sondistintas para cada indicador. Pero si las fuentes de error son lasmismas, ello probablemente originará una confianza falsa, ya que ambaspueden ser igualmente engaHosas por las mismas razones. En consecuencia,si las estimaciones de los ingresos son sesgadas debido a que losentrevistados declararon deliberadamente cifras inferiores a las reales,puede ser útil obtener datos sobre gastos si los errores existentes enestas repuestas se deben a fallos de memoria en vez de a ocultaci6ndeliberada, aun cuando exista una gran correiaci6n entre los valoresverdaderos de ambos. Si los dos indican 6rdenes de magnitud semejantes,puede confiarse más en los resultados.

4.2 Respuestas medidas mediante escalas e indicadores sustitutos

Ie los criterios antes enumerados, el de mayor importanciapráctica desde el punto de vista del diseñador es la capacidad de medir elindicador con exactitud, a un costo razonable y en la escala requerida. Sino es posible hacer esto, puede ser necesario buscar un indicador sustitutoque pueda medirse con mayor facilidad y que parezca satisfacer, al menos enparte, los demás criterios.

Considérese, en primer lugar, el ejemplo de indicadores de lasuperficie cultivada de maíz. Entre las preguntas que se pueden hacer alos agricultores figuran las siguientes, en orden ascendente de dificultad:

(a) ¿Cuántas parcelas sembr6 el agricultor?

- 44 -

(b) ¿Cuánta semilla utilizó el agricultor?

(c) ¿Cuál fue la superficie dedicada al maíz (por ejemplo,redondeado en décimos de hectárea)?

Las preguntas (a) o (b) pueden servir como valoraci6n rápida paraobtener un indicador de si la siembra de maíz es superior o inferior atemporadas anteriores. La pregunta (a) será especialmente útil si lasparcelas están delimitadas en el catastro y son de una superficieaproximadamente igual (y conocida). Sin embargo, para otros fines puedeser necesaria una estimaci6n más precisa de la superficie, pero si losagricultores no conocen su superficie con tal precisi6n será preciso llevara cabo una encuesta de una magnitud mucho mayor para medir físicamente latierra utilizando una.de las técnicas aceptables.

En la época de la cosecha podrían figurar las siguientesopciones:

(a) ¿En cuántas parcelas se cosech6?

(b) ¿Cuántos sacos se recogieron?

(c) ¿Cuál fue la producci6n, redondeada en decenas de kilos?

La pregunta (a) posee escaso uso práctico, incluso para unavaloraci6n rápida. En el mejor de los casos indicará el número deagricultores que no cosecharon nada debido a sequía, plagas u otrasrazones. La elección es entre las preguntas (b) y (c). El agricultorpuede responder a (b)--en sacos o en otras unidades locales--con el margende error implícito debido a mala memoria, contenido variable de humedad,conversión de mazorcas a volúmenes de grano, etc. La distribuciónresultante para el grupo de agricultores estudiado no será refinada, pero aprtir de ella pueden calcularse ciertos parámetros aproximados. Lapregunta (c) requerirá probablemente una encuesta que incluya el pesodirecto de la cosecha en el estado requerido y con procedimientos paranormalizar los pesos según un contenido fijo de humedad. Sin estasprecauciones, el nivel de exactitud que parecen indicar las cifrasregistradas es falso.

Esta intervenci6n directa en gran escala, necesaria para obtenermediciones exactas, constituye la dificultad principal en las encuestas apequeños agricultores que no llevan registros de contabilidad y queprobablemente no están familiarizados con unidades internacionales demedida.

Aun en el caso de que se cuente con los recursos necesarios paraefectuar una encuesta con mediciones directas, el tiempo que lleva larecopilaci6n de los datos y su análisis hará que probablemente resulte

- 45 -

inapropiada para un seguimiento rápido con el fin de, por ejemplo, juzgarel éxito de la siembra o determinar el volumen de producci6n queprobablemente será comercializado que podría requerir alguna intervenci6ndel proyecto. Para el seguimiento, puede ser necesario seguir el métodomás burdo de medir las respuestas en escalas o grados, aun cuando se llevea cabo también una encuesta más compleja con mediciones objetivas.

Ciertos indicadores sociales ofrecen un ejemplo distinto.Consid&rense los indicadores del estado nutricional como mediciónsustitutiva de la calidad de vida. Como se examinará más adelante, puedenutilizarse mediciones sencillas de la edad, la altura y el peso,especialmente en el caso. de los niños, para calcular indicadores. Ademásde mostrar el estado nutricional del individuo, estos indicadores, encircunstancias apropiadas, pueden utilizarse como sustitutos para estimarel bienestar general. Aquí se trata de determinar la posibilidad deestablecer esos vínculos (véase la Parte 3). Si puede demostrarse que losíndices antropométricos de los ni?os han mejorado en relación con una normaestablecida, ¿es posible deducir además que también ha mejorado subienestar general? Estas preguntas son difíciles de contestar, pero elgrado en que dichos indicadores puedan utilizarse, no solamente parareflejar una situaci6n definida en términos estrictos, sino también paraactuar como sustitutos de otros que miden una situacion más amplia, merececonsiderarse en la etapa de diselo de los sistemas de recopilaci6n dedatos.

En resumen, pues, se recomienda que se responda a las preguntassiguientes antes de lanzarse a mediciones complejas mediante encuestas engran escala:

(a) Una medida en forma aproximada mediante escalas o grados,¿proporcionará una distribuci6n adecuada para satisfacer lamayor parte de los objetivos analíticos?

(b) ¿Puede utilizarse un indicador sustitutivo, obtenidomediante mediciones sencillas, en lugar del indicadordirecto con una confianza razonable de que la variacion queregistre uno es reflejo de una variaci6n del otro?

4.3 Indicadores para el seguimiento

Aun cuando no se identifican indicadores precisos, los grupos quese presentan a continuaci6n ofrecen un conjunto recomendado de indicadorespara los sistemas de seguimiento de proyectos.

Se ha mencionado en la Parte 1 que el seguimiento determina si seestán entregando los insumos del proyecto, si éstos se están utilizando dela manera prevista y si producen el efecto inicial deseado.

- 46 -

En el primer grupo de indicadores para el seguimiento figuran lossiguientes:

(a) Cifras relativas a desembolsos financieros.

(b) Progreso de la construcción física en relación con un caminocrítico determinado de antemano.

(c) Tasas de utilización del personal y del equipo.

La fuente de estos indicadores debe ser los registrosadministrativos que se lleven en el proyecto. Aquí no hay cuestionesdifíciles de carácter conceptual o relativas a la recopilac,i6n de datos.Lo que hace falta son registros bien llevados y el rápido cotejo, resumen,análisis y comunicación de los resultados a la gerencia del proyecto.

Un segundo grupo de indicadores para el seguimiento comprende lossiguientes:

(a) Parámetros técnicos que requieren registro con instrumentos,por ejemplo, corrientes de agua, evaporación, humedad delsuelo.

(b) Parámetros del medio ambiente, por ejemplo, datosmeteorol6gicos.

(c) Parámetros econ6micos, por ejemplo, precios de los productosagrícolas y pecuarios.

Estos suelen estar bien identificados y definidos y losdirectores de proyecto los suelen considerar útiles. El registro peri6dicode los precios de los productos básicos pertinentes, según procedimientosconvenidos de antemano, debe formar parte de la mayoría de los sistemas deseguimiento de proyectos. Los ciclos estacionales y las tendencias anualesde los precios locales afectan a la ejecución del proyecto. El casorelativamente frecuente en que no se presta atenci6n a los precios comoindicador ofrece un ejemplo de descuidar lo sencillo y favorecer locomplejo.

Pasando a la primera interacci6n entre el proyecto y losbeneficiarios, hay necesidad de indicadores del abastecimiento de insumos.Ejemplos de ésto son:

(a) Concesi6n de crédito.

(b) Insumos agrícolas directos.

(c) Servicios de extensi6n agrícola.

- 47 -

(d) Servicios de educación, higiene o sociales.

Los datos relativos a los incisos (a) y (b) en lo que respecta alsuministro de crédito e insumos deben también obtenerse de los registros delos proyectos. Los indicadores indicarán el número de beneficiarios quelos recibieron y los porcentajes respecto a las metas predeterminadas, ladistribución de estas cifras por diversas clases cuantitativas y losparámetros de esta distribuci6n (media, desviaci6n típica, cuartiles,etc.).

A un nivel, los indicadores de los servicios de extensión sonsencillos de elaborar usando registros administrativos como fuente de losdatos (véase la Secci6n 2.4). Por ejemplo, el número de beneficiarios querecibieron visitas o capacitaci6n; la frecuencia de las visitas o períodode adiestramiento recibido por los beneficiarios; el número y proporcionesde beneficiarios contactados por primera vez y de beneficiarios contactadosen forma repetida. Mayor dificultad presenta, desde el punto de vista dela definici6n y de la medici6n, la derivaci6n de indicadores respecto de lacalidad del servicio de extensi6n prestado. Un valor sustitutivo de éstoes la tasa de aceptación del consejo o mensaje comunicado. Esto se examinamás adelante bajo el título de tasas de aceptación.

La prestación de servicios de educaci6n y salud pública puedemedirse no solamente por medio del número de edificios que ofrecen esosservicios y de su personal (véase más arriba el primer grupo), sino tambiénpor el número de personas que asistan a dichos edificios para recibiradiestramiento, exámenes, 'tratamiento, etc. En estos casos, el suministrodel insumo se confunde con la tasa de utilización o aceptaci6n, las que sediscuten en detalle más adelante. No obstante, en la medida en que laasistencia al edificio para recibir el servicio no resulte necesariamenteen la aceptación del tratamiento, por ejemplo, las prácticas deplanificación de la familia, los datos sobre las visitas recibidas o elsuministro de insumo pueden utilizarse provechosamente como denominador enlos cálculos de la tasa de utilización o aceptaci6n, en vez de la poblaci6nen estado de riesgo.

Hasta este punto, el sistema de seguimiento no requiere mucho enlo que se refiere a encuestas de los beneficiarios, sino más bien mantenery utilizar adecuadamente los registros disponibles. En cambio, elsiguiente grupo de indicadores tiene que ver con la observaci6n de losbeneficiarios en lo que respecta a la utilizaci6n de los insumos recibidosy, en el caso del crédito, en cuanto al reembolso del mismo. Estosindicadores son:

(a) Tasas de utilizaci6n de los insumos.

(b) Tasas de aceptaci6n.

(c)Tasas de reembolso del crédito.

- 48 -

La utilizaci6n de insumos físicos por parte de los beneficiariosrequerirá realizar una encuesta para determinar las prácticas adoptadas,por ejemplo, tasas de siembra, método de plantar los cultivos a los que seaplic6 el insumo, etc. Conviene que las preguntas sobre utilizaci6n seansencillas y no confundir dicha encuesta con un estudio de administracinrural. Se pueden hacer preguntas sencillas a una muestra del suficientetamaio para obtener estimaciones válidas sobre la población totalbeneficiada.

Las tasas de aceptaci6n se utilizan menos de lo debido comoinstrumento de seguimiento. Son útiles como un indicador sustituto deléxito con el que se comunica un mensaje mediante capacitaci6n o visitas deextensi6n, y son tambi5n indicadores pertinentes de la aceptaci6n de losservicios médicos que se ofrecen en las clínicas. En el ejemplo mássencillo, es posible que una persona visite una clínica y se marche con lasmedicinas que le hayan recetado, pero eso no quiere decir que se tome lasmedicinas siguiendo las instrucciones o que mantendrá el tratamietnodespués de que la persona haya evaluado su experiencia inicial. Por lotanto, es necesario entrevistar luego de un tiempo a una muestra de los querecibieron el consejo médico o la receta. Esta tarea corresponde a launidad de seguimiento.

Pueden concebirse tasas de aceptaci6n de diversos grados decomplejidad. El. tipo más sencillo requiere datos que se refieranúnicamente al año en curso. Por lo tanto, si:

T es la meta, expresada en número de personas, a ser alcanzada,A es el número de personas que de hecho fueron alcanzadas,D es el número de personas que aceptaron la práctica recomendada,

pueden calcularse los siguientes coeficientes:

Indice de actuaci6n = 100 A ......... (1)T

Indice de penetración = 100 D ......... (2)A

Indice de logro = 100 D ......... (3)T

Los factores 100 se han colocado para expresar los indices en porcentajes,y se observará que (3) = (2)(1)

100

Obs5rvese que para calcular esta gama de indicadores, y si ladefinición de aceptaci6n no es ambigua, no hacen falta mediciones oentrevistas largas, sino simplemente un conjunto de observaciones relativasa la recepci6n y aceptaci6n de la recomendaci6n dada.

- 49 -

No obstante, hay problemas para definir la aceptaci6n. Si larecomendaci6n abarca un conjunto de operaciones--sembrar en una cierta

época y con un cierto espaciamento--¿se puede considerar al beneficiariocomo aceptador si sigue algunas, pero no todas, las prácticasrecomendadas? ¿Es posible considerar el consejo como un conjunto derecomendaciones y obtener cifras relativas a cada uno de los elementos delconjunto? Si la recomendaci6n consiste en utilizar X kilos de fertilizantepor hectárea, ¿se puede considerar al agricultor como aceptador si utiliza

X/2 kilos por hectárea? La respuesta puede depender de la finalidad quetenga el índice. El utilizar X/2 kilos puede representar la aceptaci6n delmensaje y, por consiguiente, indicar una labor eficaz por parte del agentede extensión. Si ésto es lo que se ha de medir, se clasifica al agricultorcomo aceptador. Por el contrario, si lo que se está tratando de determinares el aumento de la producción, y si X/2 kilos por hectárea no essuficiente para afectar a la producción, no debe considerarse al agricultorcomo aceptador de la práctica.

Si se llevan registros adecuados a lo largo del tiempo, seráposible identificar a los agricultores que aceptan el mensaje en formarepetida y a los "desertores", y relacionar estas cifras con el hecho de siel mensaje se ha repetido cada añío o si se ha insistido en alguna otrapráctica. Los coeficientes conexos pueden calcularse luego y trazarsesobre gráficos.

Aunque un sistema de seguimiento se limitara a proporcionar nadamás que algunos de estos indices, serviría para comunicar a la gerencia del

proyecto bastante información sobre la reacción de las personas a las quese trata de beneficiar.

La necesidad de efectuar dichas mediciones, y la utilidad deistas, pueden ilustrarse muy bien en un caso reciente en el que durantevarios afios se habían efectuado estudios detallados de las prácticasagrícolas, se había comunicado poca información a la gerencia delproyecto. Tardíamente se llevó a cabo una encuesta rápida sobre las tasasde aceptación, la cual puso de manifiesto que el 70 por ciento de lamuestra original de beneficiarios ya no participaba en el programa. Otroejemplo de descuidar lo sencillo por amor a lo complejo.

Para el seguimiento de las tasas de reembolso del crédito puedenutilizarse coeficientes semejantes. Yn un trabajo recientemente publicadose examina con detalle este problema. / Un indicador común es el índice decobro correspondiente a un período contable. Este depende del período de

/ J.D. von Pishke, "Quantification of Loan Repayment Performance",Course Note 42, Instituto de Desarrollo Económico del Banco Mundial,(Washington, D.C.: julio de 1979).

- 50 -

que se trate y adopta la forma siguiente:

100 x Volumen de cobros o reembolsos correspondientes al períodoVolumen de préstamos o plazos vencidos en el período

Otro índice de uso común es el porcentaje de la cartera que está atrasado,el cual se obtiene como sigue:

100 x Total de atrasos al final del períodoTotal de la cartera de préstamos al final del período

Este índice puede ser engafñoso, ya que una proporci6n variable de la

cartera de préstamos puede estar constituida por nuevos créditos concedidospor los que todavía no deben efectuarse reembolsos. Por,lo tanto, sesugiere un índice ligeramente más complicado. Este es el indice dereembolso, Rt, derivado como sigue:

EAt

Rt = 100 (1 - A )EA

max

en donde EAt es el total acumulativo de los saldos morosos (deducidos lossaldos pagados por anticipado) durante la vigencia del préstamo o el

horizonte del estudio de -la cartera t que va del período 1 al período n, y

EAmax es el total acumulativo de los saldos morosos que se habrían

acumulado si no se hubieran efectuado reembolsos de los préstamos. Unnúmero índice de 0 indica una mora total, mientras que un índice de 100indica que todos los préstamos se han reembolsado a su vencimiento, o un

comportamiento general compatible con el reembolso al vencimiento.

Entre los indicadores que se utilizan para el seguimiento todavíano se ha considerado la medición de la producci6n, así como ladeterminaci6n de la reacción de los beneficiarios. Por razones de

conveniencia, la medici6n de la producción y sus corolarios se considera enla Parte 4.4, que sigue a continuación. La determinación de la reacción de

los beneficiarios, aparte de los coeficientes de aceptación y utilización

que se expusieron anteriormente, no puede resumirse en indicadores

sencillos. Estudios realizados mediante entrevistas exhaustivas conbeneficiarios selectos pueden arrojar bastante luz sobre las actitudes yreacciones que probablemete afecten al proyecto, pero las entrevistas y la

interpretación de los resultados de las mismas requieren sondeos y periciaanalítica que son de carácter más personal. Dichos estudios son

especialmente necesarios cuando los índices sencillos señalan que algo va

mal. La determinaci6n del problema existente es un objetivo importante delsistema de seguimiento (v5anse las Partes 2, 5 y 6).

- 51 -

4.4 Indicadores para la evaluación

En las Partes 1 y 3 se ha examinado el dise?no de los sistemas deevaluacion. Se ha seialado la necesidad de utilizar encuestas directas yla probable necesidad de considerar el análisis como un examen de seriescronológicas de datos. Dentro de este contexto, y teniendo en cuenta loscriterios examinados anteriormente en esta Parte, ¿qué indicadores puedenrecomendarse para su inclusión en el sistema de evaluación?

A fin de presentar los indicadores por orden, éstos puedenclasificarse en tres grupos:

(a) Indicadores del producto y de su destino.

(b) Indicadores económicos.

(c) -Indicadores de la calidad de vida.

Indicadores del producto

En la mayoría de los proyectos agrícolas y de desarrollo rural,el producto se expresa en cifras sobre producción, ya se trate deproducción agr5cola, ganadera, forestal, pesquera, etc. Cuando intervienenproductos manufacturados, es preciso identificar individualmente losindicadores, lo cual cae fuera del ámbito de este Manual.

En general, la cuantificación de la producción puede efectuarsemediante medición directa o mediante una estimación del productor. Si elproductor lleva registros, el problema queda resuelto, pero en el caso delos proyectos de que se ocupa este Manual no suele suceder así.

Si se adopta la medición directa, pueden identificarse lassiguientes clases comunes de producción:

(a) Cultivos estacionales: superficies y rendimientos porunidad de superficie.

(b) Cultivos arbóreos (incluida la silvicultura): número deárboles y rendimiento por árbol (o superficie y rendimiento

por unidad de superficie).

(c) Ganado: número de cabezas en pie y tasas de extracción.

(d) Productos animales (incluida la pesca): volúmenes, pesos.

Por consiguiente, los indicadores están bien definidos: números,superficies, rendimientos, volúmenes y pesos. El problema es la medición deestos indicadores. El número de cabezas de ganado por tipo, edad y sexo es

- 52 -

factible únicamente si pueden inspeccionarse los rebaños; el volumen y peso

del rendimiento diario o semanal de leche o de la captura de pescado

requiere realizar visitas repetidas a las unidades escogidas; la medici6n

de las superficies y el rendimiento tiene que realizarse en el momento

oportuno y su ejecución lleva bastante tiempo y requiere conocimientos

especializados.

La regla que debe seguirse en la medición directa de los

indicadores debe ser que el tiempo y los recursos necesarios se pueden

justificar únicamente si se necesita una gran precisi6n y si ésta se

logra. Desafortunadamente, este nivel de perfecci6n solamente puede

garantizarse si la encuesta se realiza en pequeia escala, que guarde

relaci6n con la disponibilidad, probablemente limitada, del personal

competente y experimentado necesario para llevar a cabo dichas mediciones.

Las visitas frecuentes para efectuar mediciones directas permiten

recopilar otros datos que también requieren visitas múltiples cercanas

entre sí, tales como costo de los insumos, por ejemplo, los insumos de mano

de obra para obtener los productos.

Por lo tanto, la conclusión respecto a las observaciones y

mediciones detalladas está de acuerdo con la recomendaci6n que se hace en

la Parte 5 y en·otros lugares de este Manual, es decir, que dichas

mediciones están mejor adaptadas a las encuestos exhaustivas de los

estudios de casos que a las encuestas muestrales en gran escala; la

experiencia, por ejemplo, con los estudios de administraci6n rural así lo

demuestra.

Debe mencionarse especialmente la estimación de la producci6n

agrícola. Un método bien documentado y popular consiste en recoger la

cosecha de una pequeña parte de una superficie conocida de la parcela, con

el fin de calcular el rendimiento medi de ese cultivo por hectárea. En la

Secci6n 8.2 se examinan los problemas que surgen con este método objetivo.

La alternativa a realizar mediciones directas de la producci6n es obtener

estimaciones del productor. Si se decide hacer ésto, es preciso obtener

respuestas positivas a todas las preguntas siguientes:

(a) ¿Conoci6 el entrevistado alguna vez la respuesta?

(b) En caso afirmativo, ¿pudo recordarla en el momento de la

entrevista?

(c) ¿Puede comunicarla en unidades normales?

(d) ¿Estará dispuesto a comunicarla correctamente?

Si nunca se han medido los campos, es inútil preguntar la

superficie. Si las vacas las ordeña el pastor y la leche la consume la

familia, posiblemente el entrevistado no tenga una idea muy concreta del

- 53 -

rendimiento de leche. Casi nadie tiene idea, ni siquiera aproximada, delpeso de la lefia recogida por la familia para el consumo doméstico.

Aun en los casos en que la respuesta se supo alguna vez, esposible que el entrevistado no la recuerde con precisión. Es probable queel error por falla de memoria guarde relaci6n con la longitud del períodorespecto del cual se solicita la informaci5n y la definición del período dereferencia. Estas cuestiones se examinan en la Parte 8.

Posiblemente el entrevistado declare en unidades locales demedida; en ese caso es preciso calcular los factores de conversión parauniformizar los resultados en kilos o litros.

Para que este método di resultados satisfactorios, elentrevistado tiene que estar dispuesto a recordar la cifra necesaria y acomunicarla con exactitud lo mejor que pueda. Por consiguiente, debeinformársele de la finalidad de la encuesta y lograr su buena disposici6n.

En numerosos casos, los agricultores pueden dar estimaciones (sila entrevista es oportuna y las preguntas se hacen de manera adecuada) que,dentro de ciertos límites, indiquen con una exactitud razonable elverdadero valor del producto. No hay que menospreciar la utilidad quepueden tener las estimaciones de los agricultores como indicadores. Haycierta tendencia a suponer que dichas estimaciones serán tan sesgadas quecarecerán de valor, pero hay evidencia de la experiencia de Filipinas y deotros países en el sentido de que las estimaciones de los agricultores sonsuficientemente exactas para los fines del seguimiento.

El declarar, por ejemplo, que las estimaciones de rendimientohechas por los agricultores son inferiores a las obtenidas mediante siegasparciales de las cosechas, y deducir de ello que las estimaciones no sonválidas, no es necesariamente correcto. Una diferencia del 15 al 20 porciento puede deberse al hecho de haberse utilizado distintas t5cnicas decosecha y por haber habido errores sistemáticos al aplicar el método desiega parcial.

Las decisiones sobre estas alternativas pueden tomarse únicamenteen el terreno, quizá despu6s de haber efectuado un estudio piloto. Unarecomendaci6n general de carácter preliminar es la siguiente:

En los estudios de casos en pequeña escala y con fines múultiplesutilícense mediciones objetivas de los productos en el grado que seaposible; en las encuestas muestrales en gran escala las estimaciones de losagricultores pueden servir como valor sustituto de la medici6n objetiva.

Los indicadores del destino de la producci6n presentan opcionessemejantes, es decir, declaraci6n postfacto o medici6n el el momento de lautilización o venta.

- 54 -

El volumen bruto que pasa por los canales de comercializaci6 n,

estimado en ciertos puntos de estos canales, es un indicador del total

vendido, pero con frecuencia no puede analizarse según la fuente de donde

provenga.

Además, las estimaciones del consumo doméstico de la producci6n

familiar y la entrega a título gratuito y los intercambios de productos

requieren encuestas sobre el presupuesto familiar con visitas múltiples.

Ientro del marco de la evaluaci6n de proyectos, dichas encuestas pueden

justificarse únicamente si se realizan como estudios de casos de los cuales

pueden a veces deducirse las modalidades de utilizaci6n de los productos.

Si un cultivo comercial, por ejemplo, el algod6n, se vende casi

exclusivamente a través de un solo organismo oficial, los registros de ese

organismo o de sus delegaciones locales pueden ser la fuente de indicadores

de las cantidades vendidas, incluso hasta el nivel de finca.

Indicadores econ6micos

Los beneficios econ6micos que se esperan de un proyecto se suelen

expresar como ingresos, de manera que éstos constituyen el indicador que

debe elegirse con fines de medici6n, y la práctica popular así lo

confirma. No obstante, como se ha indicado anteriormente, en el caso de

los pequenos agricultores la definici6n y medici6n exactas de los ingresos

resulta difícil. En realidad, raras veces se ha logrado de manera

satisfactoria.

Puede ser posible obtener datos sobre los ingresos provenientes

de un cultivo comercial, especialmente si se vende a través de un número

limitado de comerciantes u organismos cuyos registros permiten comprobar

las respuestas dadas por los agricultores. Se pueden observar

peri6dicamente los precios de los productos agrícolas en ciertos mercados o

centros de compra seleccionados y, junto con las estimaciones de la

producci6n, pueden utilizarse para obtener estimaciones independientes de

los ingresos en efectivo. Tales estimaciones del total de ingresos,

correspondientes en forma global a una zona o estrato, pueden ser

satisfactorias para evaluar los beneficios económicos de determinados

cultivos o productos agrícolas.

Si es preciso determinar el total de ingresos de la explotación

agrícola o del hogar rural, las dificultades son enormes. Como se ha

expuesto anteriormente, hay problemas de definici6n y problemas con las

respuestas de los entrevistados. La generaci6n de ingresos es irregular y

va unida a una comercialización esporádica. Es difícil obtener de un solo

entrevistado la cifra de ingresos de cada miembro de la familia. Otras

actividades, como, por ejemplo, la fabricaci6n de cerveza o el comercio en

pequeña escala, son especialmente difíciles de abarcar en una encuesta

sobre ingresos. Además, el ingreso constituye un aspecto especialmente

- 55 -

delicado de tratar en una encuesta en el caso de la mayoría de losentrevistados, cualquiera que sea el ambiente en que tenga lugar la'entrevista; normalmente no pueden obtenerse con facilidad respuestasobjetivas.

La medici6n de los gastos no presenta algunos de estos problemasde definici6n ni los problemas relacionados con las respuestas. Laexperiencia obtenida con muchas encuestas sobre presupuestos familiares esque los gastos se registran con mayor exactitud y detalle que losingresos. Tanto es así que muchos informes que contienen tabulacionescruzadas de una variable comparada con diversos niveles de ingresosutilizan los niveles de gastos como valor sustituto de los niveles deingresos. Es posible registrar con bastante precisi6n los gastos si elperíodo para el cual se solicita informaci6n y el período de referencia sonadecuados. En lo que respecta a los gastos cotidianos, el período derecuerdo no tiene que ser mayor de dos o tres días. Las partidas como elalquiler de la vivienda, los servicios, los derechos de matrícula escolar,etc. pueden necesitar un período de referencia de un mes, y los gastos importantes de carácter irregular en artículos para el hogar o laexplotaci6n pueden declararse para un ano. Es necesario considerar tambiénlos problemas que pueden presentar los gastos- suntuarios que se declarancon el fin de impresionar; ésto se considera en la Parte 8.

Es posible que no haya una equivalencia exacta entre gastos eingresos en términos absolutos, pero en muchos grupos de poblaci6n loscambios que ocurren en los gastos indican con bastante exactitud lasvariaciones de los ingresos. ¿Pueden emplearse en ese caso los gastos comoindicador sustituto de los ingresos al evaluar el cambio ocurrido?

Esta pregunta solamente se puede responder afirmativamente conciertas reservas porque las encuestas sobre gastos pueden requerir visitasmultiples durante un período prolongado para determinar con precisión eltotal de gastos efectuados durante ese periodo. La decisi6n de mantener unaencuesta de esa clase con carácter casi continuo no debe adoptarse a laligera. En vista de que los gastos importantes pueden recordarse duranteun período de referencia bastante largo, el problema es la frecuencia delas visitas que es necesario efectuar para estimar el promedio de gastosmenores cotidianos. Iba posibilidad consiste en realizar una encuesta deuna a dos semanas de duracion (con varias visitas dentro del periodo), quese repite en ciertos momentos del año (para coincidir, por ejemplo, con laépoca anterior a la cosecha, con la época posterior a la cosecha o conotras fechas destacadas), y calcular el promedio de gastos diariosregistrados en cada una de estas fases de la encuesta.

El utilizar los gastos de esta manera debe analizarsecuidadosamente en cada situación, pero este método puede resultar mis fácily ofrecer un indicador mas exacto de las variaciones del ingreso que unregistro deficiente de los ingresos efectivos.

- 56 -

Cuando los recursos para la encuesta son muy limitados, el totalde gastos importantes en vivienda, mobiliario y equipo, y en partidassencillas de transporte y recreo como bicicletas o radios, puede servir porlo menos como un indicador sustituto aproximado de las variaciones de losingresos. También pueden ser ítiles los cambios que ocurren en lasexistencias de bienes de consumo duraderos que poseen las familias, datosque pueden obtenerse mediante preguntas y observación de una manerarelativamente sencilla.

Indicadores de la calidad de vida

Aunque los indicadores del producto y de los beneficios seandifíciles de definir y de medir, se refieren a fenómenos que sonidentificables y tangibles. La elección de indicadores de la calidad devida es todavía más difícil debido a que el propio concepto es vago.

Se puede estar de acuerdo en que entre los aspectos que afectan ala calidad de vida figuran el consumo de alimentos, la salud, la educacion,la vivienda, el acceso a servicios esenciales y la expectativa de vida.Por supuesto, estos aspectos no son independientes entre si.

El consumo de alimentos expresado como la ingestión de alimentospor las personas o las familias es un aspecto de las encuestas todavía másdifícil que los ingresos, y son pocas las'veces en que se han obtenidodatos satisfactorios, excepto en los estudios minuciosos de dietasrealizados a micronivel. Los datos sobre la producción de alimentos parael consumo domistico y las compras de alimentos, obtenidos medianteencuestas sobre los gastos, seguramente son los indicadores sustitutos masaproximados que pueden medirse.

La determinación precisa del estado de salud requiere un examenfísico y clínico por personal competente, que por lo general solamente sepuede llevar a cabo en pequeña escala. El nivel de nutrición debeconsiderarse como un indicador compuesto sustitutivo de los indicadores desalud y consumo de alimentos.

La determinación exacta del nivel de nutrición posiblemente nosea más fácil que la del nivel de salud, especialmente en el caso de losadultos. Sin embargo, la medición de la edad, la altura y el peso de losniños pequeños permite calcular un grupo de tres indicadores (peso poraltura, peso por edad y altura por edad) que, en conjunto y comparados connormas aceptadas ampliamente, constituyen una medición satisfactoria delnivel de nutrición general de la población infantil. Dé hecho, esosindicadores antropométricos son indicadores sustitutos del nivel denutrición de la población infantil, los que, a su vez, se utilizan comoindicadores sustitutos para indicar el nivel general de salud y de consumode alimentos de la población objeto de estudio. Las grandes ventajas delos indicadores antropomitricos radican en la facilidad con que pueden

- 57 -

obtenerse los datos necesarios en muestras grandes y su sensibilidadrelativa a variaciones de las variables subyacentes de interés.Evidentemente, no son un reflejo exacto de los problems específicos desalud que tenga la oblaci6n, pero como indicadores dentro del conjunto demediciones de la calidad de la vida pueden recomendarse encarecidamente confines más generales de evaluaci6n.

A isto es preciso añadir algo. Puede ser difícil determinar conexactitud la edad de los niños pequeños. Aun cuando en muchos países éstoconstituye cada vez menos un problema, los dem6grafos todavía observan enmuchos casos sesgos en la comunicación de la edad. Si la edad se registracon inexactitud, los coeficientes de altura o peso para una determinadaedad tendrán un sesgo. Cuando existe ese problema, el "peso por altura"puede ser el indicador más útil de los tres que se han indicado.

La educaci6n es más fácil de definir que de medir. Elalfabetismo y los años de escolaridad son indicadores del nivel deinstrucci6n individual, y el porcentaje de niños en edad escolar que esténmatriculados en la enseñanza primaria puede ser un indicador adecuado anivel de la localidad. En cambio, el alfabetismo y el nivel de educaciónde los adultos son indicadores del pasado y no es probable que cambien enun breve plazo. Por lo tanto, es limitada su utilidad como indicadorespara evaluar proyectos. Much más útil es la proporci6n de niñosmatriculados por grupos de edad específica.

La vivienda puede evaluarse mediante indicadores de su calidad;por ejemplo, el número de personas por habitaci6n y el tipo deconstrucci6n. Sin embargo, estos indicadores varían con lentitud y hastacierto punto son específicos de cada cultura. Pueden ser más útiles comoindicador los gastos realizados en mantenimiento, mejoras y contenido de lavivienda.

El acceso a los servicios públicos y el tipo de estos serviciosson indicadores útiles de carácter social y de salud, pero también en estecaso varían con lentitud, a menos que el proyecto contenga un componenteque afecte directamente a la disponibilidad de los mismos.

La expectativa de vida, indicador cuyo cálculo exacto requieremuestras muy grandes (suponiendo que el registro civil no sea universal),es más probable que pueda realizarse a nivel nacional, mediante censosdemográficos y encuestas en escala muy grande, que al nivel de un proyectoespecífico. Además, en la mayoría de los países en desarrollo el cálculode la expectativa de vida se basa en conjuntos de tablas "modelo" de vida yel empleo de modelos estables de población. Esto no puede recomendarsecomo indicador para un proyecto específico.

La mortalidad infantil y la mortalidad en la primera infanciapueden ser indicadores viables si se enumera la totalidad de la poblaci6n

- 58 -

que habita en la zona del proyecto y se lleva un registro de unidades

familiares. Te otra forma, los dos indicadores necesitan muestras tan

grandes que resultan poco prácticos.

Se ha tratado de reunir diversas combinaciones de indicadores de

la calidad de vida para formar un solo indicador compuesto. Ua de esas

propuestas consiste en combinar la expectativa de vida, la mortalidad

infantil y los años de educaci6n. Se presentan graves dificultades para

interpretar los resultados de un indicador compuesto de esanaturaleza, que

atribuye ponderaciones iguales a los indicadores sin un marco conceptual

que lo justifique. Además, la falta de independencia entre los indicadores

complica aún más el asunto; existen distribuciones de la mortalidad por

edades, y estas distribuciones sirven de base a los modelos que se utilizan

para obtener la expectativa de vida en muchos países en desarrollo.

Si se requieren indicadores de la calidad de la vida para un

proyecto de desarrollo rural, se sugiere la siguiente lista razonable:

- Nivel de nutrici6n infantil (mediciones antropométricas).

- Matrícula escolar por grupos de edad.- Gastos en mejora y contenido de la vivienda.

- Distancia o tiempo hasta el agua potable.- Ltilizaci6n de la clínica.

Estas recomendaciones son provisionales y tendrán que reexaminarse para

adaptarlas a las circunstancias locales.

4.5 Informaci6n clasificadora o básica

En las secciones anteriores se ha centrado la atenci6n en

seleccionar varios indicadores prácticos de interis directo para el

seguimiento y evaluaci6 n. Para que la utilizaci6n de dichos indicadores

tenga sentido es necesario, en casi todos los casos, clasificarlos

comparándolos con variables explicativas. Estas variables tienen tambien

que medirse. En consecuencia, en una localidad rural la encuesta

contendrá, cualquiera que sea su objetivo principal, un cuestionario sobre

la situaci6n socioecon6mica del entrevistado. Los temas que probablemente

figuren son los siguientes:

(a) Emplazamiento geográfico y características de la localidad.

(b) Composici6n de la familia y características demográficas..

(c) Tamaio y tipo de explotaci6 n.

(d) Principales actividades econ6micas u ocupación.

- 59 -

Los indicadores de estos temas tienen también ciertasdificultades con respecto a la definici6n y medición. Hay casi tantasdefiniciones de lo que es una familia como encuestas familiares; ladefinici6n de empleo es algo con lo que han tropezado numerosos estudiososde la situaci6n rural, y la medici6n de la edad todavía ocasiona problemasen muchas localidades rurales.

Algunas de estas cuestiones se mencionan en otros lugares de esteManual y se tratan con detalle en manuales publicados por la Oficina de

Estadística de las Naciones Unidas y otros organismos e institucionesespecializados. Lo que aquí se- pone de relieve es que la obtenci6n deantecedentes básicos, por importantes que sean, es secundaria con respecto

a la obtenci6n de indicadores de- seguimiento y evaluación; la encuesta nodebe elaborarse de acuerdo con las exigencias de aquéllos a costa de laobtenci6n de éstos. Ha habido casos en que la mayor parte del período decapacitaci6n del entrevistador se dedicó a los problemas de definir yrecopilar datos que no eran de gran importancia para alcanzar los objetivosprincipales de la encuesta.

Sobre todo, conviene evitar la tendencia a incluir todo lo quequizás sea de interés al efectuar la clasificación cruzada de losindicadores principales. Esta tendencia es la que da lugar a cuestionariosextensísimos y produce datos de mala calidad respecto a los indicadoresimportantes. Uno de los resultados de esa confecci6n deficiente de las

encuestas es un informe que da gran importancia a las clasificacionescruzadas de variables generales y a su comparaci6n, pero que contiene pocoscuadros sobre los indicadores que originaron la encuesta. El resultadoextremo es que los retrasos ocasionados por la evaluación de tantos datosllegan a ser tan grandes que el informe no llega a publicarse.

Por supuesto, en muchos casos algunas de las variables

explicativas pueden revestir importancia fundamental para comprender lo queestá sucediendo a la poblaci6n beneficiaria. Por ejemplo, la limitada

disponibilidad de mano de obra familiar puede ser el factor decisivo queinfluye en que la población no adopte los procedimientos recomendados. Enesos casos, la inclusi6n de esa variable puede muy bien pertenecer al

ámbito de los sistemas de seguimiento y evaluación.

- 60 -

PARTE 5

FUENTES DE LOS DATOS PARA SEGUIMIENTO Y EVALUACION

5.1 Datos existentes y organismos que recopilan datos

La identificaci6n inicial de las fuentes de datos y la

determinaci6n de la disponibilidad de los mismos por los encargados del

seguimiento y la evaluación del proyecto estarán influidas en gran medida

por los resultados que se obtengan durante la etapa de evaluaci6n previa

del proyecto. Esta evaluación previa depende de la recopilaci6n, examen y

verificaci6n de la totalidad de los datos de que se disponga. Dicha

evaluaci6n previa habrá determinado cuáles son las series de mayor

confiabilidad y habrá indicado, mediante su aplicaci6n práctica, la forma

de aprovechar al máximo la información de menor confiabilidad y el material

preparado espeacialmente para dicha evaluación. Con frecuencia, se habrán

descubierto deficiencias de cobertura que no fue posible corregir durante

la evaluaci6n previa, y que el sistema de seguimiento y evaluaci6n tendrá

que remediar o compensar ahora. Si, al determinarse la existencia de estas

deficiencias durante la evaluaci6n previa, se trató oficialmente de obtener

los datos necesarios para remediarlas, las actividades iniciales de

seguimiento y evaluaci6n pueden consistir en establecer contacto cn el

organismo de que se trate y en comprobar cualquier otra revisi6n ulterior

que se efectúe en estos datos.

Para evaluar un proyecto, se utilizan los datos existentes,

complementados en la medida necesaria por estimaciones, extrapolaciones y

hasta la intuición, para determinar la situaci6n actual y los resultados

previstos del proyecto. El seguimiento y la evaluaci6n del proyecto

comienzan con el examen de los datos existentes, que se comparan con un

conjunto distinto de objetivos. ¿Hasta qué punto pueden utilizarse las

series de datos existentes para obtener indicadores que sean pertinentes

para el seguimiento del proyecto? ¿Ofrece el conjunto de datos anteriores

al proyecto un punto de referencia adecuado para establecer una serie

cronológica, con el fin de llevar a cabo en su momento la evaluación del

proyecto? En caso afirmativo, ¿será suficiente el mecanismo existente de

actualización de estos datos para generar las series cronológicas

necesarias? ¿Puede desagregarse con suficiente precisi6n la serie de datos

de que se disponga, a fin de obtener los datos relativos a la zona del

proyecto específico de que se trate? Y, ¿son los conceptos y definiciones

utilizados en el pasado compatibles con los aplicables a las necesidades

del proyecto?

Si las respuestas a esas preguntas son afirmativas, es preciso

disponer lo necesario para mantener la serie de datos pertinentes o para

colaborar con el organismo encargado de esta tarea. Es preciso identificar

- 61 -

también nuevas series de datos y actividades relacionadas con encuestas.

Es necesario también establecer contactos, tanto oficiales comoextra-oficiales, con los funcionarios locales y centrales que másparticipen en las actividades estadísticas. Algunos de estos contactos sonmuy fáciles de establecer a través del grupo del proyecto. Por ejemplo, enun proyecto agrícola es posible establecer vínculos con los funcionariospertinentes del ministerio de agricultura, mediante el contacto diario conel personal del ministerio y a través de los mecanismos de coordinaci6nincorporados en la estructura de administración del proyecto. Habrá quedesplegar un esfuerzo especial para conocer los organismos estadísticoscentrales y los funcionarios que ocupan los cargos clave.

En cualquier país las fuentes de datos son numerosas y diversas.Gran parte de la información estará inédita, puesto que muchasinvestigaciones nunca llegan a analiarse o a consignarse por escrito enforma completa. El material será de calidad muy variable y el determinaresa calidad es una tarea tan difícil como la de encontrar los datos.

A continuaci6n, se presenta una lista de instituciones quenormalmente existen y que son fuentes de informaci6n. Por supuesto, losnombres de las instituciones y su importancia relativa para la obtenci6n dedatos varían de un país a otro.

(a) Oficina Nacional de Estadística

Esta puede estar encargada de los censos y de ciertas seriesnacionales, actuando en otras esferas principalmente como6rgano coordinador y dejando la recopilación minuciosa dedatos a grupos estadísticos de otros ministerios. Noobstante, puede estar encargada de llevar a cabo todas lasprincipales actividades estadísticas. En ese caso, sesimplifica evidentemente la tarea de mantener al día lasnuevas series y acontecimientos, y es preciso establecer unestrecho contacto. La sección de cuentas nacionales tendrápor lo común una idea general de las fuentes de datos y desu confiabilidad relativa.

(b) Ministerio de Hacienda, Ministerio de Planificaci6n

Econ6mica y Banco Central

Estos organismos están a veces encargados de calcular lascuentas nacionales. En estos ministerios hay sin dudaeconomistas que utilizan los datos disponibles y que, porconsiguiente, están en condiciones de indicar las fuentes yevaluar en forma continua la calidad de los datos.

- 62 -

(c) Ministerios de producción

Estos ministerios llevan a cabo muchas veces su propia

recopilaci6n de datos. A veces la informaci6n sobre la

concesi6n de licencias y comercializaci6n estácentralizada. En el caso de ciertos productos, puede

obtenerse informaci6n minuciosa en las juntas de

comercializaci6 n, que pueden ser independientes o casi

independientes de los respectivos ministerios.

(d) Ministerios de servicios

Si los indicadores sociales y de calidad de vida son

pertinentes para el proyecto, debe recurrirse a las fuentes

de datos y a la experiencia de ministerios como los de Salud

Pública y Educación. Los indicadores de calidad de vida

quizá tengan que ser específicos para el proyecto o para sus

beneficiarios o familias, pero aún así los registros

escolares y clínicos de la zona, junto con datos

provenientes de encuestas sociales específicas, pueden ser

útiles en una forma general.

(e) Institutos oficiales de investigaci6n

Aun cuando posiblemente los datos de investigación no sean

directamente aplicables a los beneficiarios del proyecto,

pueden ofrecer un punto de referencia o una meta con la que

comparar los datos específicos del proyecto, y son datos

preliminares útiles para los métodos de observaci6n rápida

(véase la Parte 6).

(f) Otras instituciones

Entre éstas figuran universidades y sus institutos de

investigaci6n, instituciones internacionales, asociaciones

de empresarios y compaiías de estudio de mercados. En

particular, las universidades y los institutos de desarrollo

son fuentes importantes de datos minuciosos a micronivel y

son, en potencia, colaboradores importantes del proyecto en

ciertos estudios específicos.

(g) Resultados del seguimiento y la evaluaci6n de proyectos

anteriores

Con frecuencia, no se presta la debida atenci6n a la

experiencia adquirida con respecto a la recopilación y

utilizaci6n de datos en otros proyectos, incluso en los que

operan en un medio semejante en el mismo país, debido a la

- 63 -

escasa divulgaci6n de los resultados. Esa experiencia nosolamente es de posible utilidad como fuente de antecedentesgenerales, sino que puede contribuir a seleccionarindicadores que resultaron posibles de recopilar conexactitud y pertinentes al seguimiento y evaluación delprogreso del proyecto. Con harta frecuencia, se tropiezacon los mismos problemas y los servicios de seguimiento yevaluación cometen los mismos errores.

5.2 Utilizaci6n de datos ajenos al proyecto y compatibilidad con losmismos

Conviene reiterar en este momento el potencial que tiene unprograma nacional de encuestas como grupo de control "primitivo" (véase laParte 3).

Las encuestas rurales, aun cuando hayan sido diseiadas conobjetivos distintos, pueden indicar el nivel general dé producci6n ysocioecon6mico. Si existen datos sobre salud y educacion, estos ofrecen unpanorama general de la situación. Con frecuencia, los datos específicosdel proyecto adquieren un mayor relieve si se utilizan estos otros datos decarácter más amplio como trasfondo con fines de comparación. Puede inclusosuceder que los organismos pertinentes est9n dispuestos a ampliar omodificar el diseñlo y el contenido de esas encuestas, con el fin de mejorarla posible utilidad de los datos para efectuar dichas comparaciones o confines de control.

Hay un aspecto que conviene especialmente tratar de coordinar, asaber, la normalizaci6n de conceptos y definiciones. Muchos análisiscomparativos que podrían efectuarse entre series de datos no puedenllevarse a cabo en la práctica debido a diferencias en los conceptos ydefiniciones fundamentales. Es corriente que definiciones tan fundamentalescomo familia y finca o explotaci6n difieran de una encuesta a otra, aunquetodas las encuestas las efectúe la misma organizaci6n.

Dentro del marco del seguimiento y la evaluación, debe prestarsegran atención en las etapas iniciales de planificación a la adopción,siempre que sea posible, de los conceptos y definiciones uniformes que sehaya elaborado. La desviación respecto a éstos se debe muchas veces a quese ignora su existencia y no a que se trate de objetivos diferentes. Elanálisis comparado de los datos de la evaluaci6n con otras series de datosajenos al proyecto se facilitará especialmente si las definicionesseguintes son comunes:

. Composición de la familia

. Movimientos migratorios

- 64 -

. Explotaci6n- parcela- lote (campo)

. Manera de considerar los cultivos asociados

. Profesi6n u ocupaci6n

. Empleo (especialmente el irregular y el familiar de jornadaparcial)

. Unidades de medida.

La colaboraci6n entre organismos nacionales y las unidades de

seguimiento y evaluación de proyectos no tiene que ser exclusivamente

unilateral. Como se ha indicado en la Parte 1, el conjunto de recursos de

que se disponga para seguir y evaluar varios proyectos en un paísconstituye una parte muy importante de la totalidad de los recursosestadísticos de ese país. Aun cuando las encuestas de seguimiento y

evaluaci6n deben ser diseiadas para atender las necesidades específicas de

cada proyecto, estas necesidades serán muchas veces semejantes a las de los

planificadores nacionales. La identificaci6n de estos intereses comunes

por ambas partes, es decir, las autoridades del proyecto y las nacionales,será mutuamente beneficiosa. En realidad, ese proceso de identificaci6n

sirve con frecuencia para que la gerencia del proyecto perciba mejor y con

mayor precisi6n sus propias necesidades.

5.3 Fuentes de datos específicos de cada proyecto

Pese a lo que aportan los datos provenientes de fuera del

proyecto, las fuentes principales de datos para los fines de seguimiento y

evaluaci6n serán específicas para cada proyecto. Estas fuentes pueden ser:

(a) Los registros administrativos

(b) La observaci6n rápida

(c) Los estudios de casos

(d) Las encuestas muestrales

(e) Los resultados censales relativos a la zona del proyecto.

Estas fuentes se considerarán con detalle en otras secciones,

especialmente en las Partes 6 y 7. Aquí se describen brevemente para

indicar los vínculos existentes entre las distintas fuentes y los sistemas

de seguimiento y evaluaci6 n.

- 65 -

(a) Registros administrativos

En cierto sentido, si los registros administrativos contienen

alguna información sobre cada uno de los beneficiarios de un proyecto,pueden considerarse como un censo, es decir, como una enumeraci6n completade la población de referencia. Pero en la práctica se establece unadistinci6n.

Gran parte de la informaci5n necesaria para determinar elprogreso del proyecto estará ya incluida en los archivos de éste. Ejemplosde ello son las cuentas financieras, los registros de construcci5n y deservicios, las solicitudes y desembolsos de crédito, la producci6n vendida,la matrícula escolar y los registros de consultas en las clínicas. Nodeberá iniciarse ninguna encuesta sin averiguar primero si se puedenobtener los datos necesarios de los registros del proyecto. Una unidad deevaluación de un proyecto llevó a cabo entrevistas directas de losbeneficiarios para obtener informaci6n, la mayor prte de la cual podíahaberse obtenido, con mayor exactitud, examinando los expedientes de los beneficiarios que tenían los organismos de extensi6n agrícola y de crédito.

La utilización de registros administrativos requiere un sistemade cotejo y resumen rápido a fin de convertir archivos voluminosos eninformacion sucinta que facilite la toma de decisiones. Muchas veces loque falta es este sistema y no los datos.

(b) Observaci6n rápida

Esa técnica consiste en efectuar una rápida visita de una zona afin de obtener una idea general de la situación existente. Hay que anotarlo que se observe a lo largo del itinerario seguido y lo que se obtengamediante conversaciones tanto con las personas con las que se tropiececasualmente como con las personas especialmente seleccionadas (ya seadeliberadamente o por procedimientos aleatorios). Puede tratarse de unavisita exploratoria, o de una visita sobre la que se necesite un informeespecial (quizá en un caso de emergencia) o puede ser una visita que formeparte de una serie regular. Esa visita puede proporcionar informaci6ngeneral sobre una zona de interés o ser muy concentrada, buscando datospara resolver dificultades en una crisis. Por ejemplo, un funcionarioagrícola visitará regularmente su distrito y escribirá informes periódicossobre la situaci6n (o simplemente acumulará sus impresiones, sin escribirinformes). Los métodos de observación que se han utilizado desde antiguohan sido denominados recientemente métodos "rápidos y sucios". Aunque seanrápidos, no tienen por qui ser necesariamente sucios en el sentido deproporcionar información que no sea confiable.

(c) Estudios de casos

La expresión "estudio de casos" puede utilizarse de diversasmaneras. Con frecuencia, se emplea para describir un informe de un caso,

- 66 -

hecho o proyecto concreto que se presente como objeto valioso de estudio,como orientaci6n o ejemplo, como sucede en el caso de una historiaclínica. En este Manual la expresi6n se utiliza para describir un estudiolargo y minucioso en el terreno sobre relativamente pocas familias opersonas, en el que se examine a fondo sus vidas y su comportamiento oalgún aspecto seleccionado de éstos. Tipos comunes de estudios de casosson los estudios sobre una comunidad (o pueblo), estudios de indicios (paraestudiar fen6menos de incidencia limitada) y estudios detallados deactividades (por ejemplo, estudios de administracion rural). Pueden serestudios exploratorios, enfocados hacia la investigación, que utilicen undiseio experimental o cuasi-experimental para proporcionar datos paragrandes proyectos de desarrollo. Evidentemente, en esos'casos, elseguimiento y la evaluación del proyecto resultante tiene que incluir en subanco de datos los estudios originales de casos. Durante el curso de unproyecto, los estudios de casos son útiles para averiguar qué ha sucedidosi un proyecto tropieza con grandes dificultades. En términos másgenerales, los estudios de casos ofrecen una de las formas en que puedeestudiarse el desenvolvimiento de los mecanismos causales, según se exponeen la Parte 3. En muchos casos, únicamente se podrán hacer deduccionescausales verosímiles si los datos más generales de las encuestas secomplementan mediante un estudio de casos, examinando minuciosamente lasrepercusiones del proyecto en un reducido número de beneficiarios.

Un estudio de caso lo suele llevar a cabo un solo investigadorprofesional (o un grupo pequeio), quizá con algunos ayudantes. El número depersonas que interviene es muy reducido, pero éstas deben ser de grancalidad. Tienen que ser también personas dedicadas a su trabajo, puesposiblemente la investigaci6n requiera pasar un largo período en elterreno.

(d) Encuestas muestrales

Las muestras (ya sean dirigidas o probabilísticas) son muyversátiles. Pueden perseguir fines descriptivos o analíticos o,frecuentemente, una combinaci6n de ambos. Varían desde un estudio rápidosobre un tema en una zona, que requiera una sola visita para realizar unabreve entrevista, hasta un estudio de fines múltiples a nivel de proyectoen el que haya que realizar visitas múltiples a lo largo de un prolongadoperíodo. Puesto que el número de entrevistados es mayor que en losestudios de casos, resulta más fácil lograr que la poblacio6n est5 bienrepresentada y, por lo tanto, generalizar pasando de la muestra a lapoblaci6n. Por otra parte, la encuesta es menos adecuada que un estudio decasos prácticos para examinar intenciones y actitudes y la forma en queestas influyen en el comportamiento y la actuaci6n de los sujetos delestudio.

- 67 -

(e) Datos censales

La realizaci6n de un censo nacional se justifica principalmentepor el hecho de que los datos que han de obtenerse de cada persona senecesitan a un nivel muy bajo de agregaci6n, es decir, los datos debencorresponder a subdivisiones administrativas muy pequefñas del país. De ahíse deduce que si existe un archivo del censo, es posible obtenertabulaciones que sean específicas de la zona del proyecto, o muyaproximadas a la misma. Este constituye un caso concreto en el que lacolaboraci6n con el organismo principal de estadística del país puede daracceso a dichas tabulaciones especiales. Ahora bien, los censos se llevana cabo con poca frecuencia (por lo común cada 10 años) debido al enormetrabajo administrativo que entrañan. Además, la gama de preguntas quepueden abarcar es limitada. Si se dispone de resultados censales,desgregados a nivel del proyecto, aquéllos constituyen un punto de partidapara cualquier estudio social o económico que utilice datos cuantitativos.El censo ofrece tambi6n el marco para efectuar numerosas seleccionesmuestrales.

Tambián pueden'ser útiles para el proyecto los censos desubconjuntos especiales de la poblaci6n, como, por ejemplo, las empress olas explotaciones grandes. Si el censo más reciente se realizó varios afiosantes que el proyecto, es preciso asegurarse de que los datos continúanteniendo validez. Además, es también necesario evaluar la calidad de losdatos censles. Si no se ha realizado ya una evaluaci6n técnica, éstatendrá que llevarla a cabo el equipo de seguimiento y evaluacion si va autilizar en medida importante los resultados del censo.

5.4 ¿Estudios de casos o encuestas muestrales?

Como se ha indicado, y se vuelve a señalar en la Sección 5.5, larespuesta adecuada a esta pregunta puede muy bien ser "ambas cosas", ademásde utilizar las otras fuentes que se han descrito anteriormente. Noobstante, la cuestión que tiene que resolver el que prepara una encuesta essi para obtener determinados datos, debe recomendar un estudio detallado amicronivel o una encuesta muestral en mayor escala, que ofrece una mayorcapacidad para inferir conclusiones. En casos extremos, la decisi6n seráposiblemente evidente. En muestras grandes, observaciones minuciosas querequieran visitas múltiples y que entrañen relaciones mutuas entre todo elcomplejo de prácticas agrícolas son difíciles (y costosas) de controlar. Ala inversa, tasas de aceptaci6n obtenidas mediante un número muy reducidode observaciones posiblemente no sean indicativas de las tasas globales deaceptación por parte de la poblaci6n beneficiaria. Pero, en muchos casos,la decisi6n que debe tomarse no es tan evidente. Sin duda, ladisponibilidad de recursos es un factor importante, pero hay razones deorden técnico en las que puede también basarse la decisión. La siguienteclasificaci6n puede servir de ejemplo de esta razones técnicas.

- 68 -

Los criterios que se indican son la envergadura de la encuesta

desde el punto de vista de los fenSmenos que han de investigarse y la

cobertura geográfica deseada; el tipo de entrevista que ha de utilizarse;

el método de observaci6n y medici6n necesario para recopilar los datos de

interés, y la frecuencia con la que tenga que efectuarse la recopilación.

Para cada uno de estos criterios se exponen tres clasificaciones, escogidas

de manera algo arbitraria, a fin de representar diversos puntos de lo que

puede ser una distribuci6n que varíe de manera más sutil. Por ejemplo, los

cuestionarios posiblemente contengan preguntas abiertas y preguntas

cerradas; una medici6n compleja en un determinado medio ambiente puede

resultar sencilla en otro, y así sucesivamente. Pero la tipología

presentada ofrece algunos indicios para elegir entre los estudios de casos

y las encuestas muestrales.

CLASIFICACION

CRITERIOA B c

1. Envergadura de Fen6meno de inte- Nivel de poblado Fen6meno de

la investiga- r5 s raro y agru- o comunidad. Lu- intergs, muy

ci6n pado en conglome- gar o instituci- extendido

rados ón específicos por toda lazona

2. Tipo de entre- Espontánea, sin Preguntas abier- Cuestionario

vista estructurar tas; estudios de cerrado y/o

actitudes estructurado

3. Observaci6 n y Técnicas que Exactas y minu- Recuentos

medici6n exigen pericia ciosas simples y

profesional mediciones= sencillas

4. Frecuencia Continuo o muy Visitas múlti- Visita

frecuente. ples durante única.

1 el ano

Las investigaciones que incluyan uno o más tipos (A) deberán

basarse en estudios de casos. Los fenómenos raros, las entrevistas

espontáneas, los exámenes profesionales y la observaci6n continua no son

adecuados para las encuestas muestrales en gran escala, debido a los

grandes requirimientos de la encuesta respecto a la selección de

entrevistados adecuados, al tiempo que deben dedicar a los investigadores y

a la pericia que deben tener gstos.

- 69 -

Las investigaciones que incluyan (1B) junto con (2B) son tambiénmás adecuadas para los estudios de casos. En realidad, casi todas lascombinaciones en que haya (2B) indican la conveniencia de efectuar unestudio de casos como primera opción. Las encuestas en las que haya unnúmero apreciable de preguntas abiertas y de preguntas de actitudes no sonfáciles de controlar, si en ellas participa un gran número de enumeradores,pues los sesgos diferenciales entre los diversos enumeradores y losentrevistados pueden ser muy serios.

La encuesta muestral es adecuada para las clasificaciones deltipo (1C) y (20) junto con combinaciones de (3B) o (30) y (4B) o (40). Sise incluye (3B), las mediciones deben tomarse con gran cuidado y exactitudy, si se quiere que la encuesta muestral dé buenos resultados, los equiposde terreno tienen que recibir un adiestramiento especialmente cuidadoso.Las encuestas muestrales con visitas múltiples del tipo (4B) son viables,pero costosas de realizar. También puede ser apropiado efectuar unaencuesta muestral para las clasificaciones del tipo (1B) junto con (2C).

El clásico estudio de caso sociol6gico puede describirse como:

Tipo (1B)x (2A) x (4A)

Un estudio de administración rural puede ser con frecuencia:

Tipo (20) x (3B)x(4B)

Esta combinaci6n puede ser conveniente para una encuesta muestral(v5ase lo dicho anteriormente), aunque la necesidad de efectuar medicionesexactas y detalladas junto con visitas múltiples hace que resulte difícil ycostosa de realizar. Pero, con frecuencia, los estudios de administraci6nrural se inclinan hacia el Tipo (2B) x (3B) x (4A). Esta combinaci6n esmás adecuada para los estudios de casos.

El estudio de un determinao problema de salud pública puede ser:

Tipo (1A) x (2B) x (3A) x (4C)

Esto exige realizar un estudio de casos; pero obsérvese que unaencuesta de nutrici6n en la que se efectúen mediciones antropométricas deninos puede ser:

Tipo (1C) x (2C) x (30) x (40)

que se presta para realizar una encuesta muestral.

Las investigaciones en que hay que identificar ciertos tipos deentrevistados en un lugar concreto, por ejemplo, las entrevistas concomerciantes del mercado, son del tipo (1B). Si intervienen entrevistas

- 70 -

del tipo (2A), es decir, espontáneas y sin estructurar (véase la Parte 6),

es mejor efectuar la investigación basándose en estudios de casos. Sin

embargo, la recopilaci6n de datos regulares, pero sencillos, de precios es

del:

Tipo (1B) x (2C) x (3C) x (4B)

que puede llevarse a cabo mediante una encuesta muestral.

5.5 Combinación de varios métodos de investigación

Se han descrito las características de las fuentes principales de

datos y las ventajas e inconveninentes de cada una de ellas, a fin de

indicar las cuestiones para las que son pertinentes por separado. En este

contexto es natural "comparar" una posible selección con otra, como se ha

hecho en la secci6n anterior. Pero en esta Parte no es posible dejar de

subrayar, finalmente, que la tarea principal al diseniar los sistemas de

seguimiento y evaluacion es la de combinar los distintos métodos en un

programa global que utilice los recursos disponibles de la mejor manera

posible.

Para el seguimiento, esta combinación consistirá muchas veces en:

(a) Análisis de los registros administrativos.

(b) Observaci6n rápida.

(c) Encuestas muestrales de tasas de aceptaci6n.

(d) Estudios de casos para examinar problemas.

Para la evaluaci6n, que cuenta con los datos obtenidos mediante

el seguimiento, la combinaci6n será frecuentemente de:

(a) Estudios de casos para examinar relaciones causales.

(b) Encuestas muestrales a lo largo del tiempo.

Mediante el estudio de casos basado en una investigaci6n

intensiva llevada a cabo por profesionales se obtendrán conocimientos que

es imposible obtener mediante una encuesta muestral. Gracias a estos

conocimientos se determinarán las relaciones y limitaciones clave y se

formularán hip8tesis, con lo cual la investigaci6n se centrará con mayor

precisión y se propondrán indicadores que puedan recopilarse mediante una

encuesta muestral. Esta combinaci6n de los resultados de los estudios de

casos y de las encuestas muestrales proporcionará pruebas convincentes para

determinar la verosimilitud de las afirmaciones sobre las repercusiones del

proyecto y la manera en que éste funcion6.

- 71 -

Por ejemplo, un estudio de caso puede demostrar que Gnicamentelos agricultores con mano de obra familiar equivalente, como mínimo, a laesposa y dos hijos pueden llevar a cabo las tareas indispensables duranteuna parte de un nuevo sistema de cultivo que se haya propuesto. Unaencuesta.muestral puede establecer entonces la proporción de agricultoresque disponen de los recursos necesarios de mano de obra. En consecuencia,puede aducirse lógicamente que el nuevo sistema de cultivo es viable enzonas en las que al menos el "x" por ciento de los agricultores exhibendichas características.

De forma análoga, un estudio de caso puede poner de manifiestoque una organización paraestatal de comercialización no ofrece el preciogarantido de un. cultivo a los pequeños agricultores, los cuales dependen,por lo tanto, del precio ofrecido por los comerciantes locales. Si esteprecio baja por debajo de "y" unidades monetarias por saco, el agricultorno se sentirá inclinado a producir un excedente para vender. Una encuestamuestral puede determinar el precio que reciben los agricultores. Medianteestas dos investigaciones puede obtenerse con exactitud razonable laprobabilidad de que los agricultores aumenten la producción.

Estos ejemplos ilustran también las cuestiones relativas alpersonal. El cambio del estadístico durante la realización de la encuestamuestral no deberá significar una gran diferencia (suponiendo que ambosestadísticos sean competentes). En cambio, el estudio de casos dependemucho de la experiencia del investigador principal, y si se le sustituyedurante el estudio es muy posible que sea preciso volver a empezar.

- 72 -

PARTE 6

METODOS DE OBSERVACION DIRECTA

6.1 Observaci6n directa

La recopilaci6n de datos mediante métodos rápidos de observaci6n

(o reconocimiento) y mediante estudios de casos se describe conjuntamente

con el nombre de "métodos de observación directa", puesto que la

responsabilidad de todas las tareas relacionadas con el diseio,

observaci6n, análisis y presentación de los resultados se concentra en una

sola persona o en un pequeio grupo de personas. Esta es una de las

características fundamentales que distinguen a estos métodos de la encuesta

muestral; otra característica a la que ya se ha hecho menci6n anteriormente

es que falta la base lógica para una inferencia probabilística formal.

Esta concentraci6n de todo el procedimiento de recopilaci6n y

análisis de datos en una sola persona, o en un pequeño grupo que trabaja en

estrecha colaboración durante toda la investigaci6n, es muy ventajosa, como

ya se ha descrito en la Parte 5. La combinaci6n de diversas experiencias e

informaci6n y el equilibrio entre distintos tipos de datos dentro de un

marco intelectual común pueden dar lugar a la obtenci6n de nuevas

percepciones, la formulaci6n de hip6tesis y el planteamiento de problemas

con una amplia gama de posibles soluciones en forma econ6mica y eficaz.

Por supuesto, el logro del éxito dependerá en gran medida de las cualidades

de los investigadores y de la forma en que éstas armonicen con el objeto de

la investigaci6n.

Las características econ6micas, sociales y culturales de las

comunidades rurales varían mucho de unos países a otros y, a veces, dentro

de las fronteras. de un solo país. Por consiguiente, es arriesgado afirmar

que poseen ciertas características comunes. Sin embargo, hay dos

características de las comunidades rurales, tantas veces mencionadas y

citadas en los estudios rurales, que forman una base común que debe tenerse

en cuenta al planear los estudios de observaci6n directa.

En primer lugar, en los poblados suele haber una estructura

jerárquica. La jerarquía se basará en características distintas en

diferentes lugares, pero los agricultores de mayores medios econ6micos

generalmente detentan los cargos que confieren poder en la localidad. Por

consiguiente, las opiniones de los que están en la parte superior de la

estructura jerárquica serán más accesibles y evidentes. Sus contribuciones

a las deliberaciones, y su dominio sobre éstas, pueden dar la impresi6n de

que existen opiniones ampliamente aceptadas sobre los temas, problemas y

decisiones de que se trate. Sin embargo, es muy posible que esa unanimidad

no exista en la realidad. Será difícil descubrir las diferencias, puesto

- 73 -

que los más pobres, los que carecen de tierra, las mujeres u otrosseguramente no están dispuestos a dar a conocer sus opiniones en un debateen presencia de miembros de la "elite". Aun en conversaciones privadasquizá no redunde en su beneficio manifestar oposici6n en contra de losdirigentes locales o indicar un orden distinto de prioridades.

En segundo lugar, muchos campesinos tienen una escala derelaciones que va de dentro a fuera, es decir, desde una identificaci6nestrecha con sus parientes cercanos que viven en la misma localidad,pasando por sus parientes que viven en otros poblados y vecinos en general,hasta otros que están "fuera" (desde los agentes de extensi6n locales hastafuncionarios de más categoría a los que se les ve con menos frecuencia).

Naturalmente, los campesinos serán cautos y evitarán hablar confranqueza a los que consideren extra?ños. A veces expresan lo que creen queesos extraños desean oír; o reproducen lo que consideran la postura"oficial", en la esperanza de obtener favores o tratamiento especial de losentrevistadores o de sus contactos oficiales. Puede haber conflictosinternos en la comunidad o con otras comunidades que induzcan a losentrevistados a expresar una cierta opini6n para obtener el apoyo o laaprobaci6n a su propia postura.

Esto no quiere decir que las personas ajenas a la localidad nopuedan obtener informaci6n fidedigna ni aun en sus primeras visitas a losagricultores o al poblado. No obstante, hay tres consecuencias importantesde esta situaci6n que afectan a la organizaci6n de los sistemas deseguimiento y evaluaci6n.

La primera de ellas es la considerable mejora en la calidad delos datos y en el conocimiento de situaciones que se derivan de lacontinuidad de un buen personal. A medida que los observadores repiten lasvisitas comienzan a perder su condici6n de "extraños" y van entendiendo lasverdaderas actitudes,'intenciones, aspiraciones y prioridades de loscampesinos. Comienzan a captar las características implícitas de la vidaen la comunidad rural que con frecuencia son fundamentales para el éxito ofracaso del proyecto.

La segunda consecuencia es la necesidad de ajustar la escalacronol6gica del proceso de recopilación de datos al tipo de información quese necesite. La base física de un proyecto de riego puede observarse confacilidad. Más tiempo llevará identificar la ramificaci6n del sistema deorganizaci6n por medio del cual el agua llega al campo del agricultor enciertas cantidades y en determinados momentos; y será una tarea todavía máscomplicada averiguar las causas de que no se disponga de mano de obra localpara limpiar los canales de cieno. En el estudio de un proyecto en unazona rural de Afganistán se observa que no puede entenderse "la complejidadde la red de distribución de agua, los derechos de riego, las negociacionesentre los usuarios al comienzo y al final de los canales de riego mediante

- 74 -

las técnicas de encuestas...la informaci6n sobre las posibiliddes de

introducir cambios...se obtuvo mediante entrevistas informales, combinadas

con discusiones detalladas con funcionarios locales bien informados". En

especial, se necesitarán métodos basados en estudios de casos, incluyendo

técnicas antropológicas, a fin de determinar las relaciones causales entre

los insumos y los efectos, y averiguar cuáles son los factores que afectan

el comportamiento de los agricultores. No es necesario que esas

investigaciones lleven tanto tiempo como los estudios antropol6gicosclásicos. Hay una experiencia creciente que demuestra que pueden obtenerse

resultados "aplicados" valiosos en períodos más breves. No obstante,

cualquier encuesta agrícola puede necesitar más de un ano para estudiar

aquellos aspectos (y éstos serán numerosos) que requieran una observaci6n

cuidadosa de la secuencia de las operaciones durante un ciclo agrícola

completo.

La tercera consecuencia es que hay que hacer un esfuerzo

consciente para determinar los puntos de vista de los grupos que menos se

dejan oír en los poblados rurales. Así, por ejemplo, es posible que las

mujeres estén especialmente interesadas en el suministro de agua y en la

obtención de combustible, que se hallen en mejores condiciones para juzgar

las necesidades que existan en estas materias, y que presenten alternativas

a las estrategias sustentadas por los hombres.

Al diseiar una encuesta, la capacidad limitada de recordar de los

entrevistados determina el período máximo respecto del cual se les puede

solicitar informaci6n. Este tema se discute en la Parte 8. Por otra

parte, la capacidad de recordar de los investigadores determina los

procedimientos de observación directa que pueden ser utilizados. La regla

es que la información debe anotarse lo antes posible. Alguna información

puede anotarse a medida que se obtiene, por ejemplo, el resultado de la

observación que haga un investigador de aspectos físicos, tales como la

condiciones en que se encuentran los caminos o los cultivos en los campos a

lo largo de la carretera. A veces es posible anotar una conversaci6n

conforme ésta tiene lugar, de manera semejante a como los entrevistadores

trabajan en una encuesta muestral habitual. En situaciones de observación

directa, sin embargo, muchas veces no conviene tomar nota de manera obvia

ya que se obstaculiza la formación de relaciones espontáneas entre el

investigador y el entrevistado, las cuales son una de las ventajas

principales de este método.

Los resultados de las conversaciones deben anotarse en cuanto se

pueda después de que éstas hayan tenido lugar, de preferencia el mismo

día. Hay tres razones principales para ello. La primera es el evitar

olvidos, problema agravado por el mayor cúmulo de información que se

presenta en una situación de observaci6n directa. La segunda raz6n es el

papel selectivo y estructural que tiene la memoria; los asuntos que no

armonizan con la percepci6n mental de una situación tienen mayoresprobabilidades de olvidarse, pasar a segundo plano o recordarse de manera

- 75 -

deformada. Si se anotan en el momento, no habrá luego esos problemas. Latercera raz6n es la necesidad de mantener buenos hábitos, ya que, si seacumula una cantidad excesiva de observaciones no anotadas, puede ocurrirque la anotaci6n de éstas llegue a ser tan engorrosa que no se haga nunca.

6.2 Observación rápida: Observaci6n e investigaci6n

En la Parte 5 se expuso la utilidad de la observaci6n rápida comofuente de datos con fines de seguimiento de un proyecto. Aun cuando éstees el método menos estructurado de recopilaci6n de datos, merece la penallevar a cabo una cierta planificaci6n para asegurarse de que los datos,aunque se obtengan con rapidez, tienen una exactitud razonable.

La eficiencia de un observador está determinada por atributosnaturales (buena vista y buen oído), y conocimiento de los temaspertinentes y experiencia. La aptitud natural puede mejorarse con lapráctica de anotar los resultados de la observaci6n. Los ejercicioste6ricos, las lecturas sobre el tema, pueden mejorar la eficiencia hastacierto punto, pero la experiencia en el terreno es la mejor manera delograr dicha mejora, especialmente si se lleva a cabo bajo la direcci6n deun experto. Por lo tanto, el resto de esta sección se dedica a examinarlos conocimientos que es necesario tener de los temas pertinentes.

Los investigadores deben iniciar su labor con una idea clara delos temas que se supone van a estudiar. Conviene preparar de antemano unalista de verificaci6n de los aspectos físicos que desean identificar y delos asuntos que quieren discutir. Esa lista deberá considerarseincompleta, ya que no pueden preverse todas las eventualidades. Sinembargo, la preparaci6n de tal lista requiere concentrarse en el tema y, alestudiar el primer borrador, quizá salgan a relucir otros asuntos en losque no se penso en un comienzo.

Los temas que deben tratarse pueden a veces organizarseutilizando las ocho preguntas siguientes:

¿Quién?¿D6nde?¿Cuándo?¿Quá?

S¿C6mo?¿Durante cuánto tiempo?

. ¿Cuánto?¿Por qué?

Las preguntas pueden ser sencillas, por ejemplo, "¿Cuándo tuvo lugar laúltima entrega de fertilizante al punto de distribuci6n?"; "¿De qué claseera?"; "¿Cuánto fertilizante?" También pueden ser más extensas: "¿Quéfactores impiden que los agricultores siembren pronto, tal como serecomienda?"

- 76 -

Evidentemente, el conocer el idioma local es una ventaja. Por lo

menos hace falta un cierto conocimiento de agricultura y de ganadería (lacapacidad de reconocer los diversos cultivos y el conocimiento de las

prácticas y el calendario agrícolas). Los investigadores que carezcan de

estos conocimientos deberán visitar primero una estaci6n experimentalcercana, u obtener ayuda de los representates locales de los ministerios

pertinentes antes de efectuar sus primeras visitas. Si el entrevistador

manifiesta una ignorancia total, los agricultores no tomarán en serio la

encuesta y ésta no producirá un registro útil del estado en que se

encuentran los cultivos. De modo semejante, debería ser posible obtener de

antemano cifras respecto al orden de magnitud de la producción de los

productos principales (por ejemplo, rendimiento de leche por vaca).

Es necesario conocer el régimen habitual de precipitaci6n (uno de

los factores principales que determina el calendario agrícola) y el volumen

reciente de precipitación. Conviene estudiar mapas recientes de la zona y

llevarlos consigo en el viaje, o bien preparar a mano un mapa. En estemapa debe anotarse cualquier delimitación anterior de estratos estadísticos

o de zonas ecol6gicas. Hay que obtener informaci6n sobre las unidades

locales de medida y llevar una canasta o recipiente que se utilicelocalmente. Es preciso obtener informaci6n sobre los canales locales de

comercializaci6n e identificar y marcar en el mapa los lugares y fechas en

que tengan lugar los principales ferias y mercados.

Hay que prestar atenci6n a la hora y las fechas en que conviene

efectuar las visitas. La hora del día determinará quiénes van aencontrarse en el pueblo y quiénes en la explotaci6n; el día de la semana

determinará si pueden observarse las actividades de comercializaci6n, y el

mes o la estaci6n determinará las actividades agrícolas que se esténrealizando. Con frecuencia sucede que solamente es posible conversar con

los entrevistados de manera satisfactoria muy temprano o muy tarde en el

día. Los comerciantes suelen llegar a los mercados muy pronto, a la salida

del sol. Los agricultores solamente pueden conversar con tranquilidad al

final del día, cuando han terminado las labores agrícolas.

Las visitas ulteriores requieren menos preparaci6n, pero es

preciso corregir y ampliar permanentemente la informaci6n básica y revisar

la lista de verificaci6n teniendo en cuenta la experiencia y ampliarla a

medida que se examinen nuevos temas.

Cada entrevistador desarrolla su propio sistema de registro y

anotaci6n, pero conviene exponer algunas reglas básicas:

(a) An6tese la hora, fecha y lugar de la observación ydiscusión, y ciertas características identificadoras, comoel estado civil o profesional de los entrevistados. Si esposible, an6tese por separado en un diario las observacionesque se hagan sobre un viaje. Las fechas, distancias y

- 77 -

nombres de los lugares pueden anotarse en orden sucesivo,junto con el registro apropiado de las observaciones yhechos. Si se ha de obtener información numérica estándaren varios lugares (por ejemplo, precios de ciertos productosen todos los mercados visitados), un formulario previamentepreparado ahorrará tiempo y servirá para presentar unaprimera estructuraci6n de los resultados.

(b) Las anotaciones en el diario deben seguir un métodouniforme, de manera que se incluyan todos los temas de lalista.de verificaci6n, dejando una última secci6n abierta.De este modo, se aligera el trabajo y se evita pasar poralto algunas cosas.

(c) Conviene elaborar un sistema de abreviaturas para laspalabras que se usan con mayor frecuencia. Las citasliterales se indican entre comillas "...". Hay que separarlos comentarios e interrogantes del propio observador queexijan nuevas investigaciones, por ejemplo, poniéndolasentre corchetes

(d) T6mense fotografías de las cosas principales, siempre queésto no ofenda. P6nganse en las fotos las fechas, lugares ycircunstancias. Una serie de fotografías tomadas a lo largodel tiempo es util. Si se promete enviar copias de lasfotografías a los entrevistados hay que asegurarse de queesas promesas se cumplan.

(e) Suele ser útil llevar una calculadora de bolsillo.

(f) A veces es posible grabar las conversaciones, pero éstopuede no ser conveniente porque--al igual que sucede con lasnotas que se toman durante una conversaci6n--puedeobstaculizar la libre expresión de las opiniones. Noobstante, puede utilizarse una grabadora para llevar lasanotaciones del diario cuando no haya el tiempo suficientepara escribirlo.

NOTA: No conviene que las cámaras fotográficas, las calculadoras debolsillo y las grabadoras estén tan a la vista que distraigan alos entrevistados y den la impresión de que el observador es un"turista".

Las visitas de observación dependen en gran medida de que secuente con una buena organización. Esta es, no obstante, muy dificil deobtener. Son muy pocos los viajes que de hecho comienzan a la horaprevista. Unas cuantas horas de retraso pueden reducir seriamente unprograma u obligar a pasar varios días más de viaje.

- 78 -

En la Parte 8 se examinan los procedimientos que deben seguirseen las entrevistas. Aquí se insiste en la necesidad de adoptar una actitudsencilla, sin dar muestra alguna de arrogancia o de superioridad. Se debesuponer que si los agricultores siguen cierta práctica tiene que haber

buenas razones para ello. El hecho de que los agricultores. no sigan lasrecomendaciones del proyecto puede deberse a limitaciones que no han sido

apreciadas por los que diseiaron el proyecto, como la falta de recursosnecesarios o el no haberse prestado el apoyo prometido en la cantidad, lacalidad o las fechas convenidas. Así, es muy posible que los agricultoresno siembren en la época recomendada si ésta coincide con el período en que

se permite.al ganado vagar libremente; si un año el fertilizante.lleg6 ·tarde, habrá dudas de si al aio siguiente llegará en el momento oportuno.

Los agricultores pobres atribuyen un costo te6rico elevado a las

nuevas prácticas, ya que el riesgo siempre parece ser elevado (y con

frecuencia lo es). En las prácticas habituales puede haber elementos que

ya no sean necesarios o no estén justificados, pero "tradicional" no essinónimo de "anticuado", y aun cuando se describa de ese modo un ciertoprocedimiento puede haber s6lidas razones para que continúe. En realidad,

cuando las prácticas recientemente adoptadas tienen éxito y se divulgan,rápidamente se las califica de tradicionales. Por ejemplo, el cultivo en

curvas de nivel que se llevaba a cabo en una zona montañosa de Africa fue

calificado gratuitamente de "tradicional" a los pocos años de haberseintroducido. Las preferencias por ciertos alimentos están muy arraigadas yno es probable que cambien con rapidez, especialmente si la imposici6n

parece venir desde el exterior.

La experiencia demuestra que puede obtenerse informaci6n valiosasi el investigador muestra estar dispuesto a escuchar la opini6n delagricultor y trata de entender su postura (véase la Secci6n 8.4).

Los funcionarios públicos que residen localmente pueden ser degran utilidad, especialmente los que trabajan en agricultura y desarrollo

de la comunidad. Siempre es conveniente, y con frecuencia necesario,darles informaci6n anticipada sobre los viajes que se vayan a hacer en suzona. Cabe mencionar una reserva sobre la informaci6n obtenida de dichos

funcionarios. Las oficinas públicas suelen tener un punto de vista"oficial", al cual sus funcionarios se suscriben o creen que estánobligados a respaldar. Puede suceder que amolden sus opiniones a laversión oficial. Por supuesto, los ministerios tendrán también actividades

específicas en marcha, como, por ejemplo, la aplicaci6n de nuevastécnicas. Los funcionarios locales, cuyas carreras dependen de que seadopten estas técnicas (a veces especificadas en forma de metas), no sonnecesariamente informadores imparciales de lo que de hecho estásucediendo. Naturalmente, éste es tan s6lo un aspecto de una dificultadgeneral con la que tropiezan todos los que trabajan en unidades de

seguimiento y evaluaci6n.

- 79 -

La finalidad principal de la observacion rápida es la de serrápida. Esto no se aplica únicamente al método de observaci6n. Todo elproceso tiene que ser rápido, desde la iniciaci6n del viaje hasta lapresentación de un informe y recomendaciones a los que han de tomar lasdecisiones sobre la política que convenga adoptar.

6.3 El estudio de casos

Como se ha indicado en la Parte 5, en este Manual se entiende por"estudio de casos" el estudio detallado de un pequeño número de unidades,seleccionadas como representativas del grupo o grupos que tienen que vercon el objeto estudiado, pero no necesariamente representativos de lapoblación en conjunto. Se emplea este método cuando es preciso examinar afondo las relaciones mutuas que existen entre la población y lasinstituciones;, identificar y explicar las actitudes y opiniones existentes,y demostrar el por qué se da un determinado comportamiento. Los estudiosde casos prácticos son especialmente apropiados cuando se requiere un altonivel de análisis. Estos no tienen las restricciones con que tropiezan lasgrandes encuestas muestrales en lo que respecta a cuestionarios yentrevistas, ni tampoco están limitados por el menor horizonte temporal quees propio de *Las tareas de observación rápida y que impiden elestablecimiento de una relaci6n estrecha y fructífera entre losentrevistadores y los entrevistados.

El período requerido para los estudios de casos suele ser losuficientemente largo como para exigir la residencia de los entrevistadoresen la comunidad objeto de estudio o en sus cercanías. Por consiguiente,los entrevistadores tienen la oportunidad de ser aceptados en lacomunidad. Se pueden discutir cuestiones delicadas en un ambiente relajadoy tranquilo y sin formalismos, y observar el comportamiento. Como esnatural, los investigadores deben reducir al mínimo el efecto que supresencia tiene sobre todo aquello que ellos estén observando, de maneraque, en lo posible, lo que existe "naturalmente" sea detectado, registradoy analizado.

En este sentido, un informe de evaluación afirmaba: "El CIDERdebiera explorar los medios encaminados a utilizar sus investigadores deevaluaci6n de manera más intensiva, asignando su personal a funciones sobreel terreno con carácter más o menos permanente (o prolongado). S61o sepodrá realzar la eficacia de la gestión modificando significativamente laactual relación entre el tiempo pasado por el personal del CIDER en la sedey en las aldeas en favor del tiempo pasado sobre el terreno". 1 /

1/ Michael Cernea, "La cuantificaci6n de los efectos de los proyectos: lavigilancia (seguimiento) y la.evaluación en el Proyecto de DesarrolloRural PIDER-México", Documento de Trabajo de los Servicios del BancoMundial No. 332 (Washington, D.C.: Banco Mundial, junio de 1979).

- 80 -

Como ejemplos de circunstancias que justificarían el emprender un

estudio de casos se podrían citar los siguientes:

(a) Graves distorsiones del proyecto no debidas a trastornos

físicos patentes relacionados con la construcci6n, entrega u

otras funciones logísticas.

(b) Una amplia gama de variaciones en las respuestas o

resultados en diferentes zonas o sectores.

(c) Una ejecuci6n deficiente, general y extendida, u otros

indicios que sugieren un posible fracaso en lo que respecta

a organizar las actividades del proyecto para adaptarlas a

las necesidades de los beneficiarios.

Una característica común es la necesidad de presuponer e

investigar las relaciones causales. La observaci6n peri6dica del proyecto

podrá identificar el problema y con frecuencia ofrecer la base que permite

establecer hip6tesis apropiadas, pero éstas deben ser comprobadas por medio

de series de datos observados con mayor profundidad y precisi6n.

Por otra parte, como ya se ha visto en las Partes 3 y 5, los

estudios de casos se utilizarán en toda una serie de proyectos para

establecer la base racional de apoyo que permite determinar la

verosimilitud de argumentos causales opuestos, aun cuando no sea factible

hacer una comprobaci6n rigurosa de su validez. Los estudios de casos

debidamente realizados podrían destacar toda una serie completa de

actividades relacionadas y no relacionadas con el proyecto en cuesti6n

dentro de un marco de comportamiento único y tener en cuenta las

interacciones del sistema.

El informe sobre el PIDER, anteriormente mencionado, decía así:

"Este tipo de estudios (multisectoriales, aunque restringidos a un área

relativamente limitada) debieran captar el efecto sinergistico de los

varios componentes del proyecto sobare la vida, economía, estructura,

instituciones y organizaci6n de las comunidades individuales".1!

El mismo puede proceder de una forma flexible--y con frecuencia

especulativa--y con todo producir resultados finales dentro de un lapso

temporal acceptable. Como ya se ha subrayado anteriormente, es muy eficaz

cuando está complementado por otras técnicas.

Dado que el éxito de un estudio de casos depende casi por

completo del investigador (o investigadores) principal, deberá concederse

una gran libertad a la persona (o personas) elegida para llevar a cabo la

1/ Idem, págs. 68-69.

- 81 -

encuesta de la manera que lo crea más conveniente. Estas personas id6neasse podrán encontrar entre el personal del proyecto en la unidad central deevaluaci6n (en su caso), en instituciones académicas o de investigaciónlocales o en firmas consultoras o consultores individuales. Comofrecuentemente es necesario utilizar tanto los recursos de las cienciasnaturales como de las sociales, muchas veces será necesario nombrar a dosinvestigadores en colaboración (por ejemplo, un agr6nomo y un economistaagr6nomo). En algunas culturas, tal vez sea necesario tener investigacionesde ambos sexos. "...la necesidad de un enfoque multidisciplinario secomprende mejor; un enfoque en el que el soci6logo y antropSlogo trabajenen colaboración con el economista y el investigador agr6nomo ... parece serel más eficaz ara comprender e influir en el sistema de explotaci6nagrícola ... ". /

Desde el principio deberá hacerse hincapié en la presentaci6n deinformes oportunos. Con frecuencia, los individuos más experimentados ycompetentes en esta clase de estudio, una vez que lo han iniciado, seencuentran envueltos en nuevas posibilidades imprevistas de investigaci6n,y persiguen mejoras adicionales a expensas de cumplir puntualmente con losplazos fijados. La prolongación del plazo para realizar el trabajo decampo retrasa el análisis directamente (al aplazar el esfuerzo requeridoque hay que dedicarle) e indirectamente (al originar procedimientos máscomplicados). El informe final podrá ser un documento más completo en elsentido académico o en el contexto de la investigaci6n, pero tendrá pocovalor práctico si el plazo para utilizar los resultados del estudio hatranscurrido ya. Si bien se ha de dar al investigador la libertadanteriormente mencionada, es preciso seguir de cerca la marcha de cualquierestudio de casos teniendo otros plazos en consideraci6n.

En el pasado, una de las características de la metodologia deestudio de casos ha sido su carencia de plazos. Con todo, hay quereconocer que algunos resultados interesantes no se habrían podido obtenerde otra forma. Por lo tanto, será cuestión de buen juicio determinar hastaquá punto--si éste fuere el caso--se podrá atender una solicitud deaplazamiento del plazo del estudio. Los aplazamientos deberán efectuarseúnicamente en casos muy especiales; es demasiado fácil el proponer lacontinuaci6n de la investigación de unas relaciones adicionales"potencialmente interesantes", y el investigador podría también, por raz6nde su formación profesional, sentirse inconscientemente inclinado a quererrelacionar todo con todo.

Cuando se encarga un estudio de casos, hay que entregar términosde referencia al investigador. Dichos términos deben especificar el tema,los plazos, la escala y los sujetos a ser entrevistados. La precisiónrequerida en ciertos aspectos deberá combinarse con la flexibilidad en

1/ Idem.

- 82 -

otras, ya que una de las razones para utilizar la técnica del estudio de

casos es precisamente su función exploratoria.

La especificaci6n del tema será relativamente sencilla cuando el

requisito es principalmente descriptivo, por ejemplo, el suministro de

información sobre ciertos canales de comercializaci6n, o una investigaci6n

de las actitudes de los agricultores para con un cierto servicio propuesto

o recién implantado. Cuando el proyecto está experimentando distorsiones o

amplias variaciones en las respuestas, los términos de referencia para el

investigador (aun cuando se centre en torno a la distorsi6n o variaci6n

particular) deberán ser más abiertos, es decir, deberán parecerse más a una

reseia de problemas que a una formulación de requisitos específicos de

informaci6n. El seguimiento del proyecto puede haber facilitado hipótesis

o explicaciones provisionales que constituirán el punto de partida. En las

etapas finales de la evaluación, sobre todo en la detecci6n de efectos

imprevistos, los términos de referencia deberán sefialar las áreas motivo de

especial preocupaci6n y el carácter general de los resultados previstos.

En un proyecto de riego, por ejemplo, los rendimientos más altos

que se obtuvieron como consecuencia de la utilización inicial del agua se

estabilizaron a un nivel inesperadamente bajo. Con el objeto de explicar

las razones de este fracaso en aprovechar completamente los recursos

puestos a disposici6n, se emprendió un estudio de casos, en el que se

especific6 como tema del mismo las limitaciones que experimentaban los

agricultores como consecuencia de las nuevas circunstancias que había

creado el proyecto.

El período asignado al estudio debe, como ya se ha sefñalado

anteriormente, conformarse a las necesidades del proyecto. Por lo general,

cuanto más complejo sea el tema, tanto más tiempo se necesitará para

investigarlo. Es posible que se requiera realizar una investigación, con

frecuencia muy minuciosa, de las interacciones que existen en el sistema.

Por ejemplo, las fechas de la siembra del maíz pueden verse limitadas por

las fechas de la siembra de los frijoles que, a su vez, podrían estar

condicionadas por la incidencia de una enfermedad. Pueden existir

interrelaciones no detectadas entre las variedades de cultivos y el

ganado. Por ejemplo, en un proyecto de maíz, al arrancarse las hojas del

maíz en pie para alimentar a los animales, la diferencia entre los

rendimientos de las distintas variedades llegó a ser un factor clave en la

evaluaci6n de los rendimientos obtenidos por los agricultores. Por

consiguiente, todo el sistema deberá ser revisado. En estos casos, el

calendario real de la encuesta, así como la duración de la misma requieren

una planificación detallada dentro del marco del proyecto.

Las características del comportamiento que representan

estrategias para reducir los riesgos son difíciles de precisar. Y lo que

es más, los fracasos del proyecto pueden ser consecuencia de ineficiencia o

de ilegalidad. Se requiere tiempo para comprender las decisiones adoptadas

- 83 -

por los agricultores y detectar simulaciones o evasivas.

El estudio de casos deberá investigar con profundidad losacontecimientos anteriores y observar tambi5n el comportamiento en elmomento en que éste se da. La mano de obra que participa en las diversasetapas de un cultivo constituye una buena ilustraci6n de ello: lafrecuencia, el alcance y el tiempo requerido para labores tales como lapreparaci6n de la tierra, la siembra del cultivo, la escarda, la aplicaci6nde fertilizantes y pesticidas, las faenas de cosecha y postcosecha, podríanrequerir una observaci6n (o, por lo menos, que se recordaran durante unespacio de tiempo muy corto) a lo largo de la campaia agrícola. Estaposibilidad de poder observar el comportamiento a lo largo del tiempo--unade las características positivas del estudio de casos--deberá explotarsecon discreci6n. Este tipo de observaci6n prolongada por observadoresprofesionales es una actividad costosa y deberá estar justificada por lademanda de un análisis detallado de los usuarios principales. Es frecuenteque.el impulso de estos estudios lo den investigadores que no estáninvolucrados directamente en los problemas del proyecto en cuesti6n. Losestudios de casos realizados al amparo de la evaluaci6n no son financiadospara fines de investigaci6n.

La escala o cobertura geográfica del estudio de casos influirátambién en el plazo de tiempo requerido (a no ser que se organicensimultáneamente encuestas independientes paralelas). La cobertura puedeque no tenga importancia en el caso de proyectos que tengan una zona deinfluencia limitada, pero en los proyectos de mayor alcance es precisoidentificar los factores que clasifican a los beneficiarios del proyecto endistintos grupos de estudio apropiados. Las unidades del estudio de casosse eligen entonces de entre los grupos formados.

Esta selecci6n no ha de confundirse con el muestreo estratificadoo por conglomerados (v&ase la Parte 7). El fin que se persigue no esobtener estimaciones válidas para la poblaci6n total, sino más bienasegurar que el estudio de casos incluya ejemplos que demuestren losprincipales fen6menos estudiados. Los grupos atípicos o no modales vanprobablemente a necesitar una atenci6n especial. Es posible que ciertosgrupos no tengan que ser estudiados. Es posible que el proceso de laselecci6n no se base en la aleatoriedad.

Un requisito fundamental es identificar a los entrevistados yagruparlos en forma significativa,, de suerte que se pueda estudiar ycomparar lo que ellos hacen y la manera en que llegan a adoptar la decisiónde hacerlo. Los entrevistados o encuestados para la mayoría de los finesde desarrollo agrícola y rural serán los propios agricultores. Debenhacerse, sin embargo, dos salvedades. En primer lugar, si bien elagricultor puede tomar decisiones a un nivel dado, otros miembros de lafamilia pueden decidir las actividades a un nivel más bajo; por ejemplo,muchas prácticas de cultivo están determinadas por las mujeres que trabajan

- 84 -

en la parcela familiar. La unidad fundamental puede ser el hogar; "la

unidad familiar es simultaneamente una unidad de producción y una unidad deconsumo ... La sociología de este tipo de unidad está complejamente

vinculada con su economía". 1/ En segundo lugar, cuando la unidad del hogar

familiar se rompe temporalmente a causa de la migración de algunos de susmiembros, la unidad de la toma de decisiones comienza a desintegrarse. La

investigación entonces se hace inevitablemente más complicada. Cuando

estos aspectos son importantes, las recomendaciones que se ofrecen aquísobre los m6todos para agrupar a los agricultores deberán modificarse en

forma apropiada.

Los factores que influyen en las decisiones de los agricultorespueden agruparse como sigue:

(a) Generales:

(i) Régimen y variación climáticas(ii) Susceptibilidad a plagas y enfermedades

(iii) Factores sociales, culturales y comunitarios.(iv) Facilidades de comercializaci6n y crediticias

(v) Política oficial

(b) Específicos:

(i) Recursos: familia y mano de obra, tierra, ganado ycapital.

(i) Metas individuales con respecto a actitudes y respuesta

al cambio.

Evidentemente, la clasificaci6n por características generales es

la más sencilla. Mucho se logrará con una divisi6n territorial, aunque

incluso una zona con un régimen climático homogéneo podría todavíanecesitar una subdivisi6n importante. Por ejemplo, la proximidad a las

ciudades es un factor que influye en la comercialización y en las

oportunidades de migración. Los grupos pastorales necesitarán generalmentecategorías separadas. Con frecuencia, una clasificaci6n basada en

características generales será todo lo que se puede precisar en los

informes preparados para los estudios de casos prácticos en las etapasiniciales del proyecto, ya que no se dispondrá de ninguna información sobre

las variaciones o características individuales. Más adelante, los

registros del proyecto constituirán un medio de agrupaci6n específica; porejemplo, aceptantes y no aceptantes, los que muestran progresos

satisfactorios y los que presentan resultados decepcionantes.

1Idem, pág. 113.

- 85 -

A veces, los factores comunitarios, sociales o culturales puedenser muy importantes, sobre todo, cuando toda o la mayor parte de lacomunidad o localidad ha de adoptar el cambio propuesto para que éste diresultado. Una ilustraci6n de ello es el mantenimiento de un sistema deriego, que depende de un acuerdo comunitario sobre la distribuci6n del aguay la provisión de mano de obra local para mantenerlo en funcionamiento. Enestos casos, la comunidad propiamente dicha será el foco central de lainvestigaci6n.

A continuaci6n se examinan con mayor detalle los factoresespecíficos en función de las características contenidas en las siguienteslistas de verificaci6n:

(a) Recursos

(i) Familia y mano de obra: tamaio, edad, respuesta a lasinstrucciones de los agricultores, disponibilidad a lo largodel año, otros empleos, mano de obra contratada.

(ii) Tierra: tamaio, fertilidad, posici6n (pendiente),disponibilidades de agua, acceso a mercados, sistemas decultivo y calendario.

(iii) Ganado: tipo, tamaño, carne, leche y capital.

(iv) Capital: maquinaria en propiedad, maquinaria arrendada,almacenes, vehículos (incluidos bicicletas y carros detracci6n animal).

(b) Factores de comportamiento

(i) Edad, educaci6n y experiencia anterior

(ii) Posición en la comunidad

(iii) Sensibilidad al riesgo

(iv) Influencia de hijas o hijos educados o migrantes.

Muchas de las variables enumeradas no se conocerán antes deemprenderse el estudio, pero se incluirán en el mismo como posibles causasexplicativas de la variaci6n en las respuestas. Sin embargo, toda lainformaci6n individual disponible se podrá utilizar, incluso en la fase deplanificaci6n, con miras a establecer otros subgrupos.

Cuanto más grupos se formen, tanto mayor será la homogeneidad decada grupo. Pero la complejidad de la organizaci6n del estudio aumenta eneste caso, por lo que tendrá que llegarse a cierto compromiso. Lo más

- 86 -

importante es que la variación entre los grupos respecto al tema en estudio

deberá ser significativamente mayor que la variación dentro de los grupos.

Cabe señalar que, una vez incluidos los factores específicos, los

límites de los grupos raras veces serán de naturaleza geográfica; los

agricultores pertenecientes a una misma comunidad pueden encontrarse

incluidos en diferentes grupos. Sin embargo, para obtener la profundidad

de percepción prometidos por los mátodos del estudio de casos, será preciso

que las investigaciones se limiten a unos cuantos lugares y a un pequeño

número de agricultores.

El estudio de casos no deberá ser una encuesta aislada; el tema y

la selecci6n de los grupos pertinentes están determinados por el lugar que

ocupan los estudios individuales en las actividades generales de

seguimiento y evaluación. Su planificaci6n se efectúa en el contexto de

las actividades de seguimiento, y su replanteamiento se perfila mediante

encuestas especiales y preliminares de observación rápida. Sus resultados

se interpretan al mismo tiempo que cualquier encuesta muestral planeada

conjuntamente con el estudio de casos. Al efectuarse las encuestas

muestrales simultáneamente, se corrobora así el punto anterior, es decir,

que el estudio de casos no perseguirá necesariamente "el promedio". A

veces puede lograrse una mejor comprensi6n con un estudio de los extremos,

por ejemplo, de aquéllos para los cuales el proyecto ha resultado

beneficioso y de aquéllos que lo han rechazado por completo.

- 87 -

PARTE 7:

EL MUESTREO Y EL DISEÑO DE ENCUSTAS MUESTRALES PARAEL SEGUIMIENTO Y LA EVALUACION

7.1 La l6gica básica del muestreo

Si se recongen datos de cada miembro de la poblaci6n general--uncensoý-no-se requerirá ninguna inferencia para relacionar los resultadosobtenidos con dicha poblaci6n. Las únicas fuentes de error serán lasrelacionadas con la enumeraci6n y el análisis, como el registro defectuosode los datos, la negativa a responder, los errores en las respuestas, lasomisiones (o duplicaciones) y la mala codificaci6n y elaboraci6n de datos.Estos son errores no muestrales.

Los censos no suelen ser prácticos, salvo en casos de simplesrecuentos de la poblaci6n efectuados por organismos nacionales. Por lotanto, se recurre al muestreo, es decir, a la obtenci6n de datos de unoscuantos miembros de la población total. Se introduce entonces otro error,a saber, el error de muestreo, que se origina porque la muestra elegida norepresenta perfectamente a la poblaci6n. El resultado obtenido de otramuestra tomada de la misma poblaci6n será diferente. Pero este erroradicional podrá contrarrestarse con creces mediante una reducci6n de loserrores no muestrales mencionados anteriormente, como resultado de la mejorcalidad de la enumeraci6n que puede lograrse al reducir la escala delestudio. El error de muestreo puede estimarse a partir de los datos de lamisma muestra, si cada miembro de la población tiene una probabilidadconocida de ser incluido en la muestra.

La l6gica del muestreo puede expresarse consderando una serie demuestras de- cierto tamaio extraídas de una poblaci6n, con el fin decalcular la media de un determinado atributo de la poblaci6n. Algunasmuestras pueden dar una media inferior a la media de la poblaci6n total,otras darán una media más alta y algunas darán una media muy pr6xima a lamedia de la poblaci6n. El teorema fundamental es que la distribuci6n deestas medias muestrales, si las muestras son de tamaños razonables, seacercará a la de una curva normal que, a su vez, tiene una mediaequivalente a la de la poblaci6n. En consecuencia, el margen probable porel que una media muestral dada difiere de la media de la poblaci6n puedecalcularse y es (con ciertas reservas que se mencionarán más adelante)inversamente proporcional a la raíz cuadrada del tamaño de la muestra.

Para que puedan aplicarse estos resultados, deberá introducirseel principio de aleatoriedad en el proceso de selecci6n. La poblaci6n dela que se va a extraer la muestra puede. estar agrupada en varias categoríasy ofrecer así distintas probablilidades de selecci6n para cada grupo.

- 88 -

Pero, una vez que se ha llevado a cabo éste y otros refinamientos del

diseio, la selecci 6 n de una o varias unidades a partir del grupo deberá

hacerse al azar. Este elemento esencial de la aleatoriedad es precisamente

lo que distingue el muestreo probablilístico, que permite hacer inferencias

con niveles precisos de confianza, de otras formas de muestreo que, si bien

prácticas en ciertos casos, no pueden proporcionar estimaciones adecuadas

del error de muestreo.

De ésto se deduce que, para asignar a cada miembro de la

poblaci6n una probabilidad conocida de selecci6n en un proceso de muestreo,

la población deberá ser identificada en su totalidad. Se requerirá una

lista básica, es decir, una lista completa de sus unidades integrantes.

7.2 La elecci6n de la unidad y la base del muestreo

La selecci6n de la unidad muestral definitiva constituye una

importante decisi6n que ha de adoptarse en las etapas iniciales del

diseio. Entre las unidades posibles se pueden citar las siguientes:

(a) un individuo(b) una familia

(c) una cooperativa o grupo operativo

(d) un poblado o grupo social(e) una parcela

(f) una explotaci6n agrícola

(g) una zona cartografiada(h) un lugar en que se da una actividad específica, y

(i) un área administrada como una entidad única.

Los individuos pueden servir adecuadamente como unidades

muestrales en las encuestas demográficas y en ciertas encuestas de actitud,

pero no tanto en las encuestas sobre medidas econ6micas y de calidad de

vida, en que la unidad econ6mica o social es más pertinente. Además, los

individuos son más difíciles de catalogar y de seguir que los hogares o las

explotaciones agrícolas. Las encuestas que tienen por objeto estudiar una

actividad determinda pueden utilizar como unidad muestral las localidades

en que se lleva a cabo dicha actividad, por ejemplo, un mercado o clínica.

La unidad elegida debe ser definida con precisi6n. De lo

contrario, en las fases de preparación de lista básica, confección de

listas e identificaci6n de las unidades muestrales, se producirán

ambigüedades, y los distintos componentes del equipo de la encuesta harán

diferentes interpretaciones. Como ya se señal6 en la Parte 4, existen

prácticamente tantas definiciones de "hogar" como encuestas de hogares.

Deberá hacerse un examen de los conceptos y definiciones que se utilizan

localmente con miras a adoptar la definici6n uniforme, si es que existe.

Lo más importante es que la definición sea clara, y que sea considerada

como racional tanto por el entrevistador como por el entrevistado. De poco

ENO

- 89 -

vale tener una definición clara si ésta contradice las costumbres locales.

El muestreo por áreas es especialmente apropiado para las zonasrurales, en que es posible que la única lista básica disponible sea un mapade toda la zona. Esta puede considerarse como un conjunto de pequeiasáreas que pueden ser seleccionadas al diseñar una muestra. Sin embargo,será preciso también definir detalladamente las pequeias áreas y ponerlasen mapas. Limites no identificables en los mapas han sido, y continúansiendo, una de las fuentes de sesgo más importantes en la selecci6n de lamuestra.

Si la población que va a ser encuestada es un subconjuntoexpecífico de la poblaci6n general, como los beneficiarios del proyecto, esposible que haya registros administrativos con una lista de dichosubconjunto. Sin embargo, una lista básica de este tipo deberá sercomprobada para ver si hay:

(a) errores de registro

(b) omisiones y

(c) duplicaciones.

Por los general, no existe una lista completa de las unidades queintegran la población. En tal caso, la lista básica del muestreo ha deestablecerse en etapas, dando lugar a un muestreo de etapas múltiples(véase la Sección 7.6 más adelante). Las listas de las divisionesadministrativas, demasiado extensas para considerarse unidades muestralesdefinitivas, podrán utilizarse para extraer una muestra primaria de dichasdivisiones. Se procede entonces a preparar listas para establecer la listabásica de las unidades muestrales secundarias dentro de las unidadesprimarias elegidas. Si es necesario, se puede introducir una tercera ocuarta etapa, estableciéndose lista básica de cada etapa específicaúnicamente de entre las unidades elegidas en la etapa anterior.

Estas decisiones sobre la elecci6n de la unidad muestral y lalista básica que se van a utilizar para la selección de las unidades setoman con frecuencia a la ligera, con el fin de comenzar rápidamente laencuesta. En consecuencia, se introducen sesgos que eliminan laposibilidad de lograr los objetivos de la encuesta, independientemente decuál fuere el tamaño de la muestra y el cuidado con que se realizare laobtenci6n de los datos. En países que no cuentan con mapas cadastrales,se ha solido encontrar (más tarde) que las muestras de pequelas áreas queutilizan mapas de enumeración censal producen estimaciones con sesgos delorden del 15 al 25 por ciento.

Los recursos a ser empleados para establecer una lista básica dela que extraer la muestra dependen, hasta cierto punto, de si ésta va a ser

- 90 -

utilizada para una encuesta expecífica concentrada en un solo tema, o bien

para una serie de encuestas realizadas a lo largo del tiempo, que cubra

muchos temas. En este iltimo caso, estará justificado dedicar un esfuerzo

considerable, mientras que, en el primer caso, existe un límite más allá de

cual la dedicaci6n de recursos adicionales logrará s6lo mejoras de menor

importancia en la lista básica que no se justifican.

7.3 Elecci6n del procedimiento de muestreo

Puede que no se requiera el empleo de procedimientos muestrales

para obtener parte de la informaci6n necesaria para el s9guimiento y la

evaluaci6n (sobre todo para el primero). Los registros de los insumos

suministrados, de los beneficiarios de éstos, de las obras en construcci6n,

etc. pueden estar completos y resumirse fácilmente. Aun cuando existan

registros completos, si éstos son numerosos y no están almacenados en

archivos computadorizados, el muestreo puede servir para facilitar la

presentaci6n de informes peri6dicos (tal vez semanales) sobre el progreso

logrado en la administración del proyecto.

Será necesario un muestreo para obtener datos sobre muchos de los

indicadores que se enumeran en la Parte 4. Un estudio de casos puede

considerarse un tipo de muestra, pero, como ya se ha expuesto

anteriormente, la investigaci6n detallada de un fen6meno particular puede

hacer necesaria que la selecci6n de los casos sea intencional para

representar el fen6meno en estudio. Cualquier intento por introducir una

selecci6n aleatoria con miras a conseguir una credibilidad muestral podría

debilitar lo que debiera ser el punto fuerte del estudio de casos, es

decir, el examen detallado de unidades representativas meticulosamente

elegidas. Existen otros procedimientos muestrales que, aunque no

satisfacen los requisitos estrictos de la aleatoriedad, podrían, no

obstante, producir conocimientos sobre la poblaci6n a mucho menos costo en

materia de tiempo y recursos que los requeridos para el muestreo

aleatorio. Las definiciones siguientes identifican la gama de

procedimientos existentes:

Una muestra aleatoria (o probabilística) es la selecci6n de un

número de elementos procedentes de una poblaci6n estadística de tal modo

que cada uno de los miembros de la poblaci6n tenga una probabilidad

conocida de ser elegido.

Una muestra aleatoria simple es aquélla en que cada miembro de la

población tiene igual probabilidad de ser elegido. En la Secci6n 7.6, más

adelante, se estudian otros diseios que mantienen el principio de la

aleatoriedad. La precisi6n de estos otros diseños muestrales se aprecia

comparándola con una muestra aleatoria simple como norma, pero ello no

quiere decir que ésta sea la muestra más eficaz de adoptar.

- 91 -

Una muestra dirigida (o intencional) es la selecci6n de un númerode elementos de una poblaci6n por una persona que escoge deliberadamentepara extraer una muestra que represente a la poblaci6n.

La intención de extraer inferencias numéricas sobre la poblaci6ntotal continúa existiendo (a diferencia del estudio de casos), pero laselección se hace subjetivamente, con el fin de reducir al mínimo loscostos de la identificaci6n de los elementos de la muestra o de dar alenumerador la máxima comodidad. Cabe esperar que la muestra sea losuficientemente representativa para los fines específicos que se persiguen,pero ásto no se sabrá con ningúun grado apreciable de precisi6n, es decir,la probabilidad de sesgo existe, pero su tamaño es desconocido.

Una muestra por cuotas es la selecci6n de un número de elementosde una población, de manera que un número dado de ellos caiga dentro decada uno de un conjunto definido de subgrupos de la poblaci6n, pero en quela elección de los elementos que han de constituir la muestra con respectoa cada subgrupo se hace a la discreci6n del enumerador.

El encargado de preparar una muestra vali5ndose de procedimientoscon selección dirigida o por cuotas debe conocer la gama completa deelementos que integran la poblaci6n y tratar de cubrirlos todos. Estoconstituye una importante mejora con respecto a las t5cnicas másrudimentarias de observaci6n rápida, en que el observador se limitasimplemente a desplazarse a lo largo de un camino específico en sus rondasde visita oficial a zonas determinadas de antemano. Si bien estasobservaciones son "intencionales" en cierto sentido de la palabra, no esprobable que los elementos encontrados valiéndose de dicho procedimientorepresenten todas las categorías de la poblaci6n objeto de estudio.

Según las circunstancias en que las unidades de seguimiento yevaluaci6n se vean envueltas, el muestreo dirigido o por cuotas puede serapropiado y aceptable. A continuación se exponen para su consideraci6n losejemplos siguientes:

(a) A.l analizar una posible ampliación de la zona del proyecto,se requiere determinar rápidamente la gama de sistemas decultivo existentes en la zona, pero no existe informaci6nsobre el tamaño de la poblaci6n ni se dispone de listabásica de los poblados.

(b) Una hip6tesis, que mantiene que la resistencia a adoptar elpaquete técnico propuesto por el proyecto está relacionadacon la situaci6n del agricultor respecto a la tenencia de latierra, ha de comprobarse, pero no existe ningún registro delos números de agricultores por cada régimen de tenencia.

- 92 -

(c) Las diferencias de rendimiento por tamaio de explotación

agrícola han de examinarse a la mayor brevedad posible; se

conocen las proporciones de explotaciones agrícolas en

ciertos grupos de tamaño por un censo anterior, pero no

existe ninguna lista de explotaciones individuales por

tamano.

Supongamos también que la encuesta ha de iniciarse inmediatamente

y no hay tiempo para establecer una lista básica, y que los recursos

disponibles son insuficientes para la localización de segmentos elegidos al

azar.

Ejemplo (a): El muestreo dirigido podría ser la única opción

viable. Se pueden seleccionar unas cuantas áreas pequeias con diferentes

condiciones climáticas o pedológicas. El sistema de cultivo de cada área

elegida se establece entrevistando a miembros destacados de la comunidad

local. Estas áreas habrán sido elegidas deliberadamente, con el fin de

representar la gama completa de sistemas de cultivo de toda la zona.

Aunque no hay garantías de que se haya logrado ese prop6sito, el resultado

será casi con toda seguridad más positivo que el que se hubiere obtenido

entrevistando s6lo a funcionarios del gobierno central, cuya alegación de

poseer conocimientos locales podría ponerse en duda, o bien utilizando

datos obtenidos de otra zona, o estimaciones nacionales que se supone

representan erróneamente las condiciones de la zona objeto de estudio.

Ejemplo (b): Un tipo de muestra por cuotas es posible. Los

regímenes de tenencia de la tierra pueden conocerse, pero no así el

relativo predominio de cada uno de ellos. Se puede asignar a los

enumeradores la tarea de localizar dentro de su área de operaci6n números

previamente definidos de agricultores en cada régimen de tenencia y hacer

una entrevista a cada agricultor. Deberá hacerse una previsi6n para cuando

un enumerador no pueda cubrir fácilmente su cuota para un régimen

particular. Tras efectuar ciertas indagaciones (como, por ejemplo,

preguntando a las autoridades locales, etc.), deberá permitíersele indicar

que ese régimen específico es raro o no existe en su área.

Ejemplo (c): Este permite una mayor precisión en la selección de

la muestra por cuotas. Puesto que se conoce el tamaio relativo de cada

grupo de tamafño, la cuota para cada tamaño puede variarse según el caso.

Cabe seialar, sin embargo, que no es necesario fijar la cuota en estricta

relaci6n con la proporción de la poblaci6n en cada grupo de tamaio. Un

grupo de tamaño que represente un número relativamente reducido de

explotaciones agrícolas (por ejemplo, explotaciones de un tamaño mayor de

diez hectáreas) podría tener, sin embargo, especial importancia, y

asignársele una cuota igual a la de un grupo de tamaio que contenga una

mayor proporción de las explotaciones agrícolas. Una vez más, el

enumerador puede elegir libremente los elementos que han de constituir la

muestra para cubrir sus cuotas lo mejor que pueda dentro de unas normas

precautorias generales.

- 93 -

En cada uno de estos casos, lo que se pretende es recopilarinformación a partir de una muestra, cuyos resultados van a tomarse pararepresentar a la poblaci6n. Las medias, intervalos o recorridos,relaciones y proporciones se calculan y serán consideradas comorepresentativas del valor para el grupo pertinente. En el caso del ejemplo(c), pueden hacerse incluso estimaciones de los totales para la poblaci6nal conocerse las fracciones muestrales. Lo que no se puede hacer escalcular los errores de muestreo de estas estimaciones y, por tanto,determinar sus límites de confianza estadística. En el caso del muestreopor cuotas, los errores de muestreo se calculan a veces partiendo delsupuesto de que los encuestados fueron elegidos al azar sin sesgo deselección, pero este supuesto no está normalmente justificado.

Esta pérdida de eficacia en la utilizaci6n de los resultadospuede que no preocupe indebidamente al usuario. Las vagas notaspreventivas que se adjuntan a los resultados, subrayando el tamafiodesconocido de los sesgos, podrían ser completamente aceptables; enrealidad, el recipiente podría sentirse satisfecho de tener, al menos, estenivel de cuantificaci6n del problema. Cabría observar que muchos informesde encuestas que utilizan muestras probabilísticas no mencionan los erroresde las estimaciones, agregadas o desagregadas, contenidas en ellos. Lascifras que aparecen en las casillas individuales de los cuadros declasificación múltiple se consideran como si fueran tan confiablés como lascifras totales. Esta práctica, que no es deseable, pone en evidencia lafalta de demanda de tales declaraciones de precisión por parte de muchosusuarios, frecuentemente como consecuencia de su desconocimiento de estasmaterias.

Las preguntas que se han de contestar al elegir un procedimientomuestral podrían formularse como sigue:

(a) ¿Se ha examinado si existe una lista básica o la posibilidadde establecerla?

(b) ¿Existe otra informaci6n, más agregada, sobre la población ysu distribuci6n? ¿Se puede utilizar?

(c) Si una aleatorización formal no es posible, ¿qué normas yprocedimientos podrán adoptarse para elegir las unidadesdefinitivas de la muestra que minimicen, al menos, losriesgos de sesgo?

(d) ¿Qué diseio será apropiado para extender la muestra lo másampliamente posible, teniendo en cuenta los recursos y eltiempo disponibles?

(e) Si se han recomendado métodos no aleatorios, ¿se ha hechosaber a los usuarios las limitaciones y riesgos asociados alos procesos de inferencia?

- 94 -

El valor de la informaci6n recibida sobre una poblaci6n depende,en primer lugar, de la exactitud con que se recogen los datos, comoresultado de la pericia, la diligencia y el cuidado puestos en las

operaciones de la encuesta, y, en segundo lugar, de la exactitud con quesaquen las inferencias de los datos. Uno y otro dependen del diseio de lamuestra. Uno de estos requisitos no debiera descuidarse en la fase deldiseio por concentrarse en el otro. El arte que debe demostrar el dise?ñode la encuesta es lograr el balance 6ptimo utilizando los recursoslimitados dados. Esto es aplicable, sobre todo, a las encuestas que serealizan en las zonas rurales, en que la insuficiencia de los conocimientosanteriores y las dificultades encontradas para medir las variables

principales no son la excepci6n, sino la regla.

7.4 Tamaio de la muestra requerido y precisi6n de la encuesta

El supuesto err6neo de que el tamaio de la muestra requerido o

deseado es un porcentaje del tamaño de la poblaci6n total continúa siendo

un mito sorprendentemente extendido. Según se informa frecuentemente, eltamaño de la muestra representa el uno por ciento, o el cinco por ciento,de la poblaci6n, como si fuere una declaraci6n necesaria para darcredibilidad a la muestra. O bien, una muestra mayor en una zona del

proyecto en relaci6n con la de otra se justifica diciendo que una zonacontiene una poblaci6n mayor que la otra.

Vale la pena declarar al principio que:

Si la poblaci6n total de la zona de la encuesta es muy grande, en

comparaci6n con la muestra que se va a elegir, la varianza y, por ende, laprecisi5n de las estimaciones calculadas a partir de los datos de lamuestra serán una funci6n del número absoluto de elementos en la muestra, y

no de la fracci6n muestral.

El tamafño de la muestra requerido es una funci6n de lavariabilidad de la característica medida y del grado de precisi6nrequerido. La variabilidad puede representarse de la forma más convenientepor el coeficiente de variación (V) igual a la desviaci6n típica de la

estimación partida por la estimaci6n (V = S/x).

La precisión requiere dos factores, D y K. D representa la mayor

diferencia aceptable entre el valor estimado a partir de la muestra y elvalor real de la poblaci6n. Se expresa también en forma relativa. .K es.la

medida de la confianza con la que se puede afirmar que el resultado que se

persigue está comprendido en el intervalo representado por + D. Cuantomayor sea el valor asignado a K, tanto mayor será el grado de confianza.Con frecuencia se elige un valor de K = 2, que representa un intervalo de

confianza del 95% (es decir, un grado de confianza igual a una probabilidadde 19 a 1).

- 95 -

Un valor de K = 1 representa un intervalo de confianza del 68%,es decir, una probabilidad de 2:1.

La f6rmula general será:

K2 V2

n =D2

donde n es el tamaño de la muestra requerido para tener un grado deconfianza K de que la estimaci6n obtenida mediante una muestra tomada deuna poblaci6n con variabilidad V estará comprendida dentro de un margen Ddel valor real de la poblaci6n.

Supóngase que la desviaci6n típica del rendimiento de una siegaparcial de cierto cultivo es igual a la mitad del rendimiento medio, o seaV =-0,5. Sup6ngase también que el usuario de la informaci6n se contentecon que la estimación obtenida mediante la muestra esté comprendida dentrodel 10 por ciento del valor real de la poblaci6n, o sea, D = 0,1. Portanto, el tamaio requerido de la muestra, n, es:

22 (0,5)2 4 x 0,25n = = = 100

(0,1)2 0,01

Lo que se afirma con esta computación es que, cuando se calculael promedio ¿Le una muestra de 100 siegas parciales (1) y su error demuestreo (E.M.), el resultado puede expresarse como sigue:

La probabilidad de que el promedio real de la poblaci6nesté comprendido en el intervalo x + 2 E.M. puedejustificadamente considerarse igual~a un 95% (o de19:1).

Por otra parte, el componente del intervalo, 2 E.M., dividido por i, serámás o menos igual a la diferencia aceptable, D, siempre que la estimaci6nanterior de 1 fuere razonablemente precisa.

Por consiguiente, el cálculo del tamaño requerido de la muestra,n, requiere tres insumos sobre los que habrá de consultarse con laadministraci5n del proyecto.

(a) La variabilidad de la característica a estimar en lapoblaci6n original. El usuario podría tener ciertoconocimiento de la misma obtenido de un estudio previo o deconocimientos generales.

- 96 -

(b) Una indicación del margen de error aceptable, D. En el casode ciertos estudios, éste podrá ser relativamente grande; enel de otras, muy pequeio.

(c) El grado de confianza (coeficiente de probabilidad) con queél desea encontrarse en dicho intervalo.

Obsérvese que a medida que aumentan K y/o V, n disminuye en

funci6n de K2 y/o y2. Por consiguiente, si una característica tiene un

coeficiente de variación dos veces mayor que otro, n tendrá que ser 4 veces

mayor para el mismo nivel de precisión. Ocurre lo mismo con la precisi6n

requerida, D. D2 es el denominador. En el ejemplo anterior, D era igual a

0,1, D2 a 0,01, y el dividir por D2 equivalía a multiplicar por 100. Si D

se divide por dos, es decir, igual a 0,05, D2 será 0,0025, y el dividir por

D2 equivale a multiplicar por 400, o sea, 4 veces la cifra anterior de

100. Por lo tanto, si D se divide por 2, el tamaio de la muestra será 4

veces mayor. Reducir D por un factor g exige que el tamaño de la muestrasea aumentado por un factor g2 .

Como otro ejemplo, consideremos un proyecto que cubre unaprovincia grande que comprende seis zonas o distritos. Supongamos que se

desea medir los rendimientos de los cultivos sobre la base de losrendimientos de siegas parciales de cultivos, de manera que la estimaci6npara cada zona esti comprendida dentro del 81 del valor real con un

coeficiente de confianza del 95%, y que se exija que la estimaci6n para la

provincia en conjunto esti comprendida dentro del 5% del valor real con un

coeficiente de confianza del 95%. Se podrá suponer que el coeficiente de

variaci6n del rendimiento dentro de una zona es de 0,5, pero, a nivel

provincial, es relativamente más alto, es decir, de 0,7.

En tal caso, la muestra requerida a nivel de zona vendrá dada por

la fórmula:

22 (0,5)2 1nz = = - = 160 aprox.

(0,08)2 0,0064

mientras que a nivel provincial será:

22 (0,7)2 4 x 0,49n = = = 780 aprox.S (0,05)2 0,0025

Si el tamaio de la muestra dentro de cada una de las seis zonas

es 160, la precisión requerida para el nivel provincial se habrá

sobrepasado.

- 97 -

En un tercer ejemplo tenemos que estimar una proporción, p, de lapoblación que posee una determinada característica, por ejemplo, laproporción que adopta un insumo del proyecto. El error de muestreo en la

p(1 -p)estimación de p es aproximadamente igual a , en que el valor p

nestá comprendido en el intervalo 0-1. Por tanto, dados un error demuestreo y un valor supuesto de p, se podrá calcular el tamaño de lamuestra requerido.

Si se espera que el valor de p sea de aproximadamente 0,5 y elerror de muestreo aceptable de 0,05, se tendrá, pues:

0,5 x 0,5n =100

(0,05)2

Como el numerador de la estimación del error de muestreo esp (1 - p), el error absoluto para p = 0,95 será el mismo que el errorestimado para p = 0,05 para el mismo tamaño de muestra. El valor máximodel error absoluto se da cuando p = 0,5 y no varía mucho en el intervalo dep = 0,25 a p = 0,75. El error relativo (o coeficiente de variación).es,desde luego, mucho mayor para el valor p = 0,05 que para el de p = 0,95,aun cuando el error absoluto sea el mismo. Es precisamente este errorrelativo el que frecuentemente tiene más importancia para los efectosprácticos.

Es preciso hacer tres comentarios a propósito de los ejemplos detanaños de muestras qué acabamos de ver:

(a) Se ha supuesto un muestreo aleatorio simple. Puedeconseguirse una mayor eficiencia empleando técnicas dedisefio de muestras como la estratificación, o una menoreficiencia con otras, como la aglomeración (ambas se veránmás adelante).

El tamafio de la muestra puede ser pequefio para unaestimación determinada respecto a un área geográfica dada.Pero si se requieren estimaciones para casillas individualesde una clasificación múltiple de dos o más variables, o parasubáreas dentro del área primaria, los tañafios muestralestotales requeridos para mantener un nivel dado de precisióna dichos niveles desagregados serán mayores que losrequeridos para el área primaria. Por lo general, cuando sepretende preparar clasificaciones múltiples minuciosas decualquier tipo, el número de casillas (o sub-clasificacionescruzadas) aumenta rápidamente y el número de datos en lasmismas se hace más pequeño. Una indicación aproximada del

- 98 -

tamaño de la muestra requerido, cuando los datos en lastablas son recuentos, puede calcularse de la formasiguiente:Una estimaci6n aproximada del error de muestreo del

recuento que aparece en una casilla de una tabla es su raízcuadrada. Supongamos que se desea que la estimaci6n paratodos los grupos que representan, por lo menos, el cinco por

ciento de la población, tenga un error de muestreo relativomáximo (que en el contexto de una muestra es equivalente a V,según se describió anteriormente) de 0,2. Pór tanto, si el

recuento de unidades de la muestra en la casillacorrespondiente se designa Y, se requeriría que:

--- < 0,2

Y

0 sea, el valor de Y deberá ser, al menos, 25. Si estegrupo representa el cinco por ciento de la poblaci6n,constituirá también aproximadamente el cinco por ciento dela muestra.Por tanto, el tamaio de la muestra será:

25= 500.

0,05

(c) El usuario determina la precisi6n requerida en la

estimaci6n. En el cálculo efectuado anteriormente sobre eltamaio, se ha supuesto que el único error involucrado es el

error de muestreo. Este supuesto no es válido en lapráctica y más adelante, en el apartado 7.5, nos ocuparemoscon más detalle de sus consecuencias.

Una gran parte del análisis efectuado para fines de seguimiento y

evaluaci6n tiene que ver con la significaci6n de las diferencias observadas

en dos o varios intervalos de tiempo. La medici6n de una variable en

distintos momentos dados plantea una serie de interrogantes:

(a) ¿Con que frecuencia deberán efectuarse las mediciones?

(b) ¿Deberá continuarse utilizando las mismas unidades muestralesa lo largo del tiempo?

(c) ¿Pueden utilizarse los datos anteriores para mejorarse laestimaci6n actual?

- 99 -

Un estudio completo de estas cuestiones exige una exposicióndetallada más allá del alcance de este Manual. Con todo, se pueden daralgunas recomendaciones al respecto.

Sería demasiado ambicioso tratar de medir cambios relativamentepequeños entre una estación o año y el siguiente. Ciertos factoresexternos, como el clima, producen grandes variaciones a corto plazo quepueden ocultar durante algún tiempo la tendencia generada o influida por elproyecto. Una serie cronológica con una base de referencia anterior a laimplantación del proyecto, mediciones repetidas durante la ejecuci6n delmismo, una medición a la terminaci6n del proyecto y una medici6n posteriorconstituyen la mejor base posible.

La decisión sobre si continuar utilizando o no las mismasunidades muestrales a lo largo del tiempo depende en parte de lasdificultades prácticas que se tengan para mantener la misma muestra.Depende también de si se pretende maximizar la precisi6n de lasestimaciones más recientes o la precisi6n de las estimaciones del cambio alo largo del tiempo. Los mejores procedimientos a seguir para el logro deestos dos objetivos son diferentes, pero en la mayoría de los sistemas deinformaci6n sobre proyectos se hará mayor hincapié en el segundo objetivo.

Si dos series de observaciones no están correlacionadas, lavarianza de sus diferencias será igual a la suma de las dos varianzas.Esta misma regla se puede aplicar también a la comparaci6n de las medias delas muestras. Si dos series de observaciones están positivamentecorrelacionadas, el error muestral de una estimaci6n de la diferencia entreellas es reducido por un factor que incluye (1 - r), en que r es elcoeficiente de correlaci6n. Cuanto mayor sea el valor de r, tanto mayorserá la reducci6n. Por lo tanto, cuando se mide un cambio, es convenienteelegir un procedimiento que maximice dicha reducci6n. Por &sto,normalmente se recomienda el mantenimiento de las mismas unidadesmuestrales, ya que las mediciones de la misma variable en las mismasunidades muestrales en diversos momentos suelen estar altamentecorrelacionadas.

Suele ser posible mantener una alta proporci6n de los mismosagricultores en una muestra a lo largo del período del proyecto para medirel cambio. Pero, si la encuesta incluye una alta frecuencia de visitas alos encuestados, la interacci6n constante entre el enumerador y elencuestado influye en el comportamiento del encuestado, de manera que nocontinúa siendo ya un miembro típico de la poblaci6n que él, en su calidadde unidad muestral, se supone que representa. Y lo que es más, deberátambién tenerse presente que no debe exigirse demasiado de la buenavoluntad de un individuo a lo largo de un prolongado y continuo período detiempo. (En la Parte 3 se ofrece un examen más detallado de estospuntos). Por estas razones, será normalmente necesario rotar o sustituir alos miembros de la muestra original, si bien las unidades muestrales

- 100 -

primarias por áreas de un diseio de muestra en etapas múltiples debieran

mantenerse durante todo el tiempo que sea posible. Esta rotaci6n de la

muestra permite establecer un eslabonamiento, ya que la muestra para dos

períodos consecutivos cualesquiera contendrá una cierta proporción de

unidades comunes. El efecto de las nuevas unidades muestrales se dispersa,

por así decirlo, a lo largo de un período de tiempo prolongado, reduciendo

así el trastorno en la línea de tendencia cronológica que constituye el

principal parámetro. Por regla general, la sustitución o rotaci6n de

aproximadamente una cuarta a una tercera parte de la muestra en cada ronda

de una muestra parece dar un resultado relativamente bueno.

Aparte de esa rotación planificada, habrá una reducci6n

inevitable por causa de defunciones, migración o cambios en la composici6n

de los hogares que tendrán como resultado la división o agregaci6n de las

unidades originales.

7.5 Componentes del error de la encuesta

Las declaraciones sobre la precisión de las estimaciones

muestrales parten del supuesto de que los valores observados son exactos;

el único error a tener en cuenta serie el error muestral. Por esta raz6n,

en los informes sobre resultados de encuestas se suele expresar los

márgenes de error (si es que realmente se mencionan en estos términos. Sin

embargo, la medici6n de variables tales como la producci6n o el ingreso de

los agricultores a nivel de semisubsistencia crea graves problemas de

entrevista y de medici6n, según se vio en la Parte 4.

Incluso las mediciones objetivas, como los rendimientos de siegas

parciales de cultivos, pueden estar expuestas a errores significativos, a

menos que las técnicas empleadas estén bien diseñadas y controladas con

cierto rigor. Los errores en las contestaciones a las preguntas se

producen por la resistencia a revelar la verdadera respuesta, la falta de

comprensi6n de la pregunta, el desconocimiento de la respuesta en términos

cuantitativos, el deseo de complacer dando una contestaci6n que se supone

es favorable, las imprecisiones por falla de memoria y muchos otros

factores. A diferencia del error de muestreo, éstos no son de carácter

aleatorio. Estos errores tienden a introducir un sesgo en las estimaciones

en una dirección, y seria mucha suerte si dos componentes de estos errores

actúan en diferentes direcciones y se compensan mutuamente.

La única manera prudente de proceder es esperar importantes

sesgos, que quizás superen con creces los errores de muestreo.

El efecto puede resumirse en la siguiente ecuacion:

Error cuadrático medio = varianza muestral + cuadrado del sesgo.1 /

La prueba que se puede encontrar en libros de texto de estadística

avanzada no se ofrece aquí.

- 101 -

Cuando un usuario establece el margen de error que desea tenganlas estimaciones sacadas de una muestra, es la raiz cuadrada del errorcuadrático medio (RECM) en la que se piensa. La consideración de laposible relaci6n entre la varianza muestral, en función del tamafño de lamuestra, y el tamafño del sesgo ayuda a investigar la forma en que se podríaminimizar la RECM. La experiencia adquirida en la medición de indicadoresrurales ha demostrado que los sesgos pueden controlarse si se adiestra ysupervisa el equipo de enumeradores con gran cuidado. Este controlriguroso de calidad suele darse Gnicamente cuando el equipo de enumeradoreses de tamañlo reducido. Sin embargo, un equipo pequefio limita el tamafio dela muestra que puede ser enumerada. El aumento del tamaio de la muestramás allá de un nivel crítico podría afectar negativamente el control decalidad, incrementando así los errores no muestrales. Este aumentocontrarrestaría con creces la reducción del error de muestreo debido almayor tamafño de la muestra. Por desgracia, los sesgos correspondientes adistintos tamaños de equipos de enumeradores no pueden preversefácilmente. No es posible determinar con precisi6n el equilibrio 6ptimoentre el tamaño de la muestra y la calidad de los datos. Sin embargo, laexperiencia recomienda algunas directrices generales.

Uno de los ejemplos que se citó en el Apartado 7.4 indicaba queuna muestra de 780 encuestados arrojaría una diferencia máxima del 5%, querepresentaría un error de muestreo de aproximadamente el 2,5%. Si cadaenumerador puede entrevistar a 20 encuestados, se requerirá un equipo de 39enumeradores, complementado por unos 8 supervisores. Y si la muestra seduplica, es decir, es de 1.560 encuestados, se reduciría el error demuestreo de 2,5% a aproximadamente 1,8%, pero entonces el equipo deenumeradores requerido aumentaría a 78 y el de supervisores a 16. Pero si,como es posible que ocurra, no hay disponible un equipo de supervisorescompetentes de esa magnitud, la consiguiente pérdida de control sobre lacalidad podría originar aumentos de los sesgos, lo que a su vez daría lugara un aumento general de la RECM. La duplicación del tamafño de la muestrapodría, por tanto, dar lugar a una estimación menos precisa. Cabe seialarque la duplicación del tamafño de la muestra no siempre exige también unaduplicaci6n del equipo de enumeradores. Alternativamente, podríaprolongarse el período de duración de la encuesta.

Los resultados obtenidos en encuestas sobre rendimientos mediantesiegas parciales de cultivos en la India revelan que, si son realizadascuidadosamente por enumeradores competentes, utilizando un tamafño apropiadode area a segar, el sesgo en la estimación resultante puede reducirse amenos del 5%. Sin embargo, si dichas encuestas se realizandeficientemente, se producirían sobreestimaciones de los rendimientos delorden del 10 al 15 por ciento, y más. Sup6ngase que la unidad deseguimiento y evaluación puede asignar un número suficiente de personalcompetente para llevar a cabo solamente 200 siegas parciales de cultivos, yque el error estándar de esta muestra es del 10% con un sesgo del 4%. La

- 102 -

RECM vendrá dado entonces por la f6rmula:

RECM = 102 2

= 10,8% aprox.

Si se deseara reducir el error estándar al 5%, el tamaio de la muestra

tendría que aumentarse a 800. Pero, a este nivel, se pierde el control de

la calidad y los sesgos aumentan, digamos, al 10%. Por lo tanto,

tendremos:RECM = ¡52 + 102

= 11,2% aprox.

La cuadruplicaci6n de la muestra ha reducido la precisi6n de la estimaci6n.

Por consiguiente, se recomienda que, cuando se trata de variables

sometidas a grandes sesgos en las respuestas u observaciones, los cuales

pueden únicamente reducirse mediante entrevistas exhaustivas o mediciones

cuidadosamente supervisadas, la siguiente consigna sobre los tamalos de las

muestras parece apropiada:

Lo pequeio puede ser mejor

El efecto que tiene el sesgo sobre las estimaciones de los

cambios a lo largo del tiempo es bastante diferente. Si el sesgo es

constante a lo largo del tiempo, la raiz cuadrada del error cuadrático

medio (RECM) de la diferencia entre dos observaciones en diferentes

momentos no estará relativamente afectada por el mismo. En tal caso, una

estimaci6n sesgada sacada de una muestra grande, repetida a lo largo del

tiempo, podría resultar más eficaz para detectar cambios que una estimación

insesgada tomada de una muestra pequeia con un error estándar mayor. Sin

embargo, como ya se ha visto en la Parte 4, es posible que el sesgo no sea

constante a lo largo del tiempo.

7.6 Opciones útiles para el diseio de muestras

Hasta aquí, el estudio del error de muestreo se ha presentado

dentro del contexto del muestreo aleatorio simple. Existen otras opciones

al alcance del diseiador de muestras para adaptar los principios

considerados, dada una lista básica de la que sacar la muestra. Algunas de

ellas mejoran la precisi6n de las estimaciones correspondientes a un tamaño

de muestra dado; otras hacen más viable la ejecución de la encuesta a

expensas de aumentar el error de muestreo. El refinamiento del diseio de

la muestra puede llegar a ser excesivo. En el contexto del desarrollo

rural, es probable que la lista básica sea inadecuada, la experiencia

cartográfica limitada y los enumeradores inexpertos. Cuánto más complejo o

- 103 -

complicado sea el diseEo, tanto más probable será que se introduzcan sesgosgrandes debido a errores en la identificaci6n de la muestra. No obstante,y dentro de ciertos límites, deberán tenerse presentes las siguientesopciones:

(a) estratificación(b) muestreo sistemático(c) muestreo en etapas múltiples y por conglomerados(d) muestras autoponderadas, y(e) muestras interpenetrantes.

(a) Estratificación

Puede utilizarse la informaci6n disponible sobre cada unidad quefigura en la lista básica para dividir las unidades en grupos según lacaracterística estudiada, de suerte que cada grupo de unidades internamentemás homogéneo que la población total. Si se saca entonces una muestradistinta de cada grupo, se obtiene una muestra estratificada, en la quecada grupo constituye un estrato. Así, en el ejemplo que se da en elApartado 7.4 de seis zonas dentro de una provincia, las zonas podríanconsiderarse estratos, de los que se sacan una muestra.

Las estimaciones de las medias muestrales, los totalesmuestrales, etc. se obtienen de las estimaciones de los estratosindividuales. La varianza de la estimación total es la suma de lasvarianzas de los estratos individuales: la varianza entre estratos nocontribuye al error de muestreo. Por tanto, la precisi6n de la estimaci6ngeneral para un tamañio de muestra dado puede mejorarse considerablemente sipueden formarse distintos estratos de unidades relativamente homogéneas. Obien, podría obtenerse el mismo nivel de precisi6n que el de una muestraaleatoria simple utilizando una muestra más pequeña.

Esto ocurre de la forma siguiente:

i-ésimo: Sup6ngase que xij es la observación j-¡sima en el estrato

xj, =media del valor xij en el estrato i-ésimo.

x,, = media del valor xij en todos los estratos.

La varianza no estratificada puede considerarse un múltiplo deEE (xij - y.')2

La varianza estratificada puede considerarse un múltiplo deEE(x,j - ,. )2,

de donde, EE(xij - S)2 = EE(xij - ¡E¡ ) + ('i, - Si.)]2

- 104 -

Según puede observarse, el desarrollo indicado contiene la varianza

estratificada como un solo componente. La varianza entre los estratos

indicada por (i. - y..) está comprendida en la varianza no

estratificada, pero no está incluida en la varianza estratificada.

Entre los puntos que deben considerarse para diseiar una muestra

estratificada se pueden citar los siguientes:

1 . Deberá obtenerse una muestra de cada uno de los estratos, de

lo contrario no se podrá obtener ninguna estimaci6n global de

la poblaci6n.

2 . Para calcular una varianza deberá haber, al menos, 2

unidades en cada estrato.

3 . Poco se logrará si la mayor parte de los estratos son

razonablemente homogáneos pero hay uno, por lo menos, que

presenta variaciones muy amplias; la contribución a la

varianza total por parte del único "punto débil" podría ser

tan grande como la suma de las contribuciones de todos los

otros estratos. Esta es la raz6n de que, si hay un estrato

abierto (véase el ejemplo más adelante), éste requiera

habitualmente una fracción de muestreo mucho mayor.

Una estratificaci6n efectiva constituye el método más eficaz para

mejorar la precisión. El riesgo asociado a su utilizaci6n es muy bajo.

Aun cuando la estratificaci6n no logre obtener estratos tan homog6neos como

era de esperar, se obtendrán ciertos beneficios. De todos modos, la

mayoría de las estratificaciones que se efectúan en los proyectos de

desarrollo agrícola y rural dividen la población en clases o grupos que

serán útiles al estudio, aparte del aumento que pudieran suponer en la

precisión.

La informaci6n utilizada como base para estratificar la poblaci6n

deberá estar relacionada con las variables que se van a medir. Si la

encuesta cubrirá múltiples temas, la estratificación en función de una

característica podría ser deseable para mejorar la estimaci6n de ciertas

variables, pero podría contribuir poco a mejorar la estimaci6n de otras.

El criterio para justificar la estratificación en dicho caso será el

mejorar la estimación de las variables más importantes. La estratificación

más corriente es por subdivisiones geográficas, en el supuesto de que las

unidades que se encuentran en una misma zona geográfica presentan cierta

homogeneidad.

Los registros administrativos pueden enumerar a los recipientes,

digamos, de crédito con una indicación de la cuantía recibida. Una

encuesta por muestreo que investiga la utilizaci6n de crédito se

beneficiaría evidentemente de la estratificaci6n basada en esta

- 105 -

información. Las encuestas sobre explotaciones agrícolas se beneficiaríanmucho de la estratificación.por tipo o tamaño de la explotaci6n, si (ydesafortunadamente, ésto sería mucho pedir) la lista básica contiene estainformaci6n. . La estratificación por tipo de suelo es también unaposibilidad atractiva, pero si para ello se tuviera que agruparsubdivisiones geográficas situadas en diferentes divisionesadministrativas, surgirán complicaciones a la hora de controlar el trabajode terreno.

No es preciso mantener una fracción de muestreo constante paracada estrato. Para calcular la proporci6n 6ptima de la muestra asignada acada estrato se requiere un conocimiento de las varianzas dentro de cadaestrato. Estas no suelen conocerse con exactitud., pero podría suponerse unmodelo de varianzas relativas en función de la informaci6n generaldisponible.

Considérese el siguiente ejemplo de estratos constituidos portamaño de explotaci6n:

Cuadro 2: Número de explotaciones agrícolas por tamaño de explotaci6n

TAMAÑO (Hectáreas)

ESTRATO O - 1 1 - 3 3 - 5 5 - 10 10 - 50 50 +

NO. DEEXPLOT. AGR. 5.000 7.000 2.000 700 200 100

Sup5ngase que de las 15.000 explotaciones agrícolas se desean elegir 600.Una muestra fija del 4 por ciento de cada estrato escogerá sólo 8 y 4explotaciones en los estratos que contienen las explotaciones de mayortamaio. Pero estos estratos, sobre todo el último que es abierto,mostrarán grandes variaciones en el tamafño de la explotaci6n, laproducci6n, etc. Una muestra más eficaz puede obtenerse eligiendo 100explotaciones de cada estrato. Esto significa que la fracción de muestreovaría de 1/70 en el segundo estrato a 1 en el último estrato, es decir,todas las grandes explotaciones están incluidas.

En cierto sentido, este tal vez sea un diseño eficaz de lamuestra, pero habrá de buscarse un compromiso entre los beneficios de lareducción del error y la mayor complicaci6n del cálculo de las estimaciones

- 106 -

y sus varianzas. La muestra no es autoponderada en todos los estratos, es

decir, las probabilidades de ser elegida no son las mismas para todas las

unidades que componen la poblaci6n. (Véase la secci6n dedicada a las

muestras autoponderadas más abajo). La determinaci6n de las fracciones de

muestreo 6ptimas para cada estrato depende, naturalmente, de la varianza

relativa dentro de cada estrato. Incluso una determinaci6n práctica, como

la del ejemplo dado, podría resultar beneficiosa.

Es posible que se conozcan las proporciones de la poblaci6n en un

número de estratos potenciales, pero puede que no exista una lista básica

de unidades individuales con la informaci6n requerida para'asignarlas al

estrato correcto. La estratificaci6n posterior, según la que las unidades

muestrales se asignan a los estratos después de recogidos los datos, puede

resultar útil. Cabe sefñalar que deberán conocerse las ponderaciones que se

han de asignar a cada estrato. En tanto que el número de unidades

muestrales de cada estrato sea razonable (más de 30, es lo que suele

aconsejarse), este procedimiento permite obtener algunos de los beneficios

de la estratificación ordinaria.

(b) Muestreo sistemático

Si las unidades de la poblaci6n a estudiar están concentradas

dentro de un área limitada, como, por ejemplo, los agricultores situados

aguas abajo de una pequeia presa, y todos pueden ser entrevistados a un

costo mínimo, se podría seleccionar directamente una muestra de

encuestados, sin ninguna etapa intermedia. El muestreo de registros

administrativos es un ejemplo específico del muestreo en una etapa. Si los

registros están contenidos en archivos y cualquier registro particular

puede localizarse fácilmente, la muestra puede sacarse sistemáticamente de

los archivos.

Consideremos, por ejemplo, el archivo de un banco de crédito que

contiene los nombres de los recipientes de crédito y las cuantías de

crédito otorgadas. El examen de una muestra de registros de recipientes

bastará con frecuencia para verificar la distribuci6n del crédito por

recipiente. La selección sistemática consiste en el procedimiento

siguiente. Si de 6.000 registros se va a escoger una muestra de 400 (o

sea, uno de cada quince), se determina la primera unidad muestral eligiendo

un número aleatorio entre el 1 y el 15. Las unidades siguientes se

seleccionan de una forma sistemática afiadiendo 15 al número aleatorio

inicial.

En el caso general:

N

Calcúlese - en donde N = número total de registros

nn = número requerido en la muestra.

- 107 -

Selecci6nese un número aleatorio r entre 1 y n.N 2N

L a s u n i d a d e s m u e s t r a l e s s e r á n , p u e s , r , r + - , r + - - . . . . . . . ,(n-1)N n n

r + -.n

Una muestra sistemática puede considerarse equivalente a unamuestra aleatoria simple si los registros se almacenan en un orden que noesté relacionado con la variable que se va a medir; por ejemplo, archivadosen orden alfabético por beneficiario (no es probable que la cuantía delcrédito esté determinada por la letra inicial del apellido de unbeneficiario). Sin embargo, si el archivo está ordenado según la cuantíadel crédito otorgado, el muestreo sistemático será mejor que el muestreoaleatorio simple y casi tomará la forma de un muestreo estratificado. Elriesgo principal del muestreo sistemático estriba en que el archivo dedatos tenga una periodicidad que está en cierta manera relacionada con elintervalo muestral; en tal caso, una muestra sistemática será sesgada.

El riesgo es bajo en la mayoría de las aplicaciones prácticas, pero habráde comprobarse.

(c) Muestreo en etapas múltiples y por conglomerados

Con frecuencia, la única lista básica dLe que se dispone paraseleccionar hogares o beneficiarios individuales es un registro del númerode estas unidades contenidas en cada una de las subdivisiones territorialesdel proyecto. En este caso, bastará una muestra en dos etapas. Lasunidades muestrales de la primera etapa (unidades primarias o de primerorden) son las subdivisiones territoriales del área del proyecto. Una vezelegido un número de éstas, se recopila localmente una lista de lasunidades individuales pertinentes en cada una de las unidades primariaselegidas. En esta segunda etapa se extrae una muestra de las unidadesmuestrales definitivas de cada una de dichas listas (unidades secundarias ode segundo orden).

Se puede continuar el proceso introduciendo más etapas. Launidad primaria para medir el rendimiento de cultivos mediante siegasparciales puede ser un distrito; la unidad secundaria, una subdivisi6n dedistrito dentro de los distritos seleccionados; la tercera etapa, camposdentro de los subdistritos elegidos, y la etapa final, pequeños segmentosdentro de los campos elegidos. Sin embargo, cad. etapa adicional, en laque se requiere la intervenci6n local para identificar y enumerar lasunidades necesarias para proceder a la siguiente etapa, aumenta el riesgode que algo vaya a funcionar mal.

- 108 -

La utilización de áreas geográficas como unidades primarias se

denomina muestreo por conglomerados. Este y la estratificaci6n constituyen

las opciones más corrientes del diseño de una muestra.

Una muestra conglomerada brinda ciertos beneficios--las unidades

definitivas han de enumerarse únicamente en los conglomerados seleccionados

y las unidades muestrales secundarias (por ejemplo, hogares) dentro de un

conglomerado se agruparán más cerca entre sí que una muestra aleatoria

simple de unidades extraídas de la población total. Esto reduce el costo

de la identificación de las unidades de la muestra y los viajes del

enumerador para trasladarse de un' encuestado a otro. Sin embargo, las

unidades existentes en un mismo conglomerado pueden ser semejantes en

cuanto a las características estudiadas, de manera que la contribución, en

lo que se refiere a mejorar la precisión de la estimación, derivada de

incluir una unidad muestral adicional dentro de un conglomerado es mucho

menor que la representada por una unidad adicional no incluida en un

conglomerado. Por lo tanto, una muestra de n unidades constituida por un

conjunto de mi unidades contenidas en i conglomerados es menos eficaz que

una muestra simple de n unidades dispersas al azar en la población. En

teoría, se podrían formar conglomerados que contuvieran unidades

heterogéneas, pero éstos no serían necesariamente áreas geográficas de

tamaño pequeio, perdiéndose así la razón principal para adoptar dicho

enfoque.

Para estudiar el costo del muestreo por conglomerado en términos

de pérdida de eficacia para un tamañio de muestra dado, es necesario

introducir el concepto de correlación intraclásica. Esta sirve para medir

el grado en que las unidades contenidas en un conglomerado son más

semejantes entre sí que las unidades contenidas en conglomerados

diferentes. Se define como:

a2b (a2/M)

(M-1) (a2/M)

en que 02b= varianza entre conglomerados

a 2 = varianza total

M = número de unidades en un conglomerado.

Si M es grande, una aproximación a 6 viene dada por a2b /a2 , o

sea, la raz6n entre la varianza entre conglomerados y la varianza total.

- 109 -

La eficiencia relativa de una muestra aleatoria simple comparadacon una muestra por conglomerados viene dada por:

z = 1 + 6( - 1)

en donde z.indica cuántas veces mayor tiene que ser una muestrapor conglomerados que una muestra aleatoria simple para generar la mismaprecisi5n y"g es el número promedio de unidades elegidas dentro de unconglomerado.

De esta expresi6n se deduce claramente que el valor 1 tendrá quemantenerse pequeio si 6 es positivo y grande; de lo contrario, seproducirá una pérdida grave de eficacia.

Por ejemplo, si 6 = 0,1 y I = 20

z = 2,9

o sea, que una muestra por conglomerados tendrá que ser casi tres veces másgrande que una muestra aleatoria simple para obtenerse la misma precisi6n.

La diferencia entre la estratificaci6n y la conglomeraci6naparece ahora clara. Con una muestra estratificada, la varianza entre losestratos se excluye del cálculo 1/ del error muestral, mientras que con lasmuestras conglomeradas la varianza entre los conglomerados puede contribuirde forma significativa a la varianza total. Por lo tanto, con laestratificación, el fin que se persigue es maximizar la homogeneidad dentrode los estratos, pero con el muestreo por conglomerados de la homogeneidaddentro de los conglomerados reduce la eficacia de la muestra. Cuando seelige un diseno de muestra estratificada y conglomera.da, las ganancias deprecisión obtenidas por la estratificación son disipadas, por así decirlo,por la pérdida de precisión producida por la conglomeraci6n. Un compromisorazonable podría ser buscar un resultado final aoroximadamente equivalenteal de una muestra aleatoria simple del mismo tamaño.

En la Secci6n 7.4 se demuestra que los tamaños de muestrasrequeridos para lograr niveles medianos de preci¡3i6n no han de ser muygrandes, por muy grande que sea la zona del proyecto. El efecto negativode la conglomeración estriba en que, dependiendo de la variable que semide, podría requerirse una muestra varias veces más grande que las que secitan en la Secci6n 7.4 para el mismo nivel de precisi6n.

La prueba del mismo, que se puede encontrar en un libro de texto deestadística avanzada, no se ofrece aquí.

- 110 -

No es probable que se conozca 6 antes de realizar la encuesta.

Partiendo del supuesto seguro de que para muchas variables agrícolas será

positivo, una regla general sería que m deberá ser menor de diez.

Un diseñio de muestra conglomerada requiere una lista de todas las

unidades dentro de los conglomerados elegidos para seleccionar las unidades

muestrales de segunda etapa. En el caso de requerirse urgentemente una o

dos estimaciones de atributos simples de una poblaci6n objetivo, por

ejemplo la tasa de aceptaci6n de una determinada innovaci6n técnica para la

campaña en curso, podría resultar econ6mico omitir la etapa de preparaci6n

de listas y hacer entrevistas breves a todas las unidades contenidas en el

conglomerado.

El número de unidades elegidas dentro de un conglomerado es

también mayor que el indicado anteriormente, cuando se destina un

enumerador por conglomerado y se desea darle un volumen de trabajo

completo.

En el caso de una encuesta sobre el acceso a-servicios públicos

esenciales, la correlaci6n intraclásica puede ser tan alta que 3-6

entrevistas por conglomerado bastarían, y poco se ganaría con añadir

entrevistas adicionales. En el caso extremo, existen ciertas preguntas que

se podrían hacer a un solo dirigiente comunitario y sus respuestas

describirían todo el conglomerado; por ejemplo, el número de clínicas,

escuelas, bebederos, etc. No tendría sentido hacer esas preguntas a

distintos individuales, aunque se sabe que ésto ha ocurrido.

Un procedimiento corriente de muestreo estratificado por

conglomerados en las encuestas agrícolas es el siguiente. La region se

estratifica en divisiones administrativs y agrícolas racionales. Por

ejemplo, una zona de proyecto podría dividirse en divisiones

administrativas principales y en subdivisiones sucesivas, en cuanto sea

necesario, en funci6n de los sistemas de cultivo. De esta forma, se

podrían obtener entre 10 y 20 estratos. De cada uno de éstos se sacará una

lista de conglomerados claramente delimitados, que podrían ser

circunscripciones censales o poblados. Las listas básicas correspondientes

a cada estrato deberán ser completas y los conglomerados individuales,identificables.

Se saca una muestra de estos conglomerados dentro de cada

estrato. Como ya se ha mencionado, el plan de muestreo para cada estrato

puede ser un método aleatorio simple con la misma fracci6n de muestreo para

todos los estratos, o bien puede ser más complicado. Sin embargo, deberá

extraerse una muestra de conglomerados de cada estrato individual.

Unicamente los conglomerados seleccionados se incluyen en la

muestra. Estos se identifican en el terreno y las unidades de muestreo

definitivas se seleccionan mediante uno de los métodos indicados

anteriormente.

(d) Muestras autoponderadas

Si cada unidad que compone la población tiene una mismaprobabilidad de ser incluida en la muestra, la estimación de la muestra sehace para que corresponda a la población total multiplicándola por el valorrecíproco de la fracción de muestreo. Si las unidades muestralesprimarias, con números diferentes de unidades de población dentro de lasmismas, se seleccionan en la primera etapa, dicha fracción de muestreoconstante autoponderada podrá obtenerse si las probabilidades de selecciónen cada etapa se elijen teniendo ásto presente.

Un método corriente consiste en seleccionar las unidadesprimarias con una probabilidad proporcional a su participación relativa enel número total de unidades en la población, y después seleccionar lasunidades de segunda etapa de cada unidad primaria elegida anteriormenteutilizando una tasa proporcional al valor recíproco del tamaño de la unidadprimaria. De esta manera, la probabilidad de cada unidad de ser elegida esla misma, independientemente de cuál sea la unidad primaria a la quepertenece--la autoponderación se ha logrado.

De este modo, se mantiene la simplicidad del tratamiento de losdatos.de la muestra respecto a la ponderación. Si se dispone de equipoelectrónico de elaboración de datos, la asignación de ponderacionesindividuales a grupos de unidades de muestra no alterará significativamentela velocidad de la elaboración de los datos; pero la simplicidad no deberádescartarse a la ligera. La autoponderación es especialmente prácticacuando se propone realizar un análisis detallado adicional.

Con todo, podrían surgir problemas prácticos. La asignación delas probabilidades de selección podría haberse basado en una informaciónanterior muy inexacta. Es posible que no se obtengan datos de todas lasunidades muestrales seleccionadas y que se tenga que emplear la "técnica delos datos perdidos" durante la elaboración de los datos. Y lo que es más,podría haber otras razones fundadas para variar la fracción de muestreo(sobre todo entre los estratos, como se ha visto ya anteriormente).

(e) Muestras interpenetrantes

Si las unidades muestrales seleccionadas se consideran como dos ovarias submuestras independientes y se asigna a cada enumerador unasubmuestra específica, el análisis del error será más simple y eficaz,permitiendo estimar el componente de variabilidad debido a las diferenciasexistentes entre los enumeradores. Sin embargo, la puesta en práctica deestas medidas crea dificultades de carácter logistico. Las cifrasinvolucradas podrían dar como resultado que la m`itad de las unidadesmuestrales de un conglomerado queden en una submuestra, y la otra mitad enotra submuestra, con distintos enumeradores trabajando en cada una de

- 112 -

dichas submuestras (y, por lo tanto, en cada conglomerado). La

conveniencia administrativa y la reducci6n de los costos logísticos que se

consiguen mediante el procedimiento del muestreo por conglomerados con un

enumerador asignado a cada conglomerado se sacrifican para lograr un

análisis adecuado de la varianza. Para la evaluaci6n de proyectos y en

vista de las recomendaciones que se hacen en el presente Manual para llegar

a un compromiso entre las exigencias de tipo práctico y el rigor

estadístico, deberá considerarse esta excelente técnica. Sin embargo, si

se sospechan sesgos importantes en los enumeradores y encuestados, deberá

estudiarse la posibilidad de calcular la variabilidad entre los

enumeradores.

7.7 Conclusiones

Los costos de una encuesta por muestreo dependen del número de

unidades muestrales primarias y definitivas y de la cantidad de datos

recogidos por unidad muestral. La duplicación de una muestra aleatoria

simple mejorará la precisi6n en un 40 por ciento, aproximadamente. Sin

embargo, como la enumeraci6n en el terreno y la logística probablemente

representan una mitad o más de los costos totales de la encuesta, y la

mayor cantidad de datos representa un costo y tiempo adicionales de

elaboración, el costo adicional podría ser mayor que el valor del aumento

de precisi6n conseguido. Y lo que es mas, la mayor precisi6n debida a un

tamaño más grande de la muestra podría invalidarse con creces por un

aumento consiguiente en el sesgo. Por lo tanto, las muestras de tamaio más

grande, que cuestan más dinero y toman más tiempo de analizar, contribuyental vez muy poco, si es que lo hacen a mejorar la precisi6n global de las

estimaciones.

- 113 -

PARTE 8

OBTENCION DE DATOS MEDIANTE ENTREVISTAS Y MEDICIONES

8.1 Limitaciones de la entrevista y la medici6n

En las partes precedentes se han estudiado varios métodos derecolecci6n de datos que abarcan desde la observaci6n subjetiva rápidahasta las encuestas por muestreo de gran envergadura. A excepción de lautilización de los registros administrativos, todos los métodos incluyenrecuentos, medidas y/o la entrevista de miembros seleccionados de lapoblaci6n. La elecci6n del nivel técnico adecuado es muy importante; lasmediciones pueden tomarse con distintos niveles de exactitud y lasentrevistas pueden realizarse de muchas formas, utilizando métodos queincluyen desde una conversación libre y espontánea hasta una interrogaci6ninquisitoria. Los principios generales por los que deberá regirse laelección del mé.todo son los siguientes:

(a) La recopilaci5n de información deberá adaptarse a losentrevistados, de manera que sea aceptable para éstos y seejerza un mínimo de presi6n sobre ellos, teniendo en cuentael alcance de la encuesta.

(b) Si se van a emplear enumeradores de bajo nivel, su tarea nodeberá rebasar su capacidad y deberá reducirse al mínimo lasdificultades que se pudieran encontrar.

(c) Los datos deberán recogerse y registrarse de manera que sefacilite el análisis subsiguiente.

Los informes de encuestas por muestreo realizadas en países endesarrollo revelan que la tasa de respuesta es muy satisfactoria; o, dichoen otras palabras, la negativa a cooperar es rara, sobre todo en la zonasrurales. Esto parecería indicar que los principlos generales esbozados enel inciso (a) se han cumplido. Pero ésto no es necesariamente cierto. Lospequenos agricultores en general y los beneficiarios de los proyectos enparticular no se sienten libres para despachar a un funcionario, aun cuandola encuesta les resulte ofensiva o les preocupen los usos que se van ahacer de sus respuestas. El aprovecharse de esta pasividad no s6lo esinjusto desde el punto de vista de la 5tica profesional. También da unaimagen falsa de la exactitud de los datos tan condescendientementesuministrados. Muchas de las encuestas que se realizan para el seguimientoy evaluaci6n de proyectos requieren la dolaboraci6n sincera delentrevistado si se va a evaluar la verdadera situaci6n; una colaboraci6ncortés, indiferente o impulsada por el miedo no servirá para lograr losfines pretendidos. La explicación previa de la finalidad de la encuesta,

- 114 -

la reducci6n al mínimo de la cantidad de preguntas sobre informaci6n

"delicada" y el uso de un mínimo de tiempo de los entrevistados,

constituyen medios importantes para atraerse la completa participaci6 n de

éstos.

Es fundamental, especialmente en las encuestas por muestreo, que

el tiempo de los entrevistados y el acceso que ellos facilitan a su

propiedad sea aprovechado de forma eficiente; la entrevista ha de

realizarse competentemente. Con demasiada frecuencia, los enumeradores se

ven agobiados por una técnica o un cuestionario que ellos no pueden

utilizar eficazmente. En este caso, el responsable de la preparación de la

encuesta deberá recordar que una técnica o una pregunta que parecía

perfectamente satisfactoria en ensayos preliminares especialmente

controlados puede ser más difícil de aplicar en una situaci6n real sin

controles. Es posible que el enumerador no logre conseguir condiciones

apropiadas de independencia y confidencialidad para efectuar la entrevista;

las parcelas de terreno que se van a medir pueden encontrarse esparcidas

por una zona muy amplia; es posible que no se pueda interrumpir a los

vendedores mayoristas a su llegada al mercado para hacerles preguntas sobre

volúmenes y precios. Los intentos de formular las preguntas más claramente

pueden dar lugar al empleo de palabras o expresiones técnicas desconocidas

para los entrevistados. El enumerador tiene entonces que "explicar" la

pregunta, lo que en la práctica significa con frecuencia que el

entrevistado es inducido a dar una respuesta "prevista".

Proteger la sensibilidad del entrevistado y facilitar la tarea

del enumerador constituyen dos factores de suma importancia, pero es

preciso también anotar los datos para que se pueda realizar un análisis

eficiente y eficaz. Afortunadamente, los medios para lograr este objetivo

suelen ser compatibles con los otros. Un conjunto claro y sencillo de

preguntas cerradas puede ser más aceptable para el entrevistado, puede ser

aplicado con mayor eficacia por el enumerador y puede ser más fácil de

codificar y elaborar. Una "pregunta cerrada" es aquélla en que puede

identificarse de antemano, y habitualmente pre-codificarse, todas las

contestaciones posibles.

La decisión de emplear técnicas de medición/observación directa o

entrevistas personales depende del contexto (váase la Parte 4). Las

entrevistas son de poca utilidad cuando el entrevistado nunca supo la

información requerida en términos cuantitativos, o bien, habiéndola sabido

alguna vez, no puede recordar la cifra en el momento de la entrevista con

suficiente exactitud.

La decisi6n de que dichas mediciones son inevitables influye de

forma significativa en la envergadura y el contenido de la encuesta

resultante. Estas encuestas requieren mucha pericia y tiempo y complican

la programaci6n de la encuesta. En las encuestas en pequena escala pueden

incluirse toda una serie de observaciones y mediciones, ya que el

- 115 -

enumerador pasará mucho tiempo con cada unidad de la encuesta. Losestudios de administraci6n rural, en que se lleva a cabo una observaci6ndetenida de los sistemas de explotaci6n agrícola y se miden las zonas decultivo y los rendimientos, constituyen un extraordinario ejemplo de ello.

La magnitud de un estudio por entrevistas para recogerinformación pertinente a un nivel aceptable de exactitud está limitado porla actitud del entrevistado. Si la entrevista es larga o el método exigeun número excesivo de visitas, es probable que el entrevistado muestrefatiga e irritación y que la eficiencia del entrevistador disminuya, conuna pérdida consiguiente en la calidad de los datos.

8.2 Observación y medición

Entre las clases corrientes de observación y medición figuran lassiguientes:

(a) Uso de instrumentos registradores o que deban ser lidos, porejemplo, datos de caudales de agua y meteorológicos.

(b) Medición de tierras y rendimientos, por ejemplo, superficiesde explotaciones y parcelas y rendimientos de siegasparciales.

(c) Medición o examen físico de individuos, por ejemplo,indicadores del estado de salud y nutrición.

(d) Recuentos, por ejemplo, de las cabezas de ganado.

(e) Observación directa, por ejemplo, tiempo necesario pararealizar una cierta labor (observación a lo largo de unperíodo), o estructuras y materiales de viviendas(observación instantánea).

(f) Actuación directa, por ejemplo, la compra de artículos en elmercado para obtener los precios.

Los instrumentos registradores, cuando se requieren, suelen seridentificados y comprendidos bien.

Las mediciones de explotaciones requieren mucho tiempo, pero comocabe esperar que el personal menos experimentado maneje eficazmente lastécnicas requeridas (mediante un adiestramiento adecuado y una supervisiónintensiva), el mismo podrá utilizarse en investigaciones de envergadurarelativamente grande. Las mediciones de superficies se han hechosatisfactoriamente utilizando una brújula de prisma y uno de los diversosmedios disponibles para medir distancias, tales como tel9metros, cadenas deagrimensor, ruedas de medir, etc. Lo importante es que la persona que toma

- 116 -

las medidas posea- la competencia y los medios para calcular el área in

situ. Cabe esperar un alto porcentaje de errores en las mediciones

individuales, y un solo error, por ejemplo, en una lectura de la brújula,

puede invalidar el resultado correspondiente a un campo de cultivo

particular. Si estos errores se detectan más tarde, cuando se elaboran los

datos en algún establecimiento central, las dificultades logísticas para

que el trabajo se vuelva a realizar son enormes. En ciertos casos, ésto ya

no puede hacerse, ya que la situaci6n ha cambiado en el intertanto, por

ejemplo, que en la parcela se haya recogido ya la cosecha. Por

consiguiente, el trazar en el lugar las direcciones y las distancias en

papel cuadriculado con el fin de comprobar que el diagrama es una figura

cerrada parece necesario. Una calculadora barata de bolsillo que se pueda

programar para depurar los datos y calcular las áreas resultantes

constituye un método más rápido y eficaz; el gasto de la calculadora suele

estar más que justificado por la economía lograda en horas-hombre.

En las técnicas de siega parcial, el enumerador cosecha una

pequeña fracción, localizada al azar, de la parcela explotada por el

entrevistado. El tamaio de esta pequena fracción puede variar entre unos

cuantos metros cuadrados y 100 metros cuadrados, y las configuraciones

ordinariamente adoptadas son cuadrados, círculos o triángulos. Cabe

comentar varios puntos que se destacan en la literatura sobre este tema

específico.

(a) Aun cuando se midan con exactitud, los rendimientos

obtenidos representan rendimientos biológicos más bien que

el rendimiento real obtenido por el agricultor. Cuando el

entrevistado cosecha sus parcelas, se producen pérdidas en

las que no se incurrieron cuando se trataba de pequeñas

superficies cuidadosamente cosechadas por un enumerador.

(b) La siega parcial de cultivos, incluso después de tenerse en

cuenta en inciso (a) anterior, tiende a sobreestimar los

verdaderos rendimientos obtenidos; el tamaio del sesgo es

aproximadamente inversamente proporcional al tamaio del area

cosechada por el enumerador.

(c) Un cefñimiento estricto a la localizaci6n al azar de la siega

parcial es fundamental. Incluso enumeradores bien

adiestrados tienden a evitar las partes desnudas o

escasamente pobladas de la parcela, aun cuando las

coordenadas aleatorias indiquen la elección de dicha porci6n

de la parcela. Tal intervenci6n del enumerador da lugar a

un grave sesgo en la estimaci6n total.

(d) Los efectos de orilla y los sesgos de borde deben ser

controlados. Estos resultan de la tendencia a incluir

dentro de la siega parcial plantas que se encuentran en la

- 117 -

orilla misma del marco utilizado para señalar el área a sercortada, y a elegir localizaciones de siega con unarepresentaci6n insuficiente de los bordes de la parcela (endonde los rendimientos suelen ser más bajos),respectivamente. De nuevo, el efecto neto final tiende confrecuencia a sobreestimar los verdaderos rendimientos. Estepuede ser, de hecho, la causa del sesgo positivo que se

menciona en el inciso (b) precedente.

(e) El tomar una muestra de una sola siega parcial de cultivo

por parcela o incluso por explotaci6n agrícola puede ser unmétodo eficiente para calcular el rendimiento medio de unazona o estrato. Pero el resultado de una sola siega parcialrevela poco sobre el rendimiento medio de esa parcela oexplotaci6n específica. Si se necesitan estimaciones anivel de parcela o explotación para estudios de presupuestosde explotaciones individuales, se requerirán varias siegas

parciales por parcela. Debido al uso intensivo de mano deobra de este método, varias siegas parciales por explotaciónharían difícil utilizar una muestra grande de explotaciones.

(f) Las siegas parciales de cultivos son más apropiadas enparcelas plantadas uniforme y densamente con un solo cultivo(como el arroz de riego, que constituye la mejorilustración). Las parcelas sembradas esporádicamente que

contienen dos o varios cultivos no se prestan fácilmentepara el empleo de esta técnica.

La alternativa de pesar toda la producción.no debieradescartarse. Este método puede ser viable, sobre todo para los cultivosque no se venden inmediatamente o en pequeias unidades. Una informaci6n

suplementaria para estos tipos de cultivos puede también obtenerse de losorganismos que los elaboran o comercializan.

El reconocimiento físico de individuos es obviamente una tareapropia de profesionales adecuadamente calificados o de personal paramidicoadiestrado. Pueden existir datos provenientes de los registros que semantienen en las clínicas o que son fruto de estudios de casos anteriores.Una excepci6n, en la cual puede utilizarse personal sin experiencia, es elregistro de datos antropomátricos (fundamentalmente la edad, altura ypeso), sobre todo de niños, según se ha visto en la Parte 4. Una vez más,la relaci6n entre el nivel de medici6n y la posible envergadura de lainvestigaci6n es clara.

Los recuentos directos, sean de individuos, ganado, herramientaso sacos de productos, presentan sólo una dificultad mayor, a saber, elreunir todos los elementos que se van a contar. Esta dificultad es muy

importante, sobre todo para los estudios de comunidades pastorales. Se

- 118 -

requiere la colaboraci6n total de las personas involucradas; lo que no se

muestra no puede ser contado, y lo que no puede ser contado en unos cuantos

lugares resulta incontrolable.

La observación directa de cierta prácticas, sobre todo

relacionadas con la utilización de la mano de obra, exige una grande

dedicaci6n de tiempo por parte de los enumeradores. Además, hay que tener

mucho cuidado para evitar que la presencia del enumerador provoque un

cambio en la práctica que se observa. El entrevistado puede trabajar más

intensamente, gastar más o preparar una comida mejor (en el caso de una

encuesta de dieta alimentaria), simplemente porque la actividad está siendo'

observada. Un tiempo preliminar, cuyas observaciones se eliminan más tarde,

permite al entrevitado volver a su estado habitual y adoptar un

comportamiento más representativo. Este tipo de obtenci6n de datos puede

recomendarse úinicamente en estudios en pequeña escala.

En la recolecci6n de datos sobre precios, la utilidad de llevar a

cabo compras directas en comparaci6n con anotar los precios declarados es

de sobra conocida. Tambi6n en este caso, la decisión depende de la

exactitud requerida en comparación con la magnitud de las deformaciones

posibles en contestaciones más informales. La recopilaci5n de precios en

los mercados de las zonas rurales es relativamente más sencilla que los

problemas intratables de la medici6n de la producci6n de cultivos. Pero

ella exige una definici6n meticulosa de. la variedad Y calidad, una

programación regular de las observaciones y que se tengan debidamente en

cuenta los precios "reales" frente a los que pide al principio el vendedor.

Una última cosa podría decirse sobre la observación. Cualquiera

que sea el método de investigación, un ojo agudo puede recoger en

observaciones improvisadas impresiones que afiaden una dimensi6n adicional a

los resultados, aun cuando estas impresiones no sean mensurables o

apropiadas para ser incluidas en un cuestionario de encuesta. Un

observador experimentado, que visitaba las familias de los beneficiarios de

un proyecto not6 una alta incidencia de manteles de plástico, en donde

anteriormente había habido pocos. Esto fue un indicador significativo del

progreso económico, aun cuando no se había previsto como un elemento a ser

registrado. En síntesis, la evaluaci6n subjetiva de un observador

capacitado puede brindar una informaci6n tan importante como la revelada

por los datos registrados. En este contexto, la ausencia de un indicador

previsto podría ser tan revelador como su misma presencia.

8.3 La entrevista: Los períodos de recuerdo y de referencia

En cualquier entrevista que tenga por objeto registrar

información sobre un momento o un período específico de tiempo, la cuesti6n

de los períodos de recuerdo y de referencia reviste gran importancia.

- 119 -

El período de recuerdo es el intervalo de tiempo que ha

transcurrido entre los sucesos que se pide al entrevistado informar y el

momento de la entrevista. El período de referencia es el intervalo de

tiempo al que se refiere la pregunta. Los ejemplos ilustrativos siguientes

sirven para esclarecer las distinciones entre estos dos aspectos:

(a) Una entrevista realizada en septiembre de 1980 solicitando

detalles sobre la siembra a principios de la campaña

agrícola, digamos, marzo-mayo;el período de recuerdo es de 4 a 6 meses;

el período de referencia es de 3 meses.

(b) Una entrevista realizada en diciembre de 1980 solicitando

detalles sobre ventas de cultivos en el año agrícola, de

abril de 1979 a marzo de 1980:

. el período de recuerdo es de 9 a 21 meses;. el período de referencia es de 12 meses.

Con frecuencia, los dos períodos coinciden. Por ejemplo, una

pregunta sobre los nacimientos habidos durante los 12 meses anteriores a la

entrevista tiene un período de recuerdo y referencia de 12 meses.

Es posible que no se requieran unas especificaciones detalladas y

rigurosas en las encuestas informales, en que los investigadores pueden

manipular el plan de la discusi6n de una forma flexible. Sin embargo, una

encuesta por muestreo exigirá reglas precisas que deberán ser aplicadas

uniformemente por todos los enumeradores. Un estudio completo y detallado

sobre los períodos de recuerdo y referencia se puede encontrar en muchos

textos sobre encuestas. A continuación se ofrecen algunas normas

generales.

El período de referencia debe ser "cerrado", es decir, los puntos

de iniciación y terminaci6n deben ser momentos claros e identificables en

la memoria del entrevistado.

La dificultad estriba en que lo que pudiera parecer un período

formalmente cerrado no podría no serlo en la práctica. Este es, sobre

todo, el caso cuando se utilizan fechas del calendario. Una pregunta puede

formularse en términos de sucesos ocurridos en un año o mes específico, que

tienen fechas de iniciación y terminaci6n específicas. Pero el

entrevistado no recordará necesariamente los sucesos solicitados en

términos de fechas. Este puede informar sobre sucesos indicando que

ocurrieron dentro del período cuando, de hecho, tuvieron lugar fuera de él,

y viceversa. Por el contrario, una pregunta como "¿Cuántas veces escard8

usted entre la siembra y la cosecha de esta o aquella estaci6n?" puede ser

"cerrada" para el entrevistado, ya que la escarda está limitada por dos

períodos de tiempo identificables que están vinculados con la misma

actividad: la escarda no puede tener lugar antes de la siembra ni despues

- 120 -

de la recolecci6n. Como es natural, si la siembra se espaci6 a lo largo deun período de tiempo prolongado, el período de referencia se transforma en"abierto". Si el mercado local funciona un solo día a la semana, una

pregunta relacionada con el día del último mercado será "cerrada", a menosque exista ambigüedad en cuanto al mercado al que se hace referencia.

El recuerdo sobre la mayoría de los sucesos se va perdiendo enforma proporcional al tiempo que ha transcurrido desde su ocurrencia. Elperíodo Sptimo de recuerdo variará también en función del tema encuestión. Cuanto más corriente e insignificante es el suceso, tanto máscorto será el período en que se puede hacer una identificación precisa.Los sucesos más importantes se recordarán durante más tiempo, si bien sepueden olvidar las fechas precisas en que ocurrieron. Las encuestas sobregastos constituyen un buen ejemplo de ello. Los gastos importantes, perono corrientes (por ej., las compras de enseres dom&sticos) requieren unperíodo de recuerdo relativamente largo, tal vez de un año. Los gastos enartículos cotidianos corrientes, tales como las compras de alimentos,requerirán un período de recuerdo muy corto, de no más de unos cuantosdías. Desafortunadamente, cuánto más corto es el período de recuerdo,tanto mayor será la varianza de los datos (análogo a la alta variaci6n enlos resultados de los rendimientos de cultivos estimados a partir depequeias parcelas). Y lo que es más, la frecuencia de las visitasrequeridas, si se utilizan períodos de recuerdo muy cortos, encarece larealizaci6n de la encuesta. El mejoramiento de la exactitud de los datosmediante la reducci6n del período de recuerdo debe justificar el costo enque se incurre para lograrlo. Con todo, si se espera que el entrevistadorecuerde sucesos en forma detallada, se recomendará entonces lo siguiente:

Elija un período de recuerdo que la experiencia, o una pruebapiloto, demuestre ser el máximo período que ofrece una seguridad razonablede que se recuerden los sucesos.

De allí podría sacarse el colorario siguiente:

No pida al entrevistado que recuerde algo que nunca supo en lostérminos requeridos.

8.4 El tipo de entrevista

Los criterios para seleccionar procedimientos de investigaci6nque se estudiaron en la Parte 5 incluyen el tipo de entrevista. Ensíntesis, éstos son los puntos fundamentales que se han de considerar:

(a) ¿Deberá ser la entrevista informal y espontánea o, por elcontrario, formal y dentro de unos límites fijos?

(b) ¿Deberán ser las preguntas "cerradas" o "abiertas"(obsérvese que la palabra "cerrada" se refiere aquí al tipo

- 121 -

de pregunta y no a los períodos de referencia?

(e) ¿Hasta qué punto y bajo qué circunstancias pueden incluirsepercepciones y preguntas de actitud?

La entrevista que se realiza en forma de un diálogo flexible,pero dirigido, sin preguntas formales ni anotación detallada simultánea delas respuestas, constituye un poderoso instrumento en manos de unencuestador capacitado y profesional que participa activamente en toda laencuesta. La mejor manera de ilustrar las posibilidades de este tipo deentrevista es mediante un ejemplo basado en la experiencia del CIMMT en elplaneamiento de tecnologías apropiadas para los agricultores.1 /

Se describe el empleo de una "encuesta exploratoria" para recogerinformación por medio de entrevistas informales, con el fin de investigarlas prácticas de cultivo e identificar los problemas de los agricultores.Esta encuesta se considera un medio auxiliar para disefñar una encuestaformal complementaria que utilizará un cuestionario para cuantificar lasvariables importantes identificadas en la encuesta exploratoria. Se laemplea también para recopilar información que pudiera ser demasiadodelicada o complicada como para incluirla en una encuesta formal.

Las entrevistas se deben llevar a cabo dentro de un ambientetranquilo e informal. El uso de lapiz y papel debe hacerse en formarestringida; sin embargo, la informacion pertinente debe anotarseinmediatamente después de las entrevistas. Existe la posibilidad de cubrirun solo topico de la lista en una entrevista con un agricultor; el tipo deinformación que se incluye dependerá de la prácticas que sigue elagricultor, de los problemas que afronta y de su grado de cooperación. Porejemplo, cuando un agricultor está afrontando el problema de no podercompletar sus deshierbes, de acuerdo con las observaciones hechas en suterreno, sería posible hacerle preguntas detalladas sobre la oferta ydemanda de mano de obra asalariada, demandas competitivas de otroscultivos, calendario de las operaciones, etc. Es útil hacer algunaspreguntas sobre temas generales acerca del cultivo-objetivo y el sistema enel cual se integra, y usar posteriormente las respuestas para decidir quéáareas específicas merecen la atención de la encuesta formal. No esnecesario enfocar las preguntas sobre las prácticas que realiza unagricultor específico; en efecto, se puede ganar mucho, particularmente enlas entrevistas con los líderes tradicionales, a través de las discusionessobre las prácticas que- sigue la generalidad de los agricultores dentro delárea. Para encontrar las respuestas a esos tipos de preguntas, son muy

/ . Byerlee, M. Collinson y colaboradores: Planeación de tecnologíasapropiadas para los agricultores--Conceptos y procedimientos (México:CIMMYT, 1980), pgs. 28-31.

- 122 -

útiles las entrevistas con grupos de agricultores para obtener estimaciones

más o menos aproximadas de la frecuencia de uso de varias prácticas. Es

necesario que los investigadores prevean el tiempo necesario para recorrer

los campos de los agricultores. Una secuencia que los autores han

encontrado útil es realizar una entrevista en profundidad con un agricultor

o un grupo de ellos en el,.centro de.población y posteriormente acompafiarlos

hasta sus respectivos predios. Esto permite observar los predios de los

agricultores vecinos, así como realizar algunas entrevistas cortas con

otros agricultores a lo largo del camino. Al término de cada día de

trabajo es conveniente que el equipo de investigadores discuta sobre lo que

han aprendido ese día, formulen nuevas hip6tesis y determinen cuáles son

las principales lagunas que tienen en sus conocimientos, así como las ideas

conflictivas que se les presentan, para que puedan aclarar conceptos e

ideas en entrevistas posteriores.

La lista de comprobaci6n a la que se hace referencia en el pasaje

anterior aparece en la Figura 3 de la página siguiente.

Dicho ejemplo ofrece una buena ilustraci6n del enfoque general y

resalta con claridad las pericias requeridas en el entrevistador. Los

investigadores que poseen estas pericias pueden sondear actitudes y puntos

de vista e incluso indagar las posibles reacciones frente a situaciones

hipotéticas. Sin embargo, es preciso tener mucho cuidado cuando se

utilizan dichas preguntas por las razones siguientes:

(a) Es muy fácil inducir inconscientemente al entrevistado a que

de una determinada respuesta que es razonable en opini6n del

encuestador.

(b) Aun cuando no sea inducido en este sentido, el entrevistado

podría suponer que el enumerador espera ciertas respuestas

y, en consecuencia, por cortesía trate de satisfacer dichas

espectativas.

(c) Las palabras o frases técnicas o confusas pueden ser mal

comprendidas, creando una situaci6n en que una explicaci6n

adicional produciría el caso descrito en el inciso (a), o

bien, el entrevistado contestaría una pregunta distinta a la

efectuada.

(d) Si, para evitar el caso del inciso (c), la pregunta se pone

en lo que se cree es el habla local, podría entonces

aparecer como condescendiente o, debido a la falta de

comprensi6n del significado exacto de los términos o

expresiones locales, resultar engaiosa.

- 123 -

Figura 3: LISTA DE COMPROBACION DE LA INFORMACION RELATIVA A LASPRACTICAS AGRICOLAS

Preparación del terreno Equipo utilizado para suSecuencia de labores aplicaci6nMomento de efectuar cada labor Método de aplicaci6n (al

en relacion con las lluvias voleo, en surcos, etc.)Aparejos o maquinaria empleados

en cada una de las labores Lucha contra plagas y pestesCambio de método en funci6n de Método de lucha (tipo,

las lluvias, heladas, etc. dosis, equipo)Calendario de estas

Plantaci6n actividadesVariedad (o variedades) empleadaDensidad y espaciamiento RiegoDensidad y espaciamiento de Sistema de riego

cultivos intercalados Frecuencia y calendarioCalendario de plantaci8n en relaci6n del riego

con las lluvias, heladas, etc.Escalonamiento de las fechas de Cosecha

plantación Epoca de cosecha en rela-Secuencia de intercalaci6n ci6n con la madurez

de cultivos Métodos de recolecci6nMétodo de plantaci6n (aporque, Empleo de las hojas y los

siembra al voleo, etc.) ápices para piensosMétodo de cubrir la semilla Momento y sistema emplea-Prácticas de replantar parcial do para recoger las ho-o totalmente jas y los ápices

Utilizaci6n de los tallosRaleo

Calendario Post-cosechaDensidad fijada Método de trilla y des-Empleo del raleo cascaramiento

Momento del trillado yEscarda descascaramiento

Número de escardas Método y cantidad almace-Momento de efectuar cada una en nada

relaci6n con las plantaciones Distribución del productoAparejos o maquinaria utilizados Empleo del cultivo en la

en la escarda alimentaci6n localEmpleo de herbicidas (clase, dosis,momento y método de aplicación) Selecci6n de semillas

Aprovechamiento de las malas hierbas Tiempo de la selecci6nCriterios empleados para

Fertilizaci6n la selecci6nTipo de fertilizante (o fertilizan- Métodos especiales de

tes), incluidos los orgánicos producci6n y almacena-Dosis de aplicaci6n miento de semillasNúmero y momento de las aplicaciones Tratamiento de semillas

- 124 -

(e) Las preguntas que hacen que el entrevistado se ponga en unasituaci6n hipotética son difíciles de contestar propiamente,incluso en el-caso de entrevistados más educados; larespuesta podría tener poca relación con lo que éste haríarealmente si la situación hipotética fuere real.

La pregunta cerrada de opción múltiple, en la que se precisandistintas respuestas para que el entrevistado marque o elija una de ellas,se estudia en la Secci6n 8.5 más adelante dedicada al diseño delcuestionario.

Las entrevistas formales que utilizan un cuestionario abarcaránnecesariamente un aserie de materias más limitada y constituyen laalternativa necesaria cuando se emplean enumeradores menos experimentados.En un cuestiónario de este tipo se pueden incluir algunas preguntasabiertas con el fin de obtener algunas de las ventajas propias de unaentrevista informal y espontánea. Con todo, existen ciertas ventajas en lautilizaci6n exclusiva de preguntas cerradas por las razones siguientes:

(a) Es más fácil lograr un cuestionario mejor organizado (laspreguntas abiertas introducen incertidumbre respecto al.espacio que deberá dejarse para la respuesta).

(b) La precodificación asegura que los enumeradores recojan lainformaci6n necesaria.

(c) Si el número de entrevistados es grande, se utilizará algúntipo de elaboración de datos codificados; por tanto, lasrespuestas "abiertas" tendrán que ser "cerradas" en la fasede la codificaci6n; por consiguiente, ¿por qué no"cerrarlas" ya en la fase anterior cuando interviene elenumerador?

Se recomienda que, cuando se emplean enumeradores menosexperimentados, se utilicen preguntas abiertas s6lo con el fin específicode brindar al entrevistado la oportunidad de expresar sus reaccionesgenerales ante la investigación.

8.5 Diseio del cuestionario

Las encuestas muestrales requieren un formato uniforme pararegistrar los datos, y los estudios de casos suelen beneficiarse de esterequisito, al menos para parte del trabajo. Por lo tanto, el diseio delcuestionario es un aspecto importante, y el hecho de no prepararse unaserie apropiada de preguntas, ordenada convenientemente en una disposiciónpráctica, podría poner en peligro el éxito de la obtención de datos antesde comenzarse.

- 125 -

En el seguimiento y evaluación de proyectos agricolas y dedesarrollo rural, se reqiere normalmente cuestionarios para registrar datossobre los siguientes asuntos:

(a) Características familiares, demográficas y econ6micas.

(b) Sistemas de cultivo y economía de la explotaci6n.

(c) Actitudes y puntos de vista de los beneficiarios.

(d) Información social sobre los beneficiarios y sus comunidades.

Los tipos de cuestionario que se pueden aplicar a estos variostemas son muy diversos y, como se ha indicado ya, la disposici6n delcuestionario depende del nivel de conocimientos del entrevistado, laexperiencia del enumerador y el método de elaboración de datos a serempleado.

El contenido del cuestionario deberá determinarse tratando deincluir el número mínimo de preguntas (o encabezamientos de columnas)requerido para lograr los objetivos claramente precisados. Existe latendencia casi inevitable de hacer más preguntas de las necesarias. Comoya se ha visto en la Parte 4, será necesaria cierta informaci6n generalpara ayudar a interpretar los valores de las principales variablesestudiadas, pero el responsable de la preparaci6n del cuestionario deberátener en mente una hip6tesis respecto de esta relaci6n causal antes deincluir una característica que no interesa directamente. La entrevista hade centrarse en torno a asuntos de interés directo y.principal, y no acuestiones secundarias.

El tiempo para realizar la entrevista compl-eta no deberásobrepasar ciertos límites. Salvo en circunstancias especiales (porejemplo, una entrevista exhaustiva con un entrevistado muy dispuesto acolaborar), la duraci6n de la entrevista no deberá ser mayor de una hora.Esto limita obviamente el número de preguntas que se han de incluir, ycuánto más detallada y más incitadora a la reflexi6n sea la pregunta, tantomás limitado deberá ser el número de ellas.

El cuestionario ha de ser sencillo de utilizar como guía delenumerador y como instrumento para registrar respuestas. El enumeradortiene ante sí una situación frecuentemente difícil y delicada. Porconsiguiente, los instrumentos proporcionados deberán, al menos, facilitarla tarea. Es preciso prestar especial atenci6n a la calidad del papel y altamaño de las hojas empleadas, a la claridad de la impresión ypresentación, así como a los espacios dejados para registrar lasrespuestas.

- 126 -

El cuestionario ha de ser completo en sí en cuanto a que estén

incluidos la identificación del entrevistado, el enumerador, la fecha de la

entrevista, etc. En muchos casos, es preciso comprobar de nuevo con el

enumerador o entrevistado cuando se detectan inconsistencias, errores o una

respuesta poco usual.

El cuestionario deberá, en lo posible, estar precodificado, a fin

de evitar una codificación manual en la oficina. Las respuestas numéricas

y las codificadas deberán también alinearse, cuando sea el caso, de manera

de facilitar la tarea del encargado de entrar los datos en la computadora.

Se pueden identificar tres clases fundamentales de cuestionario:

(a) El formato tabular de filas y columnas, en el que se

registran las respuestas, pero que no especifica los

términos de la pregunta.

(b) Listas de preguntas siguiendo el orden general en que ellas

fluirán durante la entrevista, pero sin especificar los

términos exactos de las preguntas y sin instrucciones

precisas respecto a las bifurcaciones o las vías

alternativas de avance.

(c) Enumeraci6n literal de las preguntas con instrucciones

precisas sobre las alternativas para el avance, dependiendo

de las contestaciones dadas a las preguntas anteriores.

El formato tabular de filas y columnas

Este tipo de cuestionario se emplea mucho para dos de los

principales objetos que se investigan en las encuestas de seguimiento y

evaluaci6n, a saber, la enumeraci6n de los miembros de la familia y el

registro de datos sobre explotaciones agrícolas, bien campo por campo, o

cultivo por cultivo.

Por lo general, las "preguntas" están implícitas en los

encabezamientos de las columnas y las respuestas correspondientes a una

persona, campo o cultivo determinado, en una fila. (En lugar de campos o

cultivos, las entradas de las filas pueden también, como es natural,

abarcar rubros tales como tipo de ganado o prácticas de explotaci6n).

En las Figuras 4 y 5 se ofrecen dos ejemplos de dichas

disposiciones, en los que se ilustra un formulario de composici6n de la

familia y otro para datos de explotaciones. Las ventajas y desventajas de

este tipo de disposici6n pueden ser vistas en dichos ejemplos.

Las ventajas son:

- 127 -

(a) Una hoja o formulario contiene los resultados de lo quepodría haber sido una serie bastante larga de preguntas.

(b) La imposibilidad de precisar de antemano el número de casosque se va a abarcar se resuelve al insertar un nimero grandede filas, una para cada caso particular.

(c) El enumerador dispone de cierta flexibilidad en cuanto a lamanera de plantear y al orden a seguir en las preguntasimplícitas (pero ésto puede ser también una desventaja).

Las desventajas son:

(a) Las preguntas no se pueden precisar completamente;Inicamente están implícitas en los encabezamientos de lascolumnas.

(b) La falta de secuencia y estructura podría dar lugar aomisiones, a que el enumerador dirija mal al entrevistado oregistre err'neamente la informaci6n (por ej., colocando larespuesta correspondiente a una casilla del cuadro en otra).

(c) El encabezamiento abreviado de una columna podría indicarque el diseñador no se di6 cuenta de que la preguntaimplícita era efectivamente una serie de preguntas, de lasque algunas es posible que no se puedan contestar.

A veces se trata de combinar el formato tabular con las preguntasliterales y las instrucciones de la codificaci6n incorporadas en losencabezamientos de las columnas. En la Figura 6 se ofrece un ejemplo.Existen distintas opiniones sobre la utilidad de este método. Ha sidocriticado, aduciéndose que el espacio ocupado por los encabezamientosreduce excesivamente el espacio disponible para registrar las respuestas, yque la impresión de las preguntas completas exige que el ancho de lascolumnas varíen en función de la extensi6n de la pregunta y no de lasexigencias de la respuesta.

Si es acertado permitir al enumerador la considerableflexibilidad que requiere la disposición tabular depende del tema de laencuesta, la calidad del enumerador y la clase de entrevistado. No cabeduda que una capacitaci6n meticulosa y una supervisi6n intensiva revistenespecial importancia si se adopta dicho formato. En particular, elenumerador debe estar completamente familiarizado con las definiciones ylas preguntas implícitas que están resumidas en los encabezamientos de lascolumnas. No es práctico hacer referencia a un manual en el curso de unaentrevista. Por lo tant,o, es preciso que el enumerador tenga lasinstrucciones necesarias facilmente accesibles.

FIGURE 4LIST BELOWFirst all household members, present or absent Today ' date: Last Sunday's date:Then any other persons who slept last Sunday night in household

Was he l e ASK ALL FEMALES AGED 14 OR OVERin this househotd Agner o-6o

Sex col. 7, Place of Is Is Of all the children borne alive Of your most recent

M NOT both Marital torigin father mother ty you in your whole life .,. live birth ..

Full namn Relationship M Moth Stal Tribe POinC ? alive? How many are How many are How many Date of Childor C nths Status PROVINCE YES YES now in this now living How my Dat sCild

eCoin- if only or NO or NO household? elsewhere? have died? birth alive?

YES or NO YES or NO pltdudr-YESE Y years 2 years M F M F M F Year Month or NO

" (1) (21 (3) (4) (5) (6) (7) (8) (9) (10) (11) (121 (13) (14) (15) (16) (171 (18) (19) (20)

1-4 - __ __ __ __

SUPERVISOR'S Supervisors Enumerator'sCHECK Form checked in office O Signature Signature

Interview watched O Date

Reinlerviewe,d O:

FIGURE 5

CROPS PRESENT BY PLOT

TO BE COMPLETED BY ENUMERATORTO BE COMPLETED BYFor each plot owned or operated by the Household 1 12 SENIOR ENUMERATORyou should record the crops present on the plot at Reg. 0E5trie of your interview. Do not record crops until

they have been planted or after they have beenharvested.

Field/ Cd Plot Crop Crop Crop Crop Crop Crop Crop Total Next CdSe ot Crops present now No. No. Code Code Code Code Code Code Code Crops I P. No.E Name Po rp rsn o o No. 1 2 3 4 5 6 7

K_____________ _ 14 15.16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 74 75 75 77 78 79 80

0 2

0 3

0 4

015

0 61~0 7

Ce4 0 80910

112

113

15

7 -- - -Sp -- - -- --

- __ _ __ __ _ _ 1 6 .-

1 92 0

212

22 .

234

FIGURE 6

AN EXAMPLE OF A HOUSEHOLD QUESTIONNAIRE

ASK OF HEAD OF HOUSEHOLD OR OTHER ELIGIBLE RESPONDENTASK QUESTIONS COLUMN BY COLUMN

MARITAL RELATIONSHIP TO HEAD OF STATUS OF

NO.. NAME SEX DATE OF BIRTH AGE STATUS HOUSEHOLD THE MOTHER

What are the names of the A2 A3 In what month and year were A4 How Are you FILL IN THE CODE A7 Doesyour

membersof this household? you born? . old curren- What is SHOWING THE RELA- mother live

are you? tly? the name TIONSHIP TO THE in this household

WRITE IN THE NAMES OF Are you of the head of HEAD OF HOUSEHOLD outside of this

HOUSEHOLD MEMBERS Single - 1 this housod? Head - household, or is

FILL IN MONTH AND YEAR OF BIRTH Married - 2 thWifesoflhead - 2 she already dead?

L AFTER WRITING ALL THE IN THE WESTERN OR ISLAMIC CALEN. Widowed - 3 What is the Wile of head - 2

NAMES GIVEN BY R. READ - DARS OR __Divorced - 4 relationship Own child of head - 3

THE NAMES AGAIN THAT Male - L OTHER. Separated - 5 of each person head - 4 FILL IN CODE

I YOU HAVE WRITTEN AND Femae - F 1 with the head head -4

ASK: of this house- Grand child - 5

WIEhold? Parent of head - 6 Lives in this

N Are there any other household AGEIN Parent bf wife Lives outside

members who have not yet been YA ahter-i this household - 2

mentioned, such as: Son/daughter-inthsoueld-

E mYong ch as: Law - 8 Already dead - 3

E__._Young chdrn r wh a MONTH YA Other family - 9 Don't know - 4

babies? COE FILLL IN WRT NTE No-aiysc02. Household members wAr MONTH YEAR CODE RELATIONSHIPNo-aiysh

temporarily away from home? WITH THE

3. Other household members such ISLAM/ ISLAM/ HEAD OFL

as other'relatives or servants JAVA JAVA HOUSEHOLD

who live with you? WEST. - WEST. -

NAMES OTHER OTHERES, ENTER THEIR NAMESOTEOHR

(1) (2). (3) (4) (5) . (6) (7) (8) (9) (10) (11) (12)

WO [I Cr] OLI CO E -O O O

Ur] ___ E CO ECOL] . __ O]OEO

C-D O CD CECO O1

,_ El EC] [] El E E EDCOI El E . EU]C __ COl E ____OE EO

- 131 -

La simplificaci6n del encabezamiento de una columna no hace lapregunta menos complicada. Por consiguiente, un encabezamiento de columna"Ingreso" en un formulario concebido para administrarlo a pequeñosagricultores de semisubsistencia no resuelve el problema de ladeterminaci6n de su ingreso. Nada pone en mayor evidencia a un diseñadorde un cuestionario inapropiado como una abrogaci6n semejante deresponsabilidad, mediante la cual la carga se asigna al que no lepertenece: el enumerador.

El cuestionario no literal

Este tipo corriente de cuestionario presenta las preguntas portemas y sigue un orden secuencial que pretende reflejar un progresi6nl6gica de la entrevista a través de los temas investigados. Sin embargo,las preguntas no están impresas en una forma literal y puede no incluir lasbifurcaciones ni las vías alternativas de avance a lo largo de laentrevista. Este formato no suele requerir que el cuestionario seaimprimido en el idioma de la entrevista. Sin embargo, la pregunta seexpresa aproximadamente en la forma en que se va a hacer, tal vez en unaforma más breve que la que se va a utilizar durante la entrevistapropiamente dicha. Por lo tanto, se trata de un tipo intermedio entre loscuestionarios tabulares y literales, en que se permite cierta flexibilidadal enumerador., La forma en que la pregunta se va a expresar en latraducci6n, el. seguimiento que pudiera requerirse en la clarificaci6n y elreconocimiento de que una pregunta posterior ha resultado innecesaria acausa de una respuesta anterior son tres cuestiones que se dejan a ladiscreci6n del enumerador.

Al igual que en el caso del formato tabular, ésto puede ser unaventaja o una desventaja. El requisito esencial es que los temas y laspreguntas sean sencillos y fáciles de comprender por el entrevistado. Elenumerador no deberá ser forzado a hacer difíciles traducciones de términostécnicos 1/ ni a tener que explicar la pregunta de tal manera que "induzca"una respuesta del entrevistado. El grado de discreci6n permisibleconstituye un punto que merece una especial atención y los requisitos decapacitaci6n son tan exigentes como los del. cuestionario tabular que se hadescrito anteriormente.

Dado que la redacci6n precisa de la pregunta no es un requisitonecesario, el diseñador tiene ante sí una tarea más fácil en lo querespecta a obtener una disposici6n que cumpla con los principios generalesesbozados anteriormente, sobre todo la comodidad de la utilizaci6n y de los

1/ No son únicamente los términos técnicos los que presentan dificultad.Con frecuencia, simples palabras o conjunciones se traducen ointerpretan mal.

- 132 -

FIGURE 7AN EXAMPLE OF A PRE-CODED FORM

NATALIDADE

Se nos dois últimos anos alguma mulher desta casa ficou grávida, tome

os seguintes dados:

1. Idade da mulher ao engravidar pela última vez nesse periodo.1 2 3 4

2. Idade da mulher ao engravidar pela primeira vez.5 6 7 8

3. Número de gestaçocs anteriores. EIiLIiEIE9 10 11 1

4. Número de abortos.13 14

5. Número de natimortos. 0 ]15 1N

6. Número de crianças falecidas antes de 1 anos.

7. Número de crianças falecidas de 1 a 5 anos. JEI19 20

8. Número de crianças falecidas com mais de 5 anos. 1EI021 22

9. Problemas na ultima gestaçào (78 ou 79) (1..hemorragia;2. infecçào; 3.eclampsia; 4. aborto; 5 outro: especifique). 23 24 25.26

10. Fase da gestaçào cm que ocorreu o problema (1. até o 3. 0 més;

2. no curso do 4. mês; 3. no curso do 5. més;4. no curso do

6. 0 més; 5. no curso do 7. 0 més; 6. no curso do 80 mês 7. no

curso do 9. o mês) 27 2a 29 30

11. Em que fasa da gestaçao iniciou o pré-natal, na ultima gestaçao

(78 ou 79) (1. Antes do 3. o més; 2. no curso do 4. 0 mês; 3. no

curso do 5. O mês; 4. no curso do 6. 0 mês; 5. no curso do 7. O mês;

6. no curso do 8. O més; 7. no curso do 9. o mês).31 32

12. Número de filhos no último parto, dentro dos últimos 2 anos. LE E33 ;4

13. Nascidos (1. vivos; 2. mortos; 3. 1 vivo e I morto). 1j 035 36

14. Locai do parto (1. residência; 2. maternidade localizada no muni-

cípio; 3. maternidade localizada no município vizinho; 4. materni-

dade localizada em municipio nào vizinho; 3. a caminho da

maternidade; 6. fora da residência). 37 38

15. Parto assistido por: (1. médico; 2. pessoal paramédico; 3. agentes

leigos de saúde; 4. outras pessoas). 39 40

- 133 -

requisitos de codificación y análisis. En la Figura 7 se ofrece unejemplo.

Este tipo de cuestionario es muy apropiado cuando se utilizanlistas impresas de preguntas cerradas de opciones múltiples en las que sedan instrucciones al enumerador para que indique qué respuesta se aproximamás a la opini5n del entrevistado. Sin embargo, la preparaci6n de la listade opciones requiere un conocimiento detallado de la cuestión investigada;es muy fácil imponer una serie de respuestas que no tenga ninguna conexiónreal con la verdadera reacci6n de los entrevistados. En efecto, el mismoorden en que las opciones están enumeradas y la gama de opciones ofrecidasvan sin duda a influir en la respuesta. Y lo que es más, una gama derespuestas opcionales desde muy negativas hasta muy positivas podría hacerque una reacci5n compleja se convirtiera en una respuesta superficial.Existe también la tendencia a "amontonarse" en el punto medio de la escala.

Es preciso que el responsable del diseño del cuestionario evitela pregunta múltiple encubierta y la pregunta demasiado hipotética. Estosson dos ejemplos pertinentes:

"¿Trabaja usted normalmente en su explotaci6n agrícola, perobusca también empleo en otras explotaciones?"

"¿Cree usted que sus hijos estarán en condiciones de ganarse lavida trabajando en el campo cuando sean mayores?"

En el primer ejemplo, desde luego, se hacen dos preguntas.Supongamos que la respuesta es "no"; ¿qué interpretaci6n puede hacerse déla respuesta?

En el segundo ejemplo, se exige al entrevistado imaginar unasituación en que éste puede visualizar varias posibilidades de cambio o deausencia de cambio. Como éstas no se revelan en la respúesta registrada,la contestaci6n puede ser inútil. Ambas preguntas y variantes análogas sehan venido utilizando por aios.

Las mejores encuestas de actitud conducen al entrevistado de unadeclaraci6n factual sobre su comportamiento a sus razones para actuar comolo hizo, a las circunstancias que él cree que influyeron que él cambiara sucomportamiento.

El cuestionario literal

Este tipo de cuestionario no permite ninguna discreci6n alenumerador. Las preguntas se imprimen con la redacción exacta que se va aemplear durante la entrevista; las opciones y los procesos de bifurcaciónque pudieran presentarse durante la entrevista están identificados en elcuestionario, en el que están incluidas también las instrucciones

- 134 -

específicas. En casos extremos, incluso se indican procedimientos de

cortesía para el comienzo y el final de la entrevista.

Este tipo de cuestionario.es el que mejor se adapta para realizar

una entrevista detallada encaminada a investigar un asunto específico en

que la gama de comporatamiento es a la vez limitada e identificable de

antemano.. Su empleo más amplio se ha hecho en encuestas demográficas, en

especial de fecundidad, para las que parece muy apropiado. No suele ser

apropiado, sin embargo, para encuestas generales sobre explotaciones, en

que la reacci6n del enumerador ante la gran variedad de características y

modalidades de explotaciones agrícolas es casi esencial, para que la

entrevista parezca inteligente al entrevistado.

La decisi6n de adoptar este tipo de cuestionario tiene las

siguientes consecuencias:

(a) El cuestionario deberá imprimirse en el idioma de laentrevista.

(b) Las posibles vías de avance de la entrevista deberán ser

totalmente previsibles.

(c) La duraci6n del cuestionario (o de de la entrevistapropiamente dicha) constituye un importante problema dediseio.

La necesidad de que el cuestionario sea impreso en el idioma de

la entrevista es obvia. De lo contrario, no se podrá lograr el plan

previsto de no permitir discreci6n al enumerador. Por desgracia, en el

caso de ciertos países ello supone la traducción del cuestionario a varios

idiomas. Esta es una tarea pesada y ha de efectuarse y comprobarse con

mucho cuidado. Una traducci6n descuidada produce el mismo resultado que si

los enumeradores emplearan su discreción para redactar las preguntas.

Asimismo, si se utilizan palabras técnicas y el entrevistado no las

entiende, el enumerador se ve forzado a tener que explicar su significado;

una vez más, esto obstaculiza el objetivo de organizar la entrevista con

miras a eliminar el sesgo del enumerador. Una medida habitual de seguridad

es la de traducir las preguntas al idioma requerido y luego volver a

traducir la versión de la traducción a la lengua original, con el fin de

verificar deficiencias y ambigüedades.

Todas las vías de avance posibles que las preguntas y las

respuestas pudieran tomar deberán tenerse en cuenta mediante instrucciones

y preguntas alternativas escritas. En este caso, el cuestionario va sin

duda a ser extremadamente largo, aun cuando, en cualquier entrevista

individual, el nimero de preguntas hechas sea limitado.' En la Figura 8 se

ofrece un ejemplo de un extracto de un cuestionario estructurado. Sin

embargo, los malos ejemplos son más abundantes que los buenos.

- 135 -

FIGURE 8

AN EXAMPLE OF A STRUCTURED QUESTIONNAIRE

1. Did you do any work in the last 7days?! Yes...1No....2 SKIP TO 6

2. What was that work?

3. How many hours altogether did you work over the last 7 days?HOURS

4. Did you want more hours of work during those 7 days? Yes.. .1 SKIP TO 9No... .2

5. Why did you not want more hours of work? CIRCLE ONE ONLY

Worked fully .......... 1

Atshoot2...........*2 ALLHousekeeping .... ke**3 SKIPToo young/old ........ 4 TO 9Physical defect ........ 5Other (SPECIFY)...*..6

6. Do you have a business for which you did Yes.. . SKIP TO 9

anything during the last 7 days? No... .2

7. Did you look for work during the last 7 days? -Yes .. .1 SKIP TO 9No...2

8. Why were you not working during the last 7 days? CIRCLE ONE ONLY.

Vacationo ..............Illness ................ 2

Strike *.******...***** 3 ALLLay-offf.********4***.4Off-season ............ 5Other (SPECIFY).***-6

- 136 -

Manual de capacitaci6n del enumerador

Deberá prepararse un manual de capacitaci6n para cada

cuestionario. Este constituirá el documento básico de referencia en el

curso de capacitaci6n del enumerador. Deberá contener lo siguiente:

(a) Detalles explicativos sobre la encuesta.

(b) Instrucciones para identificar a los entrevistados.

(c) Directrices generales sobre c6mo realizar una entrevista.

(d) Definiciones precisas de cada t6rmino empleado en el

cuestionario, por ejemplo, hogar, explotación agrícola,

campo de cultivo, ingreso, etc.

(e) Explicaci6n de cada una de las preguntas acompañada de

ejemplos de c6mo se han de registrar las respuestas.

(f) Instrucciones de codificaci6n (si éstas no aparecen en el

cuestionario).

(g) Otras instrucciones operacionales y de programaci6n de

actividades.

Conviene subrayar que, al finalizar el curso de capacitaci6n, el

enumerador deberá estar tan familiarizado con los puntos (b) a (e) que no

le sea necesario tener que recurrir al manual durante la entrevista. Sin

embargo, el manual continuará siendo un valioso documento de referencia

para el enumerador, sobre todo respecto a los puntos (f) y (g), y también

cuando se presente una dificultad o problema relacionado con la

interpretaci6n de las definiciones en una situaci6n imprevista.

- 137 -

PARTE 9:

ELABORACION Y ANALISIS DE DATOS

9.1 Introducci6n

Como ya se indic6 al principio, este Manual está concebido paravarios tipos de usuarios y, por lo tanto, contiene materias a distintosniveles. Este es sobre todo el caso de la presente Parte. En las primerassecciones se estudian, a nivel muy elemental, pasos iniciales sencillos quepodrían ser fitiles para la primera etapa fundamental del análisisexploratorio antes de tomar una decisión sobre los detalles de un análisismás formal, sea computadorizado o no. En las secciones siguientes seexaminan problemas que suelen ser perceptibles únicamente para los queposeen una formaci6n estadística avanzada. Las materias se hanseleccionado teniendo en cuenta dos fines:

(a) Ofrecer ejemplos de técnicas sencillas de elaboración dedatos, relativos al objetivo principal del presente Manual,es decir, convertir los datos obtenidos en información parala gerencia.

(b) Senalar algunas de las causas principales de lasdificultades que se encuentran en el análisis,proporcionando así una serie de advertencias para que no sesaquen falsas conclusiones y se solite asesoramientoestadístico profesional cuando sea necesario.

En efecto, mucho se puede lograr mediante el empleo de técnicasde análisis sencillas, tales como la preparaci6n de gráficos, el cálculo detasas y medias sencillas, la clasificación por rangos y la construcci6n detablas sencillas. Estas tácnicas son especialmente apropiadas para lapresentaci6n rápida y oportuna de informes de seguimiento. Este tipo deanálisis exploratorio es también un primer paso necesario antes deemplearse técnicas más complejas. No hay casi lugar a duda de queprocedimientos más complejos, sobre todo el análisis multivariante, seránnecesarios cuando se requiera un análisis causal, especialmente en lasetapas posteriores de la evaluaci6n. Será necesario el asesoramientoestadístico profesional para decidir lo que deberá hacerse y, confrecuencia, lo que es igualmente importante, lo que no deberá hacerse. Ladisponibilidad de "programas envasados" está actualmente tan generalizadaque los datos son frecuentemente sometidos a manipulaciones inapropiadas,cuyos resultados se leen en los listados de la computadora sin prestar laadecuada atención a si los modelos de análisis son apropiados, en vista delcarácter de los datos y los métodos que se han empleado para obtenerlos.

- 138 -

Las técnicas sencillas son importantes para las primerasevaluaciones de la calidad de los datos, así como para establecer órdenes

de magnitud de las principales características obseradas. Se pueden

emplear también para obtener una informaci6n inicial sobre la sensibilidadde los resultados a las desviaciones de la norma.

Encuestas de diferentes tipos y coberturas tienen distintosrequisitos relativos a la depuración y codificaci6n de los datos; lassiguientes secciones deberán interpretarse teniendo ésto en cuenta. La

experiencia demuestra que las etapas de la elaboración y la presentación delos datos en la producción de información son difíciles de completar.

Existen numerosas encuestas y estudios en que los datos recogidos no han

sido nunca debidamente analizados ni utilizados. Entre algunas de las

razones se podrían citar las siguientes:

(a) Se presta insuficiente atención a estas etapas posteriorescuando se planea la encuesta y se diseia el cuestionario; es

preciso tener pensados los principales tipos de análisis yde presentación antes de obtener los datos.

(b) Las deficiencias que se describen en el inciso (a) dan lugara que se recojan muchos datos innecesarios, lo que complicala elaboración de los datos y retrasa el trabajo sobre losdatos que más interesan.

(c) Las expectativas de obtener un análisis rápido basadas en

los progresos de la elaboración eletrónica de datos suelenser demasiado optimistas.

(d) El carácter tedioso del trabajo de depuración y codificaciónde los datos enfría el empeio y el entusiasmo, induciendo ahacer más trabajo de campo antes de llevar a término elestudio en curso.

(e) La tarea de crear grandes ficheros de datos y luegovalidarlos, sobre todo los que se refieren a encuestaslongitudinales, suele subestimarse grandemente.

9.2 Preparación de los datos

Una etapa de depuración es necesaria para todas las

investigaciones, salvo las de menor envergadura. Los datos se depuran conmiras a su integridad y consistencia; las omisiones e inconsistenciashalladas se enumeran de nuevo sobre el terreno o bien se eliminan o

corrigen mediante un proceso de imputación.

Si se siguen las recomendaciones que se hicieron en la Parte 8,el trabajo de codificación en la oficina se puede reducir a un mínimo

- 139 -

mediante la utilizaci6n de preguntas precodificadas. Los datos codificadosresultantes bien se transcriben directamente a tablas resúmenes o setransfieren a tarjetas, discos o cintas para un análisis ulterior.

A menos que la direcci6n actúe con rigor, dicho trabajo podríaterminar en caos. Los cuestionarios deben registrarse, ordenarse en grupossegún enumeradores, áreas o estratos apropiados, y anotarse su circulaci6nentre las distintas etapas y diversos analistas. Será necesario mantenerregistros detallados de cualquier cuetionario que se remita de nuevo alterreno o que se tome provisionalmente para otros fines. Deberá evitarsecualquier trastorno del proceso normal mediante el cual grupos decuestionarios se someten a depuraci6n, correcci6n y perforaci6n.

El control frecuente de la cantidad de formularios revisadosdiariamente sirve para vigilar la actuaci6n del personal. Se puedenutilizar totales parciales, calculados a mano, de algunas de las variablesprincipales con miras a obtener medias, tasas, Srdenes de magnitud yprimeras estimaciones de las principales características objeto deestudio. Si existen cifras previas o preliminares con las que se puedenconfrontar las primeras estimaciones, las discrepancias observadas podríanconstituir una señal anticipada de que algo no marcha bien.

Es conveniente que la persona encargada del estudio examine ydepure una muestra de los cuestionarios a medida que vayan llegando. Deesta manera puede comprobar las evaluaciones iniciales de la calidad deltrabajo de campo, y asegurarse que las instrucciones de revisi6n paradetectar inconsistencias son correctas. En efecto, a menos que se lleve acabo una prueba preliminar, es frecuente que las instrucciones para ladepuraci6n y codificaci6n de los datos no se pueda completar hasta que nose hayan examinado meticulosamente algunos cuestionarios.

No todos los errores exigen la devoluci6n de los cuestionarios alterreno para comentario, nueva visita y modificacion. Algunos son erroresobvios y se pueden corregir en la oficina. Otros, como, por ejemplo, lasmediciones incorrectas de áreas, no pueden corregirse sin una investigaciónde campo adicional, que deberá hacerse a la brevedad. Tambi&n sonnecesarias las comprobaciones de campo en casos de información que parecedudosa, pero no necesariamente err6nea.

Los datos falsificados no son de extralar, ya que en la mayoríade los equipos de encuesta hay enumeradores deshonestos que consiguen pasarel curso de adiestramiento y el proceso de selección. Por esta raz6n, esconveniente agrupar los cuestionarios por enumeradores, ya que un revisorbien preparado puede detectar con frecuencia ciertas característicasconstantes en las respuestas, por ejemplo, una regularidad sospechosa en laestructura de las familias o la ausencia de ceros de cuando en cuando, queserían un indicio de que podría haber falseamiento de los datos.

- 140 -

La depuraci6n, sobre todo en las etapas iniciales, debería

también indicar si ha habido algún error de procedimiento que no haya sido

notado por la supervisión en el terreno. Por ejemplo, supóngase que se

decidi6 que, en caso de ausencia del marido, la mujer iba a figurar como

cabeza de familia; si los cuestionarios de algún área no registran casos de

mujeres como cabezas de familia, ello podría indicar que allí no se siguió

dicha instrucción.

Con frecuencia se combinan las operaciones de depuración y

codificación. Este método tiene sus ventajas y desventajas. Por regla

general, a no ser que las preguntas est5n precodificadas en su casi

totalidad, es preferible separar las dos actividades. Es necesario un

control de calidad (una verificación peri6dica de una muestra de

cuestionarios después de efectuadas la depuración y la codificaci6n) para

asegurar que el trabajo se está realizando debidamente. Esta verificación

ha de mantenerse a través de todo el proceso y es posible que tenga que

intensificarse en las etapas posteriores, cuando el entusiasmo y empefño

iniciales empiezan a disiparse.

9.3 Elaboraci6n de datos

El equipo y los programas de elaboración de datos están

experimentando una rápida evolución. En especial, la aparici6n de las

microcomputadoras va, sin duda, a cambiar la situación considerablemente.

Esta innovación podría evitar el "distanciamiento" entre el encuestador y

los datos que tiene lugar con las instalaciones centrales de cómputo. Con

una microcomputadora, el encuestador puede controlar mejor el proceso, el

acceso al análisis y el diseñio de éste. El diseño en sí puede ser más

flexible. El encuestador puede controlar más fácilmente la organización y

validación de los ficheros de datos, evitando así algunas de las numerosas

corridas de validaci6n que son características de la elaboración

electrónica de datos. Por otra parte, las microcomputadoras tienen hasta

la fecha una capacidad limitada para manejar grandes ficheros, y el

desarrollo de los programas está rezagado respecto al de los equipos.

En la perspectiva actual de rápida innovación, el ofrecer

recomendaciones específicas y detalladas no sería apropiado. Con todo,

debemos hacer dos comentarios. En primer lugar, la computadora no es el

único o necesariamente el mejor medio para elaborar datos. Mucho se puede

hacer utilizando grupos competentes para resumir y analizar los datos con

la ayuda de calculadoras baratas, programables y manuales. Cuando la

puntualidad es un factor importante, y éste es frecuentemente el caso de

las actividades de seguimiento, algunas tabulaciones sencillas sacadas de

los datos, o de una muestra de ellos, serán suficientes para cumplir

satisfactoriamente con los requisitos existentes.

Si los datos. que se utilizan para seguimiento pueden elaborarse

en computadoras, valdrá bien la pena la inversi6n inicial para poner en

- 141 -

marcha el-sistema; &sto constituye un aspecto de la utilización general dela computadora para los fines de la administración. Sin embargo, lasoperaciones que se realizan en lugares distantes con condiciones climáticasdesfavorables podrían encontrar problemas. Además, deberá evitarse latentaci6n a ampliar los informes excesivamente por la única raz6n de quelas instalaciones son accesibles. La experiencia varía de un proyecto aotro, y hasta proyectos similares dentro del mismo país muestranvariaciones considerables en los resultados que son difíciles de tener encuenta.

En segundo lugar, el tiempo asignado para la elaboración de datosde encuestas suele ser demasiado limitado, sobre todo cuando se realiza enforma computadorizada. En un caso reciente de elaboración de la EncuestaMundial sobre la Fecundidad, Rattenbury escribe que

Se calculan estimaciones realistas multiplicando lasestimaciones normales por un factor de realismo o factor-R,para tener en cuenta las deficiencias en el rendimiento y losproblemas imprevisibles. La experiencia de numerosos casosindica que este factor será frecuentemente de tres o más parala elaboración de datos. La duración efectiva de laelaboración de datos para los países objeto de la EncuestaMundial sobre la Fecundidad ha sido, por término medio, deaproximadamente tres veces mayores que las previsiones. 1/

En general, en el país participante se dio cierta preferencia ala Encuesta Mundial sobre la Fecundidad, y se utilizó considerablemente laspericias adicionales en materia de elaboración de datos del personalinternacional <le la encuesta.

9.4 La escala adecuada del análisis

En numerosos casos, el análisis no planteará ningún problema yaque los datos básicos son limitados y sencillos y·las técnicas requeridas,directas. Para muchos aspectos del seguimiento, la secuencia de informespresentados a lo largo del aio establecerá los requisitos de elaboración dedatos. El análisis de series de datos mayores y más complejas obtenidas deestudios de casos y encuestas por muestreo requerirá, sin embargo, escogerentre la velocidad y la profundidad, entre los cuales deberá haber ciertoequilibrio.

En ciertos informes se insiste en que en el pasado se ha solidoprestar insuficiente atenci6n a la puntualidad. El presente Manual ha

1/ J. Rattenbury: "Survey Data Processing--Expectations and Reality",World Fertility Survey Conference (Londres: julio de 1980).

- 142 -

tratado, por consiguiente, de reconsiderar este punto, suibrayando el valor

de los resúmenes rápidos y sencillos. Sin embargo, cuando se trata de

investigar relaciones causales, se necesitarán análisis más complejos.

Los estadísticos han debatido sobre la relaci6n que existe entre

el nivel de precisi6n de los datos y el de complejidad del análisis.

Algunos han argüido que los métodos complejos no debieran aplicarse con

datos inexactos; otros, por el contrario, ha mantenido que son

especialmente necesarios cuando los datos son inexactos. Un término medio

sería lo siguiente:

(a) No se puede generalizar. Cada caso particular deberá

tratarse por sí mismo basado en sus características

específicas; a toda costa, deberá evitarse el tratar de

establecer relaciones entre toda clase de datos.

(b) A veces vale la pena probar métodos complejos para tratar de

sacar la mayor información posible de los datos. Con todo,

los resultados deberán interpretarse con gran cuidado. Por

ejemplo, los signos y las magnitudes de las estimaciones de

los coeficientes de algunas variables en una regresionmúltiple podrían ser diferentes de los previstos. Si se

desdeñan éstos y se centra la atención en los que confirman

las previsiones, el análisis se utilizaría para apoyar ideas

preconcebidas y no produciría una validación independiente.

(c) La medida en que los resultados están influidos por el

tamaño probable de las inexactitudes debiera investigarse

por medio de simulaciones de distintas series de datos.

(d) Debiera examinarse la necesidad de realizar transformaciones

de datos.

(e) El tratar de extraer demasiado de los datos es peligroso y

produciría, casi sin lugar a duda, resultados

estadísticamente significativos pero espurios. Por término

medio, una de cada veinte pruebas de relaciones no

significativas (utilizando límites de confianza del 95 por

ciento) aparecerá significativa.

(f) La significaci6n estadística no entraña necesariamente una

significación substantiva.

En la Secci6n 9.9 se estudian algunos efectos de las

inexactitudes en los datos.

- 143 -

9.5 Presentación y representación de los datos

La manera en que se presentan los datos depende de las

características que se quieren destacar. Un error corriente es la falta de

simplificación; de ordinario, se utilizan demasiados dígitos. En parte,ésto se debe a que, digamos, una cifra de 71 bajo un encabezamiento de

"Toneladas" da una imagen de seguridad y exactitud que no ofrece una cifrade 72 bajo un encabezamiento de "Miles de toneladas". Otra raz6n es la

tradición de la contabilidad, en que se ha de arrojar un balance exacto.

Es preciso, desde luego, disponer de cifras detalladas ysuministrarlas a los usuarios que necesitan hacer computacionesadicionales. Pero lo primero que la gerencia desea ver son las líneasgenerales de la situación; los cuadros y gráficos han de elaborarseteniendo en cuenta este fin. Algunas de las posibilidades existentes se

ilustran por medio de los datos que aparecen en los Cuadros 3 y 4,obtenidos del informe detallado de una encuesta.

Cuadro 3

Rendimientos y producción bruta de maíz y manícorrespondientes a la cosecha de 1971

Maíz Maní

Rendimiento RendimientoArea medio por Producci6n medio por Producci6n

acre bruta acre bruta

(libras) (toneladas) (libras) (toneladas)

1 1.331 12.772 476 2.215

2 1.230 9.284 360 2.227

3 1.110 14.135 520 4.816

4 1.290 13.041 580 5.864

5 1.090 8.073 480 3.555

TODAS LASAREAS 1.209 57.305 494 18.676

- 144 -

Cuadro 4

Rendimientos y producci6n bruta de maíz y manícorrespondientes a la cosecha de 1972

Maíz Maní

Rendimiento RendimientoArea medio por Producci6n medio por Producción

acre bruta acre bruta

(libras) (toneladas) (libras) (toneladas)

1 1.631 13.989 297 1.640

2 1.628 12.288 363 1.887

3 1.845 21.005 514 4.958

4 1.038 19.027 452 3.515

5 1.020 7.414 367 2.823

TODAS LASAREAS 1.626 73.723 413 14.824

La presentaci6n podría modificarse para destacar distintas -

características. Así, por ejemplo, si se trata de hacer una comparación

del maíz, un primer paso natural sería el de reducir el núamero de dígitos y

presentar el Cuadro 5.

- 145 -

Cuadro 5

Maíz: Rendimientos medios por acrey producci6n bruta, 1971-72

Rendimiento Producción(en miles de libras/acre) (en miles de toneladas)

Area1971 1972 1971 1972

1 1,3 1,6 13 14

2 1,2 1,6 9 12

3 1,1 1,8 14 21

4 1,3 2,0 13 19

5 1,1 1,0 8 7

TODAS LAS 1,2 1,6 57 74AREAS

Los cambios pueden observarse ahora de una ojeada; por ejemplo,que las variaciones entre las areas aumentaron sensiblemente de 1971 a

1972.

El Cuadro 5 podría ampliarse para incorporar una medida del

cambio. El cambio puede medirse en términos absolutos o relativos. Porejemplo, el cambio absoluto en el rendimiento del maíz en el Area 1 es de

300 libras (1631 - 1331) y el cambio relativo, del 23% (100 x 300/1331).Ambas medidas son útiles, pero el cambio relativo suele ser la máspertinente para fines comparativos. El Cuadro 6 presenta este tipo de

resultados.

- 146 -

Cuadro 6

Maíz y maní: Cambios porcentuales en el rendimientomedio por acre y en la producci6n bruta, 1971-72

CAMBIO PORCENTUALArea

M a í z' M a n í

Rendimiento Producci6n Rendimiento Producción

1 23 10 -38 -26

2 32 32 0 -15

3 66 49 -1 +3

4 58 46 -22 -40

5 -6 -8 -24 -21

TODAS LASAREAS 35 29 -16 -21

Una serie de cuadros en un informe importante requiere con frecuencia que

se presenten las áreas en el mismo orden con el fin de evitar confusiones.

Sin embargo, el rendimiento relativo de una serie de áreas podría indicarse

ordenándolas según su grado de desviación respecto al nivel medio de

rendimiento. Así, un proyecto de 10 áreas podría arrojar los resultados

siguientes:

Area 7 4 10 1 8 9 5 2 3 6

Rendimiento (%) 50 55 55 60 65 70 75 80 95 105Desviaci6n dela media (71%) -21 -16 -16 -11 -6 -1 +4 +9 +24 +34

Algunas características comunes de las áreas próximas entre sí en la

ordenación podrían recomendar una actuaci5n de la gerencia. Por ejemplo,

si las áreas 3 y 6 están siguiendo una práctica no adoptada en ninguna otra

parte, tal vez ésta debiera implantarse en otras áreas.

- 147 -

FIGURE 9

TARGET AND PERFORMANCE BY AREA

140

1202 2

4

100110

5

S80 3

06

60 6 9

40 - 1

720 -

020 40 60 80 100 120 '140

TARGET

- 148 -

Cabe seialar que un rendimiento excesivo (obtener resultados

superiores a las metas previstas) requiere algún tipo de reacción, al igualque un rendimiento insuficiente. Si las operaciones crediticias en un área

superan a las previstas, se necesitarán suministros adicionales de

fertilizantes, semillas, etc.

Las cifras absolutas de las metas y rendimientos por área se

pueden representar en un gráfico, utilizando dos ejes para representar la

meta y el rendimiento, respectivamente. Los datos del Cuadro 7 se

representan en dicha forma gráfica en la Figura 9.

Cuadro 7

Meta y rendimiento por área

Area Meta Rendimiento Area Meta Rendimiento

1 24 35 6 51 59

2 102 112 7 38 25

3 65 68 8 140 82

4 132 105 9 96 62

5 100 90 10 114 95

Toda área cuyo rendimiento sea igual a la meta se encontrará en

la diagonal; los puntos que aparecen debajo de la diagonal representanáreas que no han alcanzado sus metas, mientras que los puntos superiores

representan aquéllas que las han rebasado. La longitud de la desviación

vertical del punto respecto a la diagonal representa el grado de ladeficiencia (o del rendimiento excesivo en su caso). En este ejemplo, las

áreas con las metas mayores arrojan un rendimiento insuficiente y susrespectivas deficiencias son considerables.

No siempre es necesario reaccionar ante fluctuaciones de corto

plazo dentro de las unidades individuales de información. Para estoscasos, los gráficos de rendimientos acumulados representan la situaci6n de

forma conveniente. En la Figura 10 se ofrecen tres perfiles. Estos son

muy simples en el sentido de que suponen unas metas que van aumentando en

forma lineal a lo largo del tiempo (o sea, aumentan en la misma cantidad

- 149 -

absoluta para -períodos de tiempo iguales). El perfil (i) representa unaactividad que empez6 razonablemente bien, pero que luego empeor6. Indicatambién la manera en que se pueden insertar líneas de advertencia y c6mo seemprenden acciones cuando las actividades descienden por debajo de ciertonivel de control. Existen técnicas de sumas acumuladas más complejas parael control de calidad estadística. El perfil (i) indica una actividad quecomenzó mal, pero que luego se mejoró. Como las oportunidades perdidas alprincipio no pudieron recuperarse, se estableci6 un nuevo conjunto demetas. El perfil (iii) representa un rendimiento oscilante. Cabe señalarque la relación entre las pendientes de las líneas de metas y de logrosentre los períodos indica si la actividad está retrocediendo aún más (lapendiente de la línea del rendimiento es menor que la de la línea de lameta), manteni5ndose (las pendientes son iguales, o sea, líneas paralelas)o alcanzando la meta prevista (la pendiente de la línea del rendimiento esmayor que la de la línea de la meta).

Los tres ejemplos comienzan con la misma meta. Este tipo degráficos puede presentarse en forma porcentual (la meta al final del últimoperíodo = 100%) y se podrán entonces comparar las diversas unidadesinformativas, aun cuando sus respectivas metas difieran en términosabsolutos.

En numerosos casos, el interés se centra en la tasa de cambio yno en la cuantía absoluta. Si una serie cronológica se representagráficamente utilizando una escala semi-logarítmica, una línea rectarepresentará incrementos relativos iguales por unidad de tiempo, o sea, unatasa de cambio constante. Si no se dispone de papel semi-logarítmico, sepodrá utilizar papel cuadriculado ordinario, convirtiendo primero los datosa logarítmos y dibujando luego los valores logarítmicos en lugar de losabsolutos. Los números negativos no pueden acomodarse utilizando estemétodo ya que no existen logaritmos de éstos.

Los gráficos semilogarítmicos son tambián útiles cuando la escalade la variable correspondiente al eje vertical abarca un intervalo muyamplio, por ejemplo, de 100 a 100.000. Este suele ser el caso cuando sehacen comparaciones entre regiones de tamaños muy diferentes.

Al examinar la relación que existe entre dos variables, en la queuna representa una causa y la otra un efecto, se puede utilizar un diagramade dispersión como medio visual. De este modo, si se representangráficamente los rendimientos en comparación con las cantidades defertilizantes empleadas, el diagrama resultante podría permitirnos verfácilmente cualquier relaci6n o su ausencia. Este es un primer paso, muyconveniente, antes de proceder a un análisis de relación más formalutilizando técnicas de regresión (como veremos más adelante). En especial,un examen visual de un diagrama de dispersi6n podría evitar la realizaciónde un análisis de regresi5n inapropiado.

FIGURE 10CUMULATIVE PERFORMANCE GRAPH

(1) (ll)ill))300

T-TARGET T T TA = ACTUAL

250

WarningLines 3/4 of

Target A

.. s 2/ of 'Reset

Target / Targets / *A

I150 - ,/

c /

Catching100 / Up

Falling

i * /Behind

4 Matching Rate ofTarget Change

in Periodo I I I l l I*Il I I I I I

1 2 3 4 5 61 2 3 4 5 6 1 2 3 4 .5 6TIME PERIOD

- 151 -

9.6 Descripci6n y medici6n de la desigualdad

La desigualdad y la medida en que ésta cambia constituye unmotivo de preocupación en los proyectos agrícolas y de desarrollo rural.

La medida más simple es la proporción del beneficio o de losbienes que está en posesi6n del segmento más pobre de la población. Porejemplo, podría decirse que el 60% de los agricultores poseía el 20% de lasuperficie cultivable. Se trata, desde luego, de una medida aproximada, yaque la distribución puede moverse hacia una mayor o una menor igualdad sinque la cifra en el punto de corte sea afectada sensiblemente.

Para efectos comparativos, la desigualdad puede precisarse mejormediante la curva de Lorenz y el índice de Gini asociado a la misma.Efectivamente, estas dos medidas combinan una serie de relacionesporcentuales como las que hemos mencionado anteriormente. Los datos seponen en forma de porcentajes acumulados, como se puede ver en el ejemplosiguiente, utilizando los datos de la distribuci6n de las explotacionesagrícolas por área (Cuadro 8). La curva de Lorenz se obtiene registrandoen el diagrama dichos números acumulados, según se indica en la Figura 11.El mayor o menor grado de desigualdad está representado gráficamente por elárea sombreada entre la diagonal y la curva; cuanto mayor sea esta área,tanto mayor será la desigualdad.

Cuadro 8: Distribución del tamaio de las explotaciones

Estrato de tamaño Porcentaje acumulado Porcentaje acumulado(Hectáreas) de explotaciones de superficie

0 - 1,0 4,4 0,71,1 - 2,0 19,0 5,42,1 - 3,0 33,3 13,13,1 - 4,0 45,5 21,64,1 - 5,0 61,5 36,05,1 - 6,0 70,1 46,16,1 - 7,0 78,8 56,07,1 - 8,0 84,9 65,08,1 - 9,0 87,8 69,79,1 - 10,0 92,3 78,110,1 y más 100,0 100,0

El índice de Gini es la porci6n que dicha área rayada ocupa en elárea de todo el triángulo en que está situada la curva. Se puede calcular

- 152 -

FIGURE IlLORENZ CURVE FOR DATA IN TABLE 8

100

90

80 -

zW 70 -

W 60

3 5

40 -

20 -: .2::::n:2:::::::li:::::

10

0 10 20 30 40 50 60 70 80 90 100

FARMS (CUMULATIVE PERCENT)

- 153 -

de la siguiente manera empírica:

(a) Tomar la suma (T1) de las multiplicaciones cruzadas de laforma siguiente:

4,4 0,7

19, 0 5,4

33,3 13,1

... y así sucesivamente ...

92,3 78,1

100,0 100,0

(b) Tomar la suma (T2) de las multiplicaciones cruzadas en ladirección opuesta:

4,4 0,7

1,9, 0 5,4

33,3 13,1

y así sucesivamente

92,3 78,1

100,0 100,0

TI --T2(c) El índice de Gini es =

10.000

Debe hallarse comprendido entre 0 y 1, y en este caso sería0,354.

Cabe seialar que la primaera columna de porcentajes acumulados serefiere a las undidades (explotaciones, personas, etc.) entre las que sedistribuye el "beneficio" (superficie, ingreso). La segunda columnarepresenta el porcentaje del "beneficio" en posesión de la unidadesmencionadas en la primera columna. Los datos en la primera columna seregistran a lo largo del eje horizontal ("k"); los datos en la segundacolumna, a lo largo del eje "y". Se emplea la misma escala para ambosejes.

- 154 -

Si se comparan dos distribuciones, la distribución con el mayor

coeficiente de Gini es la menos equitativa. Pero esta regla ha de

interpretarse con cuidado, porque se pueden presentar dos casos diferentes:

(a) La curva de Lorenz para la distribución A está comprendida

completamente dentro de la distribuci6n B. Por lo tanto, la

conclusión de que la distribución B es menos equitativa que

la distribuci6n A es inequívoca.

(b) El índice de Gini para la distribuci6n B es mayor que el de

la distribción A, pero las curvas de Lorenz de las dos

distribuciones se cruzan cuando se trazan en el mismo

diagrama. Esto indica que la distribuci6n B es menos

equitativa que la distribuci6n A en parte del recorrido,

pero más equitativa en otra parte. Las conclusiones sobre

la desigualdad relativa dependerá de si nuestro interés se

centra en toda la distribuci6n o solamente en parte de ella.

Los índices de Gini ofrecen una conveniente primera ordenaci6n de

las desigualdades, pero no debe darse demasiada importancia a las pequeñas

diferencias que existan entre ellas. Estas estarán influidas por los

errores en los datos recogidos, que suelen ser grandes para las variables

utilizadas para investigar la desigualdad; por la forma en que se agrupen

los datos, y, finalmente, si se han utilizado datos muestrales, por las

fluctuaciones muestrales. Por lo tanto, si bien los índices de Gini son

indicadores útiles, las conclusiones sobre cambios significativos en las

desigualdades relativas han de basarse en un examen detallado de las

distribuciones originales.

9.7 Cuadros 2 x 2

Uno de los métodos más corrientes para indicar diferencias en el

comportamiento es mediante un cuadro 2 x 2. En el Cuadro 9 (a) se ofrece

un ejemplo típico. Las letras que figuran en el Cuadro 9 (b) se utilizarán

para presentar los resultados en términos generales.

- 155 -

Cuadro 9

(a) Adopci6n de la práctica por los agricultoresdel proyecto y los de fuera del proyecto

Adoptan No adoptan Total

Agricultoresdel proyecto 180 70 250

Agricultoresde fuera del 60 90 150

proyecto

Total 240 160 400

(b) Cuadro (a) en forma general

sí (1) No (o) Total

Dentro (1) a b (a + b)

Fuera (0) e d (c + d)

Total (a + o) (b + d) n = (a+b+c+d)

La diferencia entre las proporciones "que adoptan"correspondientes a los agricultores del proyecto y de fuera del proyecto dauna idea de los resultados del proyecto. La diferencia en las proporcionesse calcula de la forma siguiente:

A partir del Cuadro 9 (a) A partir del Cuadro 9 (b)

180 60 p1 = a/(a+b) P2 = c/(c+d)Pl - P2 = -- - -

250 150 a c ad - bcPl p2 = -

= 0,32 a+b c+d (a+b)(c+d)

- 156 -

Si se comparan varios cuadros, se pueden comparar los p1 y los P2· Sinembargo, se han ideado medidas sencillas de una sola cifra.

Un método de una sola cifra es el de la probabilidad relativa ode la Razón de probabilidad (RP), que es la razón entre la probabilidad deque un agricultor del proyecto adopte y la probabilidad de que unagricultor de fuera del proyecto adopte. Los resultados correspondiente alcuadro 9 son los siguientes:

A partir del Cuadro 9(a) A partir del Cuadro 9(b)

180 60 180 x 90 a c adRP= =RP=-

70 90 60 x 70 b d be

La razón de probabilidad puede tomar valores entre 0 e infinito.Cuanto mayor sea el RP, tanto mayor será la probabilidad para el primergrupo en relación con el segundo. Los valores comprendidos entre 0 y 1indican una relación negativa, o sea, los agricultores de fuera delproyecto están adoptando más que los agricultores del proyecto. Losvalores superiores a 1 indican una relación positiva.

Para hacer comparaciones entre una serie de cuadros, una medidacomprendida entre -1 y +1 podría ser más conveniente. Un ejemplo de estetipo de medida es el Coeficiente de Yule, que se calcula de la formasiguiente:

A partir del Cuadro 9(a) A partir del Cuadro 9 (b)180 x 90 - 60 x 70 ad - bc

Q = Q =180 x 90 + 60 x 70 ad + bc

= 0,59

Q se concibió originalmente como una medida de asociación y sepuede aplicar a este caso ya que una diferencia en la probabilidad deadopción para los agricultores del proyecto y de fuera del mismo equivale auna asociación entre "estar en el proyecto" y "adoptar la práctica"recomendada por el mismo.

Q toma valores que varían entre 0 (disociación) y +1 en unadirección (asociación perfecta positiva) y -1 en la otra (asociaciónperfecta negativa). Cuanto más alta sea la cifra, tanto mayor será lapotencia de la asociación que resume. Q y R se relacionan de la formasiguiente:

- 157-

RP - 1Q =

RP + 1

Un RP de 3 equivale a un Q de 0,5.

Otra medida que se utiliza algunas veces es el coeficiente decorrelación r (que toma también valores comprendidos entre -1 y +1). Lafórmula corriente del coeficiente r puede expresarse de la forma siguiente(utilizando la asignación de los c6digos o claves numéricas 0 y 1 delCuadro 9.b):

A partir del Cuadro 9(a) A partir del Cuadro 9(b)

ad - bc12000 r =

r =2fl x 150 x 240 x 60 (a+b) (c+d) (a+c) (b+d)

= 0,316

El resultado del coeficiente r tendrá el mismo signo que Q (ya que elnumerador es el mismo, y se toma siempre la raíz positiva en el denominadordel coeficiente r) y r estará siempre más próximo a 0 que Q. Se recomiendafrecuentemente (véase la Sección 9.9) que se considere el valor de r2 enlugar del de r, ya que r2 equivale a la proporción de la variaci6nexplicada. El valor de r2 en este caso es igual a sólo 0,1.

Sin embargo, el coeficiente de correlaci6n es más apropiado paravariables cuantitativas que para las cualitativas. Cualquier par devariables cuantitativas podría convertirse en dos variables de tipocero-uno partiendo cada una de ellas en un punto dado. Por ejemplo, lasdistribuciones de los gastos de los agricultores y de las áreas que elloscultivan ofrecen la base que permite construir un cuadro 2 x 2 formandogrupos designados:

Gastos Explotaci6n

Elevados Grande

Bajos Pequena

Podrían calcularse, entonces, los valores de Q pero ellos varíanen función de los puntos de partición escogidos.

- 158 -

La cantidad (ad - bc) se da tambi1n en otra medida utilizada

frecuentemente. Sup6ngase que no existe en la realidad ninguna asociación

entre las dos variables. En este caso, cabría, pues, esperar que los

agricultores (a + b), los agricultores (c + d) y el total de agricultores

se dividirían en la misma proporción. En la casilla en que se encuentra a,

cabría esperar que el número satisfaga:

a a + c

a + b n

de donde,

Valor previsto en la primera casilla (a + b) (a + c)

en el supuesto de no asociaci6n es =n

El número realmente observado es a, y, por tanto, la diferencia (D1 1 )

entre el valor observado y el previsto es:

A partir del Cuadro 9(a) A partir del Cuadro 9(b)

(180 x 90) - (60 x 70) (a+b) (a+c) ad - bc

D11= = 30, D11 = a-

400 n n

Si se mantienen los totales de los márgenes constantes, se observará que

D11 D22 = -D12 = -D2 1 . Es evidente que cuanto mayor es la magnitud

(ad - bc)/n,. tanto más grande será la diferencia que existe entre el valor

observado y el previsto en el supuesto de no asociaci6n y tanto más fuerte

la evidencia en favor del punto de vista alternativo de que existe una

asociación entre las variables.

Utilizando esta característica, una prueba corrientemente

utilizada para medir las fluctuaciones muestrales, conocida con el nombre

de "Ji-cuadrado" (o "Chi-cuadrado"), se calcula de la forma siguiente:

- 159 -

A partir del Cuadro 9(a) A partir del Cuadro 9(b)

400(12000)2 n(ad - bc) 2

250 x 150 x 240 x 160 (a+b) (a+c) (b+d) (c+d)

= 400(0,316)2 o, sustituyendo r de laf6rmula indicada másarriba:

= nr2

Si no hubiere asociación entre las variables, las muestras que dieren comoresultado un valor de X2 mayor que 1 ocurrirían, por término medio, una vezpor cada tres muestras, y los valores mayores de 3,8 ocurrirían únicamenteuna vez por cada veinte muestras. Una razón para calcular esta cantidadparticular es que constituye una base c6moda para combinar resultadosprovenientes de una serie de cuadros muestrales análogos. Si la asociaci6nen todos los cuadros (digamos k cuadros) tiene la misma direcci6n (o sea,si el valor (ad - bc) tiene el mismo signo en todos los k cuadros), sepodrán sumar todas los X2 de los cuadros y comprobarse al nivel deseadocomparándolo con el valor de X-2 con k grados de libertad (los detalles seexponen en la mayoría de las tablas estadísticas).

Las medidas de una sola cifra son tan s6lo una primera etapa delanálisis, y la reducción de los datos a cuadros de 2 x 2 podría resultaruna simplificación excesiva. Cabe igualmente observar que la descripci6nde estas medidas tiene un carácter preliminar únicamente. Los efectos delas características de los diseiños muestrales (por ejemplo, aglomerados) nose han considerado todavía. Pero se puede realizar rápidamente a mano unanálisis inicial de este tipo, que podría ser valioso para indicar siexiste una posible relación que justifique un análisis más detallado bajouna dirección experta.

9.8 Normalización

La normalizaci6n es un procedimiento para compensar lasdiferencias estructurales que existen entre los grupos o áreas que secomparan. Supongamos que la disposición y capacidad de los agricultorespara recibir crédito est5n asociadas con el tamafño de sus explotaciones, yque sean, por lo tanto, las áreas agrícolas más extensas las que, portérmino medio, vayan probablemente a recibir crédito. Las diferenciasrelativas en la absorción porcentual global de crédito en las áreas delproyecto podrían deberse a diferencias existentes en la eficaciaadministrativa o a diferencias en las distribuciones de las explotacionespor tamaño (u, obviamente, a otros factores que no se consideran aquí). En

- 160 -

el Cuadro 10 se ofrece una ilustración numérica de ello:

Cuadro 10: Diferencias relativas en la absorción de crédito poráreas debidas a diferencias estructurales

Tamañode la ex- Area A Area B

plotación

Propor- Porcentaje Propor- Porcentajeci6n de absorci6n Producto ci6n de absorción Producto

(1) (2) (1)x(2) (3) (4) (3)x(4)

Pequeio 0,50 18 9 0,33 18 6

Medio 0,25 36 9 0,33 36 12

Grande 0,25 72 18 0,33 72 24

Porcentajeglobal deabsorción 36 42

por área

La tasa global de 42% del Area B parece a simple vista mejor que la tasa de

36% del Area A, pero la diferencia se debe a la mayor proporci6n de

explotaciones más pequeñas en el Area A.

La normalización aborda este problema comparando. los resultados

globales con los que se hubiera obtenido si las tasas específicas se

hubieran equiparado con una, estructura uniforme, o normalizada, que suele

ser ordinariamente la estructura para toda la región estudiada. Por

ejemplo, si se supone que las proporciones de explotaciones por tamaño en

toda la región del proyecto son 0,5; 0,3 y 0,2, las cifras normalizadas se

calcularían de la manera siguiente (se indican únicamente las tres primeras

áreas):

- 161 -

Cuadro 11: Cálculo de las tasas normalizadas

Area A Area B Area CTamañode la ex- Proporción % de Pro- % de Pro- % de Pro-plotación normalizada absorci6n ducto absorci6n ducto absorci6n ducto

Pequeio 0,5 18 9,0 18 9,0 20 20,0

Medio 0,3 36 10,8 36 10,8 35 10,5

Grande 0,2 72 14,4 72 14,4 75 15,0

Porcentaje global deabsorción por área (normalizado) 34,2 34,2 35,5

Las tasas normalizadas globales para las Areas A y B son iguales,como debe ser,. Estas tasas normalizadas pueden utilizarse también paraproprocionar medidas del comportamiento relativo, al compararlas con latasa porcentual global de absorci6n del área del proyecto. Supongamos queésta es del 30%. Por lo tanto, un índice apropiado de comportamientosería:

Area A 34,2/30 x 100 = 114

Area B 34,2/30 x 100 = 114

Area C 35,5/30 x 100 = 118

La normalización puede también aplicarse a más de unacaracterística estructural, si así se desea. Este método se ide6 paracomparar tasas de mortalidad, y es realmente semejante al que se utiliza enla construcción de números indices.

9.9 Advertencias sobre los análisis de correlaci6n y regresión

Al investigar las relaciones causales de un proyecto se empleanfrecuentemente métodos de correlación y regresión. En la presente Secci6nnos ocupamos brevemente de algunos de los peligros que éstos llevanconsigo, que aconsejan prudencia al sacar conclusiones de los mismos.

- 162 -

Una máxima metodol6gica tradicional dice así: "la correlaci6n no

demuestra la causalidad". La correlaci6n de un efecto con un tratamiento

identificado es una prueba útil únicamente si los resultados de otras

causas posibles se han eliminado. Así, por ejemplo, si bien la producci6n

puede haber aumentado, el aumento puede deberse a los mejores precios de

mercado y no al fertilizante adicional empleado. Por el contrario, el

fracaso de un proyecto podría explicarse por un cambio imprevisto en la

estructura general de los precios y no como consecuencia de un fallo

interno.

La correlaci6n de series cronol6gicas produce con frecuencia

inferencias err6neas. Un coeficiente alto de correlación podría deberse

simplemente a los efectos independientes del tiempo sobre las dos series y

no a una relación causal entre ellas. Vale la pena, por tanto, observar si

las dos series de las primeras diferencias (o sea, los cambios de un

período a otro) obtenidas de los datos originales están también

correlacionadas. Si el valor de esta segunda r es también elevado, se

aumenta la confianza de que existe una relación real entre las dos series.

Un estudio de los residuos (las diferencias entre las

observaciones originales y sus estimaciones obtenidas del modelo estudiado)

es necesario para determinar la aplicabilidad del modelo. Las tendencias

demostradas por los mismos podrían indicar la manera en que se puede

perfeccionar el modelo; por ejemplo, si las observaciones originales están

dispersas a lo largo del tiempo y los residuos muestran una tendencia en el

tiempo, la adici6n de un término "tiempo" al modelo podría mejorarlo.

Además, los coeficientes de correlación sirven para medir la correlaci6n

lineal. Una sólida correlación no lineal podría ocultarse en un valor del

coeficiente falsamente bajo. Los datos y los residuos se han de analizar

siempre con el fin de comprobar si el supuesto de linealidad es apropiado.

Una segunda razón para estudiar los residuos es la de comprobar

si algunos de los supuestos sobre la estructura de los errores del modelo

son válidos. Por ejemplo, el modelo clásico de regresi6n lineal requiere

que la variabilidad de la variable dependiente sea constante en toda la

gama de valores de las variables independientes. Si los residuos indican

que no sucede así, puede ser necesario realizar alguna transformación de

las variables independientes. Las pruebas de significaci6n y los

intervalos de confianza requieren ordinariamente que los residuos en el

modelo tengan una distribución normal, o al menos aproximadamente normal.

Por consiguiente, un estudio de los residuos puede evitar inferencias

incorrectas.

Otro error corriente es el que se conoce como el "sofisma

ecol6gico" y se presenta cuando las correlaciones entre las variables

medidas sobre agregados de personas no aparecen cuando se calculan en los

individuos. Así, pues, puede haber correlaci6 n a un nivel agregado

(digamos, por distrito) entre el nivel de instrucción y la actividad

- 163 -

comercial, pero, cuando los datos se consideran a nivel individual, puedehaber poca correlaci6n entre la educaci6n y la habilidad e iniciativacomercial o industrial. En realidad, un problema general con loscoeficientes de correlaci6n es que su valor puede aumentarse agregando losdatos utilizados para calcularlos.

De todos modos, el valor de r no es frecuentemente la cifra máspertinente. Un valor de 0,5 para la correlaci6n entre el tratamiento y losindicadores de efecto puede parecer elevado; pero realmente lo que indicaes que el tratamiento explica el 25 por ciento (0,52) de la variaci6n en elindicador de efecto. Si el valor de r es igual a 0,2, todavía a ciertadistancia de cero, el tratamiento explica únicamente el 4% de lavariación. Tal vez se preste demasiada atención al obtener un resultadocon "significaci6n estadística". Con frecuencia, ésto es meramente unsigno que indica que el efecto bajo investigación no va a producirsesimplemente por azar. Este signo no ofrece necesariamente una orientaci6npara la significaci6n substantiva o de política de la relaci6n; lo que hacees simplemente evitar la pérdida de tiempo que se daría al volver aexaminar una relaci6n aleatoria. Muchos resultados de correlaci6n y deji-cuadrado estadísticamente significativos revisten escaso interés oimportancia para fines de política.

Tal vez el problema más grave que se plantea al utilizar losmodelos de regresi6n en el contexto del presente Manual sea el efecto delos errores de medici6n. Cabe sefialar que estos errores no son erroresmuestrales y que pueden afectar las variables independientes. Ellosrepresentan la diferencia entre el valor real de una variable paracualquier entrevistado y la cifra que se registra en la entrevista y seutiliza efectivamente en el análisis. La relación en cuesti6n consiste enque el valor incluido en el análisis para el individuo i-5simo, xi, no esnecesariamente igual al valor real de Xi, en el que el error es igual ae¡. Por consiguiente, tenemos que:

xi = Xi + e¡.

Los valores de los errores e¡ pueden ser positivos o negativos, ypueden, por supuesto, ser iguales a cero. Los errores pueden serintroducidos durante el proceso de depuraci6n o codificaci6n, pero surgenmás comunmente durante la obtenci6n de los datos en el terreno. Gran partede las discusiones que se presentan en otras partes de este Manual tienenpor objeto minimizar estos errores.

Cuando se trata de un modelo sencillo de regresión con unavariable independiente, el valor "real" de su parámetro b está relacionadocon el valor calculado b mediante las ecuaciones:

- 164 -

b 1

b = -- = b --R R

en donde R es la "confiabilidad" de la medición de la variableindependiente. Este resultado se denomina a veces el efecto de

"atenuacion"

varianza de XR =

varianza de X + varianza de e

La varianza de e puede expresarse como una proporci6n de la varianza de

var e = k. var.

Por lo tanto, R = 1/(1+k), y 1/R = 1 + k. Así, si k = 0,1, el valor

calculado, -, deberá multiplicarse por 1,1 para corregir el efecto de

atenuación. El valor de k puede ser hasta 0,2 8 0,3, especialmente cuando

se trata de preguntas de actitud y de percepción o de períodos largos de

recuerdo.

La situaci6n es más complicada con la regresi6n miltiple.Citemos, por ejemplo, el cuadro siguiente calculado por Cochran: 1/

Cuadro 12: Valores de bl, b;? cuando b1 = 2, bp = 1

(R1 y R2 son las confiabilidades de las dos variablesindependientes y r es su correlaci6n).

r = +0,3 r = -0,3

R2Rl = 0,6 0,8 1,0 R1 = 0,6 0,8 1,0

0,6 11 1,25 1,68 2,13 1,10 1,48 1,87

2 0,74 0,66 0,58 0,44 0,51 0,58

1,20 1,63 2,06 1,13 1,52 1,94

0,99 0,89 0,78 0,59 0,69 0,78

1,15 1,57 2,00 1,15 1,57 2,00

1,25 1,13 1,00 0,75 0,87 1,00

1/ W.G. Cochran: "Errors of Measurement in Statistics", Technometrics,

¯ 10(4), 1968, pág. 657.

- 165 -

Aun cuando la segunda variable se mida sin error, se observará en la filadel fondo que 92 todavía puede sobreestimar o subestimar b2 -

Los errores de medici6n aumentan considerablemente los problemasde la utilización de razones y proporciones como variables en los modelosde regresi6n.1/ Un estudio reciente de esta cuesti6n arroj6 los resultadossiguientes: 2 7

Cuadro 13: Efecto de errores aleatorios de medición en la correlaci6nentre una raz6n (Y/Z) y su componente común (Z) en que los dosestan relacionados linealmente

Varianza del error en YVarianza del erroren Z como p,rcenta- Ninguna La misma proporciónje de la varianza que en Ztotal

Correlaci6n Pendiente Correlación Pendienter b r b

0,00 1,000 1,000 1,000 1,0000,05 0,899 0,901 0,812 0,9010,10 0,797 0,798 0,660 0,7980,20 0,586 0,588 0,420 0,5880,30 0,368 0,372 0,232 0,372.0,40 0,139 0,143 0,075 0,1430,50 . -0,101 -0,109 -0,065 -0,1090,60 -0,346 -0,433 -0,203 -0,4330,70 -0,351 -2,315 -0,316 -2,315

Se observará que cuando el error de medici6n es significativo, tanto b comor (la estimación de r) tienen el signo erróneo.

/ Se obtiene una razón, por ejemplo, si se calcula la correlación entre larazón entre los gastos en alimentos (denomidados, digamos, Y) y losgastos totales (Z), como variable dependiente, y los gastos totales(Z), como variable independiente.

2/ S.B. Long: "The Continuing Debate over the Use of Ratio Variables:Facts and Fiction", Sociological Methodology, 1980, pág. 55.

- 166 -

Desafortunadamente, es difícil calcular los errores de respuesta

en las encuestas individuales sin planes complicados que incluyen muestras

interpenetrantes (véase la Parte 7), una parte especial de la encuesta

piloto o una encuesta de control. Respecto a los enumeradores que

investigan grupos equivalentes de encuestados, la variabilidad en los

resultados obtenidos por los enumeradores respecto a una variable podrían

compararse con la variabilidad entre los resultados medios de los

enumeradores. Los detalles son complejos y no se estudiarán aquí.

Para concluir, deberá insistirse en que los métodos de

correlaci6n y regresi6n son esenciales. Sin embargo, el fácil acceso a las

computadoras ha dado lugar a una proliferaci6n de análisis superficiales,

en que datos deficientemente depurados son elaborados cqn programas

pre-diseiados, seguidos de interpretaciones mecánicas de los resultados.

El grado en que hasta los propios expertos pueden disentir sobre los

métodos adecuados y las interpretaciones de los resultados pone de

manifiesto la envergadura de los problemas. Se espera que las advertencias

que se hacen en esta sección puedan contribuir a evitar el cometer ciertos

errores.

- 167 -

PARTE 10

PRESENTACION DE LOS DATOS

10.1 Conversión de los datos en información

Los recopiladores y elaboradores de datos se olvidn a veces deque los usuarios necesitan información breve y presentada con claridad y noun gran volumen de cifras de difícil asimilación. Los directores deproyecto y los planificadores que examinan los resultados obtenidosnecesitan que los sistemas de seguimiento y evaluación les proporcioneninformación que esti orientada hacia la adopción de decisiones.Corresponde a los encargados de estos sistemas convertir los datos en esetipo de información.

Cuando no se efectúa esa transformación, los efectos pueden irdesde la falta de ejecución de la etapa final del proyecto hasta laparalización completa de iste, según ilustran los ejemplos siguientes:

(a) Los datos permanecen en los cuestionarios, sin analizar ysin valor alguno.

(b) Se preparan cintas magnéticas que contienen grandescantidades de datos, que no se utilizan debido a la falta deprocedimientos adecuados de validación o de documentación.

(c) Las impresiones tabulares, extensas y con gran detalle, sequedan en los archivos cubrigndose de polvo.

(d) Los informes contienen cuadros resúmenes bien presentados yderivados de una encuesta efectuada para obtener datosbásicos, pero el usuario solamente los puede obtener al finaldel proyecto.

(e) Los informes están llenos de pruebas de significación,análisis de varianza, matrices de correlación, etc., pero nollegan a ninguna conclusi5n ni proponen ninguna opción paratomar medidas concretas.

La conversión de los datos en información para su presentación alusuario se ve facilitada si se siguen las siguientes directrices:

(a) El nivel adecuado de detalle y de desagregación debe variarsegún el nivel del usuario.

- 168 -

(b) La definici6n de las variables y los encabezamientos de las

tabulaciones deben ser claros para el usuario, el cual no

siempre poseerá conocimientos matemáticos o técnicos de los

temas de que se trate.

(c) La profundidad del análisis estadístico debe adaptarse al

nivel del usuario.

(d) La disposición tabular, incluida la utilización de

promedios, índices de dispersi6n, coeficientes, etc., debe

ser sencilla y clara, una serie de cuadros sencillos de dos

entradas puede ser mejor que una clasificaci6n complicada de

cuatro entradas en la que cada casilla contenga entradas

correspondientes a números absolutos, porcentajes, medias,

etc.

(e) El texto que acompaRe a los cuadros debe resumir los puntos

más destacados que surjan de aquéllos, indicando las

conclusiones que puedan deducirse.

(f) Los gráficos y otros diagramas son especialmente itiles para

concentrar el interés del usuario y contribuir a que

comprenda el tema.

10.2 Presentaci6n de la informaci6n

Conviene tener presente las siguientes preguntas fundamentales:

(a) ¿A quién va dirigido el material?

(b) ¿En qué fecha y con qué frecuencia se necesita el material?

(c) ¿En qué formato debe presentarse?

Entre los que reciben la informaci6n de los sistemas de

seguimiento y evaluación figuran:

(a) El funcionario de un organismo que contribuye directamente a

la ejecución de un componente del proyecto.

(b) El director del proyecto.

(c) El comité interministerial de coordinación.

(d) El planificador sectorial.

(e) Altos funcionarios de ministerio a nivel nacional.

(f) Los organismos financieros, nacionales e internacionales.

- 169 -

En general, al progresar a lo largo de esta escala, lainformaci6n presentada tiene que ser más breve, requerir menosconocimientos técnicos para comprenderla y estar más orientada hacia lapresentación de conclusiones y opciones para la toma de decisiones. Estono quiere decier que, por ejemplo, el planificador sectorial no pueda pedirluego los datos originales, a fin de llevar a cabo análisis adicionales.Pero cuanto más alejado de un proyecto específico se halle el usuario, másprobable es que pasen por su mesa muchos otros informes semejantes deproyectos diversos. Si éstos son sucintos, resulta más fácil determinarmediante una ojeada inicial los que requieren un estudio más a fondo.

La comunicación satisfactoria de informaci6n depende en granmedida de que su entrega se cumpla con una frecuencia convenida deantemano. El mejor informe carece de valor si la decisi6n a la que debierahaber contribuido ha tenido que tomarse ya. La falta de confianza que confrecuencia tienen los que ejecutan los proyectos en sus unidades deseguimiento y evaluación suele deberse a que no se fían, basándose en laexperiencia, de que vayan a disponer de la informaci6n necesaria en elmomento oportuno. Si se sigue el consejo dado en este Manual de adoptarprocedimientos sencillos de recopilaci6n de datos y de utilizar fuentes ymétodos adecuados, hay mayores posibilidades de que no se produzcanretrasos.

La disponibilidad de informaci6n en el momento oportuno se vetambién facilitada si se establecen en una etapa inicial las necesidades deinformación y los plazos en que se necesitará ésta. Si se inicia unestudio longitudinal utilizando muestas grandes, es evidentemente imposiblepresentar durante bastante tiempo informes sobre los resultados. Quizáhacía falta un tipo distinto de encuesta. Por definición, los resultadosde una medici6n objetiva del rendimiento de una cosecha no pueden darse aconocer antes de la recogida de ésta. Si hay que tomar decisionescruciales antes de la cosecha y para tomar esas decisiones hace falta unaestimación de la producci6n probable, lo que hay que realizar es unaencuesta sobre las previsiones de la cosecha como complemento de laencuesta ulterior, más exacta, o como sustituto de ésta.

La frecuencia con que deba comunicarse la informaci6n es unasunto que deben convenir el usuario y el analista, aunque ese acuerdotendrá escaso valor si el mecanismo de recopilaci6n y análisis de datos nopuede diseñarse o ajustarse según convenga. Puede necesitarse informaci6nsencilla sobre el progreso rutinario en la ejecución del proyecto semanal omensualmente. Los promedios móviles de los datos relativos a insumospueden comunicarse mensual o trimestralmente. Las encuestas para obtenerdatos estacionales o cíclicos deben organizarse de manera que faciliten lapresentaci6n de informes dentro de un plazo fijo después de ocurridos loshechos que se registran, según se haya convenido de antemano parasatisfacer las necesidades del usuario. Los estudios de casos y lasencuestas especiales encaminadas a resolver problemas específicos no

- 170 -

encajan en un plan de informes periódicos, pero sí deben llevarse a cabo

cumpliendo fechas fijadas para su terminaci6n.

A veces se pueden satisfacer las necesidades del usuario mediante

informes trimestrales, semestrales o anuales. con mayor frecuencia, esos

ciclos fijos no son adecuados para este fin. Lo más importante es que haya

flexibilidad. Las estimaciones aproximadas, escritas a mano si fuera

necesario, pueden ser muy valiosas si se dispone de ellas a su debido

tiempo.

Sobre todo, hay que comunicar inmediatamente, cualquiera que sea

el plan cronológico normal de los informes, el descubrimiento de un

fenómeno inesperado, tanto si es como resultado de un análisis rutinario de

los datos como si es resultado de una visita al terreno. Es erróneo

esperar hasta que esté listo el informe completo sobre la encuesta y es

imperdonable presentar los descubrimientos importantes de manera que queden

enterrados entre el material ordinario.

Por consiguiente, es preciso estar dispuestos a comunicar

resultados provisionales y aproximados si éstos son significativos.

Desafortunadamente, quienes tienen temor de cometer un error tienden a

pecar de excesiva precaución. El comprobar cuidadosamente los hechos

sorprendentes, evaluar con deliberaci6n y evitar conclusiones apresuradas

son atributos valiosos, pero también es necesario estar dispuesto a

formular el juicio más acertado posible basado en la informaci6n de que en

ese momento de disponga.

La evaluaci6n, que es un proceso más deliberativo, puede llevarse

a cabo con un calendario menos apremiante. Será necesario un análisis más

profundo y una presentaci6n más completa. No obstante, pueden ocurrir

hechos que exijan que se adelante o acelere la evaluaci6n, a fin de

determinar las consecuencias probables, entre ellas la necesidad de

modificar los procedimientos de ejecuci6n.

La informaci6n sobre el proyecto puede comunicarse de diversas

maneras, mediante:

(a) Comunicaci6n verbal, extraoficial.

(b) Actualización peri6dica de gráficos o diagramas sobre la

2 pared de la oficina.

(c) Exposici6n minuciosa en las reuniones relativas al proyecto.

(d) Comunicaciones por escrito en las que se describan los

resultados importantes y urgentes obtenidos.

(e) Informes peri6dicos resumidos de carácter informativo.

- 171 -

(f) Informes oficiales de los resultados de las encuestas.

(g) Exámenes analíticos de los datos básicos del proyecto.

(h) Análisis de problemas específicos, con recomendaciones.

En la sección siguiente se considerarán los informes que sepresentan oficialmente. Lo que, sin embargo, se descuida muchas veces sonlas modalidades de comunicación verbal y gráfica.

La actualizaci6n peri6dica de un diagrama en la pared de laoficina del director del proyecto, en el que aparezcan las entregas de losinsumos en comparaci6n con las metas fijadas, puede ser considerada por eldirector como un aporte importante del sistema de seguimiento. Enviar losimpresos de la computadora por el correo interno no es lo mismo quereunirse durante media hora con el director del proyecto y pasar revistacon él a esos impresos, seialándole los aspectos más destacados. Nosolamente es ésto útil de por sí, sino que sirve también para familiarizaral director con configuraciones poco usuales de los datos, de manera quecon el tiempo pueda hacerse referencia a los mismos con facilidad y sin quesea necesario presentarlos personalmente. La posibilidad de establecer esetipo de relaci6n depende de que el grupo encargado del seguimiento estéintegrado en la estructura de la gerencia.

10.3 Presentación de informes

Los sistemas de seguimiento y evaluación deben generar diversostipos de informes. El formato que deba adoptar un informe dependerá nosolamente del tipo de usuario al cual vaya destinado, sino también de lafuente de la información que haya de comunicarse.

Los informes sobre visitas de supervisi6n han de prepararseinmediatamente después de regresar y referirse al itinerario, reunionescelebradas, observaciones efectuadas e impresiones generales que se hayanobtenido, junto con las recomendaciones sobre las medidas que convengaadoptar.

Los resultado de estudios o encuestas deben incorporarse en uninforme, aun cuando se hayan utilizado métodos más rápidos para comunicarlas conclusiones más urgentes e importantes. En dichos informes se deberáindicar los asuntos investigados, la metodología del estudio, losresultados tabulados y las conclusiones.

La recopilaci6n de series cronol6gicas con fines de evaluaci6npuede no tener una fecha límite. No obstante, será necesario analizarperi6dicamente estas series y preparar informes especiales para comunicarlas tendencias que se deduzcan, actualizando los análisis anteriormenteefectuados. Dichos informes se concentrarán en las comparaciones a lo

- 172 -

largo del tiempo y será preciso efectuar análisis con cierta profundidad y

con rigor estadístico.

Por último, están los informes peri6dicos sobre la situación

general del proyecto, que reúnen todos los materiales pertinentes

provenientes de las diversas fuentes descritas en la Parte 5, que van desde

los registros administrativos hasta las grandes encuestas a los

beneficiarios. Estos informes presentan un panorama general del progreso

realizado por el proyecto y ofrecen los medios para tomar decisiones en

cuanto a ajustes o modificiaciones de las metas del proyecto y susprocedimientos de ejecución. La periodicidad de estos informes (por

ejemplo, semestral o anual), es asunto que debe decidirse al comienzo del

proyecto. Los informes no deben ser tan frecuentes que absorban un tiempo

excesivo del personal directivo, con lo cual se haría difícil mantener la

comunicación rápida y regular de los asuntos importantes, según se ha

descrito en la sección anterior.

En vista de la amplia gama de info mes necesarios no es posiblerecomendar un formato específico de informe. Sin embargo, pueden ofrecerse

ciertas directrices de validez general.

(a) Presentación de los datos

Diferentes usuarios requieren grados distintos de detalle. Los

cuadros resfimenes y los diagramas satisfacen las necesidades de muchos,

pero otros querrán datos menos agregados y redondeados, a fin de efectuar

nuevos análisis. Dentro del proyecto ésto no constituye un gran problema;

el informe debe ofrecer un resumen, haciendo referencia a la fuente de los

datos o a los impresos de computadora a los que el personal del proyectopuede tener acceso. A las autoridades superiores seguramente les bastará

el resumen, aun cuando también en este caso sigue existiendo la posibilidad

de tener acceso a los archivos. Cabe observar que el acceso a los archivos

principales del proyecto por parte de usuarios que no sean los encargados

inmediatos debe tener lugar de acuerdo con un sistema previamente convenido

de autorizaci6n. Pueden surgir cuestiones de confidencialidad de los

datos. Si los archivos se mantienen en discos magnéticos o en cintas de

computadora, es preciso proteger éstos para que no se efectúen cambios no

autorizados en los registros.

Además de presentar cuadros resúmenes, el informe deberá contener

medidas resumidas de la distribuci6n de los datos en los cuadros. En la

Parte 9 se han presentado comentarios preliminares sobre algunas de estas

mediciones. El redactor del informe deberá tener en cuenta que muchos de

los usuarios no se darán cuenta de que pueden deducirse conclusiones

err6neas hasta de parámetros sencillos. Una simple media aritmética de una

distribución muy asimétrica pueden dar lugar a que el usuario saque

conclusiones erróneas si no se le seiala la asimetría, o si no se utiliza

simultáneamente otra medida que no sea de distribución, como, por ejemplo,

la mediana.

- 173 -

Considérense, por ejemplo, los siguientes ingresos antes ydespués de una intervenci6n (para mayor facilidad se presentan únicamentediez resultados, pero la tesis es válida para cualquier número de datos):

Cuadro 14: Ingreso por beneficiario

Ingreso

Beneficiario Antes Después1 20 252 50 753 30 254 40 405 35 306 25 307 80 1408 30 259 60 10010 30 40

Total 400 530

Media: 40 53Mediana: 30 30

La media ha aumentado pronunciadamente debido al gran aumentologrado por los beneficiarios (No. 2, 7 y 9) que ya eran los más ricos; lamediana no ha variado.

Los procentajes pueden tambi5n confundir, a menos que se utilicencuidadosamente. Es corriente presentar los porcentajes para cada una delas casillas en un cuadro de doble entrada de manera que la suma de 100 seobtiene únicamente sumando las hileras y las columnas. La mayor parte delos usuarios no perciben mucho cuando examinan este tipo de cuadro, ya quehay una tendencia automática a suponer que los porcentajes sumen 100 en unasola dirección, ya sea vertical u horizontalmente. Si se decide presentarlos datos de esta manera, puede ser importante la dirección que se elija.Supongamos un ejemplo sencillo de una muestra de 400 explotaciones en treszonas, clasificadas según el número de parcelas de terreno que posean.

- 174 -

Cuadro 15: Número de explotaciones según elnumero de parcelas de terreno

Número Zonade parcelas A B C Total

1 100 20 16 1362 60 60 24 1443 40 40 40 120

Total 200 120 80 400

Poco es lo que puede deducirse de un examen casual del cuadro,

excepto que hay más agricultures en la zona A. En cambio, examinese el

Cuadro 16, que expresa los mismos datos, pero en forma de porcentaje para

cada zona.

Cuadro 16: Distribuci6n porcentualde las parcelas por zonas

Número Zonade parcelas A B C

1 50 17 202 30 50 303 20 33 50

Total 100 100 100

Esto da a conocer con claridad que los agricultores de las tres

zonas tienen distribuciones muy distintas en lo que respecta a

fragmentación de sus tierras, siendo el número modal respectivamente 1, 2,

y 3. Por otra parte, si se pusieran los porcentajes a lo largo de las

hileras no se percibiría nada, excepto quizá las mayores dimensiones de la

zona A.

Aun cuando estos ejemplos son simplistas, ha habido muchos"casos

en que por haberse escogido mal la direcci6n para calcular los porcentajes,

no se percibió bien lo que las cifras querían decir.

- 175 -

Si se utilizan cuadros con frecuencias agrupadas, es aconsejablemantener igual la amplitud de cada intervalo de clase, a excepción de unaclase de valor máximo abierta. Si se varía la amplitud de los intervalosde clase, el usuario puede deducir conclusiones err6neas sobre el caráctermodal o la asimetría de la distribución.

(b) Atribuci6n de exactitud y significaci6n

Tanto si los datos presentados provienen de registros como deestudios de casos o de encuestas muestrales, el que los presenta debe hacerreferencia a la exactitud probable de los datos e indicar qué resultadosson significativos en vista de los márgenes de error existentes.

El análisis de los registros administrativos posiblementepresente pocas dificultades si se basa en un examen de todo el archivo, quese supone incluye todos los casos pertinentes. No obstante, puede variarla calidad del método aplicado para llevar los registros, y conviene hacernotar esas variaciones.

Como se ha examinado en la Parte 6, los estudios de casos hacenque el informador tenga que tomar una decisión difícil en relaci6n con lavalidez general de los resultados, basándose en muy pocos casos. Como yase ha indicado, normalmente no será posible sacar deducciones de un númerolimitado de casos (que quizá han sido elegidos intencionadamente) que seanaplicables a la población general. Así sucede sin duda en el caso deestimaciones numéricas de totales, proporciones,- etc. Sin embargo, unestudio de casos tendrá por objeto analizar las relaciones internas de lasvariables que hacen que ocurra un determinado fen6meno. Si aparece unapauta uniforme, puede hacerse una inferencia verosímil en cuanto a lacausalidad del fen6meno, el cual, puede pensarse, probablemente se repitaen otros casos en que existan circunstancias análogas. Es decir, lainferencia de la causalidad y de las relaciones puede hacerse de manerageneral, basándose en la verosimilitud, mientras se ejerza una ciertacautela. Por ejemplo, mediante un estudio de casos se puede examinarminuciosamente a unos cuantos agricultores que adoptaron una ciertarecomendación del proyecto y a unos cuantos que no la adoptaron. Sup6ngaseque se descubre que la resistencia a adoptar el nuevo sistema de cultivo sedebi6 lógicamente a que se percibi6 que la demanda máxima de mano de obrade la nueva práctica coincide con un período en que hay escasez detrabajadores agrícolas. Supóngase, asimismo, que los que adoptaron lanueva práctica cuentan con más mano de obra familiar que los que no laadoptaron y, por lo tanto, aquéllos no percibieron la dificultad. Laconclusión de que la adopción o no adopción se ve afectada por ladisponibilidad de mano de obra familiar puede ser una inferencia verosímilválida para la población general de la zona, aun cuando el número de losafectados por la disponibilidad limitada de mano de obra no puedacalcularse basándose en el estudio.

- 176 -

Para comunicar esos resultados hace falta pericia en la

interpretación y presentación de los datos. Hay que resistir la tentación

de pretender demasiado, especialmente cuando la tendencia no sea uniforme o

esté deformada por diversos factores ajenos al proyecto. Puede ser válido

concluir que no puede apreciarse una pauta perceptible y, por lo menos,puede rechazarse un conjunto de hipótesis, evitándose que la gerencia se

concentre en eliminar un factor limitativo que no es pertinente.

Los resultados de las encuestas muestrales, cuando éstas están

debidamente disefiadas y son bien ejecutadas, permiten efectuar inferenciasnuméricas aplicables a la población general con márgenes calculables de

error muestral. En la Parte 7 se expusieron los procedimientos para hacer

esto, aunque desde el punto de vista opuesto (como calcular el tamaio de la

muestra necesario para obtener un determinado error muestral). Las

fórmulas para calcular el margen de error correspondiente a cualquierdiseio de muestras se encuentran en los libros de texto sobre encuestasmuestrales.

Una vez calculado el error muestral, se plantea la cuestión de

determinar qué estimaciones son significativamente diferentes, ya sea entre

sí o con respecto a una norma de comparación, de manera que puedan

deducirse conclusiones con una confianza razonable. También en este caso,

las técnicas correspondientes se encuentran en los libros de texto. En lo

que aquí se hace hincapié, al igual que en la Parte 7, es en el peligro de

que se fije una norma excesivamente rigurosa antes de describir un

resultado como significativo. Si se utiliza el nivel de confianza

"clásico" del 95%, ello significa que toda afirmación de un cambio o

diferencia significativos tiene una probabilidad muy elevada (19:1) de ser

correcta. Si no surge una recomendación de la encuesta, puede suceder que

se mantenga un procedimiento a pesar de que existe, por ejemplo, unaprobabilidad de 3:1 de que. sería beneficioso introducir un cambio. O bien,es posible que el director del proyecto se vea obligado a depender de

juicios subjetivos para tomar una decisión sin estar enterado de que los

datos favorecían, aunque no de una manera cierta, una determinada línea de

acción.

El costo relativo de efectuar un cambio cuando no debiera haberse

hecho, en comparación con dejar sin modificar un procedimiento que

necesitaba cambios, es el factor que determina la decisión relativa al

nivel de confianza que deba atribuirse a las pruebas de significación. Enun caso, puede ser muy alto el costo de efectuar un cambio. Lógicamente se

exigirá una confianza considerable en los datos antes de efectuar dicho

cambio. En otro caso, poco es lo que quizá se pierda si se efectia uncambio de procedimiento, mientras que el dejar que las cosas sigan su curso

puede llegar a significar mala administración. La decisión de efectuar el

cambio en este caso no requiere plena confianza en la significación de los

datos correspondientes.

- 177 -

Con frecuencia no se percibe que las inferencias de los datos dela encuesta pueden ser de gran transcendencia para tomar las decisiones.Dicho en términos más sencillos, es posible que el usuario examine uncuadro de cifras y desee conocer la respuesta a la pregunta: "¿Voy porbuen camino? ¿Están aumentando los rendimientos?" La respuesta"probablemente sí", asociada a una probabilidad de más del 50 por ciento deque sea así, puede ser más útil que la respuesta prudente "no se conoce",basada en la aplicaci5n de normas estrictas de confianza. Esa respuestadebe basarse, por supuesto, no solamente en el aumento efectivo, sinotambién en la consideración de la variabilidad ocurrida en el pasado.

Es posible calcular los errores muestrales, pero muchas veces nopueden calcularse los no muestrales. Ahora bien, como se ha indicado en laParte 7, estos últimos pueden ser cruciales para considerar la exactitud delas estimaciones presentadas. El autor de los cuadros debe tener unconocimiento profundo de las fuentes, métodos utilizados en larecopilaci6n, problemas surgidos en el análisis, etc. Por consiguiente,hay que determinar los probables sesgos y errores de observaci6n que puedanafectar a los resultados, aun cuando esa determinación carezca de laconfirmaci6n matemática que tiene el cálculo del error muestral. Decir quela estimación del producto es x con un error típico de, por ejemplo, 4 porciento, y no mencionar la sospecha de que las mediciones tenían un seriosesgo, es dar una impresi6n de exactitud totalmente falsa. Una descripciónde los procedimientos, el diseño, la metodología, la proporci6n de .respuestas no obtenidas, los problemas prácticos, los resultados de lascomprobaciones sobre el terreno, etc. de la encuesta puede servir paraevitar ésto. Pero, como la mayor parte de los lectores no leen lassecciones de introducción, se tiene que comentar sobre las repercusiones detodo ello en el texto que acompañe a los cuadros.

(c) Utilización de técnicas estadísticas avanzadas

En la Parte 9 se presentaron brevemente algunos de losinstrumentos de que dispone el analista. Muchas de las técnicas soneficaces, pero los resultados son fácilmente mal entendidos por los que noson estadísticos profesionales, categoría a la que pertenece la mayor partede los lectores. Lo que es necesario es comunicar las conclusionessignificativas de una manera inteligible, ayudando al lector a comprenderlos detalles técnicos. Esto lleva a tratar de la cuesti6n del estilo quedeba tener el texto de los informes sobre encuestas.

(d) El texto

El texto que acompaña a los datos numéricos que se presentan enun informe tiene por objeto complementar los cuadros y contribuir de estemodo al proceso de convertir los datos en información. El método depresentación de este complemento esencial y el estilo en el que se redactevariará según sea la persona que escriba; no importa que haya esa

- 178 -

diversidad, mientras se logre el objetivo perseguido, que, en definitiva,es.el de comunicar la informaci6n con claridad al usuario en cuesti6n.

Los informes deberán contener la informaci6n siguiente:

(a) Los temas que se examinen.

(b) La fuente y el período de referencia del material

presentado.

(c) El diseio y ejecuci6n de la encuesta (si se utiliza unaencuesta).

(d) Un resumen de los datos.

(e) Los comentarios necesarios relativos a la exactitud de losdatos.

(f) Un examen de los aspectos preicipales y de las inferenciasde los datos.

(g) Cuando proceda, la presentación de opciones para la toma dedecisiones.

Es preciso considerar cuidadosamente el orden en que se presentenestas secciones. Las secciones (f) y (g) pueden presentarse como resumenal principio del informe, aprovechando al máximo el tiempo limitado de que

dispone el lector para concentrarse en el informe en cuesti6n. Si losresultados son lo suficientemente importantes, puede así asegurarse que el

lector continuará prestando atenci6n al resto del informe. La descripci6n

de carácter general de las secciones (b) y (c) pueden relegarse a apéndices

o presentarse como introducci6n a la parte principal del informe. Dentro

del informe propiamente dicho, (d) puede ser una exposición muy sucinta,

presentándose los cuadros más detallados como apéndices.

No obstante, es importante que cada cuadro resumen vaya

acompaiado de un párrafo o dos de texto en el que se señalen los hechos demayor importancia, se indique su confiabilidad probable y se pongan en su

perspectiva correcta dentro del contexto de la informaci6n que contenganotros cuadros. Como alternativa se puede consolidar el texto en una sola

sección y los cuadros en otra. Esta suele ser la opción menos convenientepor dos razones. En primer lugar, el lector general posiblemente no

consulte los cuadros al leer el texto, de manera que las impresionesobtenidas no cuentan con el fundamento que ofrecen las cifras. En segundo

lugar, numerosos usuarios posiblemente pasen directamente a los cuadros afin de obtener una cifra o serie de cifras. El texto, con susexplicaciones y advertencias, no se consultará, lo cual puede dar lugar a

que se interpreten mal los datos. Estos peligros se reducen al mínimo si

el texto y los cuadros están integrados.

- 179 -

El texto de los informes debe ser breve y de estilo sobrio. Losargumentos deben presentarse de manera clara y bien delineada. Convienetratar por separado las cuestiones secundarias y no debe permitirse queéstas confundan el desarrollo de la tesis principal. Ahora bien, labrevedad no exime al redactor del informe de la necesidad de indicar supropia evaluación de los datos. Cuanto más breve y más agregada sea lapresentaci6n, tanto mayor importancia tiene la forma en que el escritor delinforme guíe al lector para que éste deduzca la interpretaci6n correcta.Los cuadros resúmenes sumamente agregados no pueden ser examinados oinvestigados con mayor detalle por el lector. Por lo tanto, es importanteque el redactor del informe ofrezca los comentarios explicativosnecesarios.

Al usuario de un informe, ya sea éste breve o largo, se le pideque acepte ciertas cosas con plena confianza, es decir, que el informadorha sido objetivo y franco en la manera en que ha reunido los hechos. Puedesuponerse que no se ha introducido una falsificación deliberada, pero laomisión selectiva de datos contradictorios, la remoci6n de datos de sucontexto limitado a fin de generalizar y el comunicar la posibilidad de quehaya sesgos pueden presentar de hecho un panorama falso.

El funcionario que trabaje en seguimiento y evaluaci6n puedejuzgar su éxito en la comunicaci6n de informaci6n útil según el grado enque se le acepte como parte integral y de vital importancia del grupo de lagerencia.