Professional Documents
Culture Documents
(PE-L1122)
Plan de Monitoreo
(PE-L1122)
Inter-American Development Bank 3
Plan de Monitoreo y Evaluacion - PE-L1122
TABLA DE CONTENIDO
I. INTRODUCCION……………………………………………………………...3
II. INDICADORES DE PRODUCTO …………………………………………...3
III. EJECUCIÓN DEL PROGRAMA………………………………………………5
A. Instrumentos para el Monitoreo………………………………………………..6
B. Presentacion de Informes ................................................................................... 7
C. Monitoreo .......................................................................................................... 7
I. INTRODUCCIÓN
A continuación se detallan los productos, indicadores y los hitos que se definieron con la Unidad
Ejecutora así como la forma de medición de los mismos y la fuente de verificación. Estos se encuentran
también detallados en la matriz de resultados de la operación.
El prestatario será la República del Perú y el organismo ejecutor será el MINAGRI, el cual encargará
mediante Resolución al Proyecto de Mejoramiento del Desarrollo Productivo Rural del MINAGRI
(AGRORURAL) para que actúe como Unidad Ejecutora según la práctica usual en operaciones de
préstamo en el país. El proyecto contará con un Comité de Gestión como máxima instancia, el cual será
presidido por el Viceministro de Políticas Agrarias (VMPA) o su representante, y en él participarán
adicionalmente el Director de AGRORURAL y el Director de la Oficina de Estudios Económicos y
Estadísticos (OEEE). Para la conducción del proyecto se contará con una Unidad Coordinadora del
Proyecto (UCP), que estará adscrita a la Dirección Ejecutiva de AGRORURAL.
El Programa AGRORURAL está constituido como unidad ejecutora del MINAGRI, adscrito
al Ministro y con autonomía técnica y administrativa, tiene por finalidad promover el
desarrollo agrario rural a nivel nacional a través del financiamiento de proyectos de inversión
pública en zonas rurales. La OEEE, que es dependiente de la Secretaría del MINAGRI, tiene
a su cargo la conducción del Sistema Integrado de Estadísticas Agrarias. Para la ejecución de
la ENA en el componente I del proyecto se necesitará establecer un convenio con el Instituto
Nacional de Estadística e Informática (INEI), que es un Organismo Técnico Especializado
rector del Sistema Estadístico Nacional.
El Comité de Gestión será una instancia de orientación política del Proyecto, supervisión de la
ejecución, y apoyo a su gerenciamiento, propiciando la resolución de los asuntos gerenciales,
administrativos y técnicos. El Comité, en el cual participará el Jefe de la UCP, tendrá como
responsabilidades, además de la orientación general del Proyecto, aprobar el Manual
Operativo, seleccionar el personal clave de la UCP, aprobar los estados financieros, informes
de gestión y el Plan Operativo Anual. La aprobación del MOP del proyecto por el Comité
de Gestión, en los términos previamente acordados con el Banco, será condición especial
previa al primer desembolso.
La UCP, que será el órgano responsable de gestionar la ejecución de todos los componentes
del proyecto y las tareas de evaluación y monitoreo, tendrá una dependencia directa de
AGRORURAL y una relación funcional con el MINAGRI a través la OEEE. La UCP estará
bajo la responsabilidad de un coordinador general, quien tendrá suficiente autonomía para la
Inter-American Development Bank 7
Plan de Monitoreo y Evaluacion - PE-L1122
Plan Operativo Anual (POA). El POA consolida todas las actividades que serán desarrolladas
durante determinado período de ejecución, por producto y cuenta con un cronograma físico-
financiero. La Unidad Ejecutora presentará semestralmente, como parte integral de los informes
semestrales de seguimiento, el POA y el Plan de Ejecución de Proyecto (PEP) para los siguientes dos
semestres, incluyendo las actividades, cronogramas y presupuestos estimados para los productos
financiados el año anterior y aquellos propuestos para el año siguiente. El POA y PEP finales del
primer año serán incluidos en el informe inicial de la operación.
Plan de Ejecución de Plurianual (PEP). El PEP contiene la programación de la ejecución del
programa, incluyendo calendario de los desembolsos (número y monto de los desembolsos) en
función de los indicadores de desempeño, ya incluidos en la Matriz de Resultados, y el tiempo de
ejecución del proyecto.
Plan de Adquisiciones (PA). El programa sólo contempla la adquisición de bienes y servicios
relacionados y la contratación de servicios de consultoría. Las adquisiciones de bienes y la
contratación de servicios se realizarán de conformidad con las prácticas y procedimientos
establecidos en las políticas GN-2349-9 y GN 2350-9 del Banco y conforme a lo establecido en el
Inter-American Development Bank 8
Plan de Monitoreo y Evaluacion - PE-L1122
Contrato de Préstamo y el Acuerdo y Requisitos Fiduciarios del Programa que incluye el Plan de
Adquisiciones (PA) para los primeros 18 meses. Dicho PA será actualizado anualmente o cuando se
presenten cambios sustanciales, sujeto a la aprobación del Banco. Asimismo, se confirmó que la
revisión de las adquisiciones del proyecto se realizará de manera ex-post, con excepción de
las Licitaciones Públicas Internacionales si las hubiere, que se realizarán siguiendo el
mecanismo de ex-ante, que igualmente podrían ser supervisadas de forma ex-post, siempre
que el ejecutor lo solicite y demuestre capacidad técnica y administrativa para su gestión,
inclusive, flexibilizar los plazos de preparación de ofertas asimilándolos, cuando sea posible,
a los periodos de la normatividad local.
Visitas de Inspección anuales se realizarán con la finalidad de monitorear las actividades del
Programa. El Jefe de Equipo realizará al menos una visita semestral a las obras del Programa.
También se apoyará de Misiones de Administración anuales con el objetivo de analizar los avances
del Programa y tratar temas específicos identificados.
B. Presentación de Informes
La Unidad Ejecutora presentará al Banco los siguientes informes: (i) evaluación de medio término, a
los 90 días contados a partir de la fecha de compromiso del 50% de los recursos del préstamo o cuando
haya transcurrido el 50% del plazo de ejecución, lo que suceda primero; y (ii) evaluación final, a los 90
días contados a partir de la fecha de desembolso del 90% de los recursos. Estos informes incluirán:
(i) análisis de la ejecución financiera por sub-componente y fuente de financiamiento; (ii) avance en
el logro de productos, resultados e impactos; (iii) efectividad en la aplicación del ROP; (iv) nivel de
cumplimiento de las cláusulas contractuales; (v) resumen de los resultados de las auditorías socio-
ambientales; y (vi) resumen de los resultados de las auditorías del programa sobre estados financieros,
adquisiciones, desembolsos y control interno. El informe de evaluación final incluirá además los
resultados de la medición de impacto del programa conforme al plan acordado. Todas las evaluaciones
se realizarán de manera independiente y serán financiadas con recursos del préstamo.
C. Monitoreo
La OEEE elaborará y enviará al Banco, a más tardar 60 días después del fin de cada semestre durante
la ejecución del proyecto, un informe de seguimiento. Estos informes se focalizarán en el cumplimiento
de los indicadores de productos y los avances en resultados, la identificación de problemas encontrados
y las medidas correctivas adoptadas. La OEEE presentará a satisfacción del Banco, a más tardar dentro
del último trimestre de cada año durante la ejecución del programa, el POA correspondiente para el año
siguiente. Durante la ejecución del programa se realizarán dos evaluaciones independientes, una
intermedia y una final. La evaluación intermedia será presentada al Banco a más tardar 90 días después
de que se haya ejecutado el 50% de los recursos del préstamo, y la final, a más tardar 90 días después
de que se haya ejecutado el 90% de los recursos del programa.
Las principales actividades relacionadas con el monitoreo del programa, su costo de implementación,
el principal responsable y fuente de financiamiento están detalladas en la Tabla 2. Estas actividades son
responsabilidad del Banco y de la unidad ejecutora y serán financiadas principalmente con recursos del
programa, presupuestos de supervisión y presupuesto administrativo.
Inter-American Development Bank 9
Plan de Monitoreo y Evaluacion - PE-L1122
PERU
(PE-L1122)
INDICE
1. Introducción………………………………………………………………….…………3
1.1. Antecedentes………………………………………………………….…………….3
1.2. Objeto de la Evaluación………………………………………………….…………4
2. Revisión de Literatura……………………………………………………...……………5
4. Metodología de Evaluación…………………………………………………………....11
4.1.Modelo causal de Evaluación…………………………………………...…………11
4.2. Metodología propuesta de Evaluación…………………………………………….13
4.3.Consideraciones específicas para la evaluación del
Proyecto de Información Estadística Agraria…………………………………...…14
4.4.Evaluación alternativa del Proyecto de Información Estadística Agraria…….......18
11
Inter-American Development Bank 12
Plan de Monitoreo y Evaluacion - PE-L1122
1. INTRODUCCIÓN
Este componente financiará las actividades necesarias para diseñar en detalle y poner en
marcha el proceso de licitación, contratación y supervisión de empresas privadas para que
provean información de precios y oportunidades de negocio a agricultores pequeños y
medianos vinculados con los mercados. El componente incluye además recursos para
proveer el apoyo financiero que será necesario otorgar a las empresas, para complementar
lo que estas cobren directamente a los beneficiarios, durante un período máximo de 3 años,
estimado como la duración máxima antes de que sean financieramente sostenibles. La
contratación de las empresas se hará mediante una licitación pública internacional, la cual
tendrá como uno de los criterios de asignación minimizar el valor presente del apoyo
financiero solicitado.
12
Inter-American Development Bank 13
Plan de Monitoreo y Evaluacion - PE-L1122
Este documento tiene como objetivo presentar el diseño del plan de evaluación de impacto
del proyecto PE-L1122 que se enfocará en evaluar el componente II del proyecto.
Con información disponible del Censo Agropecuario 2012 se seleccionan las zonas donde se
concentra la evaluación, dentro de las provincias de Cusco preseleccionadas1, sobre la base
de criterios como la tenencia de celular, el porcentaje de productores de papa amarilla, papa
blanca y maíz amiláceo, el tamaño de las zonas, etc.
1
Según información de la consultoría de Marcela Samarotto se intervendría en las provincias de Cusco,
Acomayo, Anta, Calca, Canas, Canchis, Chumbivilcas, Paruro, Paucartambo, Quispicanchi y Urubamba.
13
Inter-American Development Bank 14
Plan de Monitoreo y Evaluacion - PE-L1122
2. REVISIÓN DE LITERATURA
Existe cada vez mayor evidencia sobre el impacto del uso de las nuevas tecnologías de
información y comunicación (TIC). El uso de las TIC permite la difusión más rápida y
transparente de la información. Las implicancias son más importantes en el caso particular
de los países en desarrollo ya que se ha demostrado que las poblaciones tienen la posibilidad
de aumentar la productividad así como el bienestar. El gran potencial de las TIC para los
pobres implica una mejor comprensión de sus necesidades así como la ampliación de sus
conexiones con los mercados, los servicios y las redes sociales que hacen uso de las TIC
(Chong, 2011).
Sin embargo, las desigualdades en el acceso a las TIC sigue siendo importante principalmente
en los países en desarrollo. Cabe resaltar que el acceso depende principalmente de los
recursos, mientras que el uso está relacionado con la demanda (Di Maggio, Harggitai, Celeste
y Shafer, 2004). En este sentido, es también esencial que exista una demanda que no solo
acceda a estas nuevas tecnologías pero que tenga la capacidad de poder manejarlas.
Las TIC ofrecen alternativas nuevas e innovadoras a los países en desarrollo en distintas áreas
de la economía, como la salud, educación, industria, agricultura, etc. La literatura que
presentamos a continuación se centra en evidencia que se ha recogido a través de
evaluaciones de impacto del uso de las nuevas tecnologías de información y
comunicación en el sector agrícola.
Según lo señalado por Fafchamps & Minten (2011), los pequeños productores pueden
beneficiarse del desarrollo de las TIC por medio de distintos canales, como por ejemplo:
- Mayor información puede llevar a los agricultores a realizar una mejor asignación de
los factores de producción.
- La información puede mejorar la posición de negociación de los pequeños
agricultores además de mejorar la competencia entre ellos.
- Los agricultores pueden utilizar la información para seleccionar entre la diversidad
de mercados cercanos y los mercados finales.
- Los agricultores pueden utilizar la información para tomar decisiones en torno a la
fecha de comercialización.
2
E-choupal, literalmente “punto de encuentro electrónico de la aldea”, es una iniciativa de ITC, la filial India
de British American Tobacco. ITC, escogió un agricultor exitoso es cada aldea a fin de proporcionarle una
computadora. Dicho agricultor daba acceso a todos los agricultores de la zona para que puedan mantenerse al
tanto de los precios de la soya y decidir cuando y donde vender sus cosechas.
3
Cabe resaltar que el servicio brindado para los agricultores no tiene costo.
14
Inter-American Development Bank 15
Plan de Monitoreo y Evaluacion - PE-L1122
esta intervención. Asimismo constata que en áreas en donde existe acceso a la información,
hay un aumento significativo en el precio mensual de la soja en los mercados agrícolas al por
mayor. Los agricultores obtuvieron un aumento de entre 1 y 5% mayor que en zonas en donde
la información sobre el mercado era menos transparente. Además de ello, se constató una
disminución en la dispersión de los precios.
Al igual que Goyal (2010), Jensen (2007) demuestra que la adopción de los teléfonos
celulares por parte de los pescadores mayoristas en el sur de la India está asociada a una
reducción en la dispersión de precios, así como una mejora en el funcionamiento de los
mercados rurales mediante el aumento de la competitividad de los compradores.
4 Sin embargo, el precio por el servicio, en el momento del estudio, era de $1.5 mensual.
15
Inter-American Development Bank 16
Plan de Monitoreo y Evaluacion - PE-L1122
Pineda, Agüero y Espinoza (2010) evalúan el efecto de las TIC en los agricultores de
hortalizas de Honduras. Mediante un diseño experimental se establecieron dos grupos de
cultivadores: el grupo tratado, el cual recibía información a través de mensajes en el teléfono
celular sobre los precios de mercado de las hortalizas y el grupo de control, el cual no recibía
dicha información. Los agricultores que recibieron la información redujeron los diferenciales
frente a los precios promedio del mercado en comparación con quienes no los recibieron.
Además, declararon haber obtenido precios 12,5% más altos en promedio, gracias a que
contaron con mejor información de mercado. Cabe resaltar que el efecto de la intervención
fue menor entre los agricultores con parcelas más grandes de tierra cultivada.
En el caso peruano, Nakasone (2013) estudia experimentalmente el impacto que tiene sobre
pequeños productores agrícolas el acceso a información de precios de mercado en Junín. En
concreto, la intervención del estudio consiste en proveer información actualizada sobre los
precios de mercado que es enviada mediante mensajes de texto vía celular. Los celulares
fueron programados de tal manera que su única función era recibir la información sobre
precios y fueron entregados luego del periodo de cosecha. Los objetivos del estudio son: (i)
demostrar si la información provista provoca que los agricultores puedan vender más y a
mejores precios y (ii) analizar si existe algún efectos de spill-over entre los hogares que no
reciben la información, pero que son cercanos a los que sí la recibieron. Con respecto a la
muestra utilizada, el autor selecciona de manera aleatoria 26 villas para ser intervenidas de
un conjunto de 58, todas ubicadas en el Valle del Mantaro. En las restantes, ningún hogar es
intervenido. Dentro de cada villa tratada, el autor selecciona (nuevamente de manera
aleatoria) hogares que reciben un celular, y los demás no reciben nada. Para identificar el
efecto de la intervención, se compara los hogares que recibieron el teléfono celular con
aquellos hogares que viven en las villas de control (donde ningún hogar recibió un celular).
Por otro lado, para identificar si hubo spillover effects, se compara los hogares que viven en
las áreas tratadas pero que no recibieron celular, con aquellos que viven en las áreas de
control. El estudio encuentra que los hogares con acceso a la información son capaces de
obtener mejores precios por sus cultivos pues sus precios de venta son 13-14% mayores que
los que no tienen la información. Asimismo se da un incremento en ventas de 19% (sobre
todo de manera directa en el mercado y sin intermediarios), aunque no es estadísticamente
significativo. Por otro lado, no se encuentra efectos de spillover significativos.
3. INDICADORES PROPUESTOS
Para la evaluación de impacto se debe determinar cuáles son las dimensiones que se quieren
evaluar, para lo cual es importante tener claro los objetivos que el proyecto quiere lograr.
Asimismo, el seguimiento se hace sobre la base de unos indicadores definidos, los cuales
también deben estar relacionados con los objetivos del proyecto. Los indicadores se
desarrollan en la Matriz de Resultados del proyecto, la cual muestra los indicadores y medios
de verificación a nivel de impacto y resultados.
16
Inter-American Development Bank 17
Plan de Monitoreo y Evaluacion - PE-L1122
Frecuencia
Medio de
Objetivo Indicador de
Verificación
Medición
Año 1 y 5
Año 1 y 5
- Diferencia en el ingresos
Incrementar los ingresos
agrícola de productores
agrícolas de los
beneficiarios y no
productores beneficiarios
Impacto beneficiarios de los Encuesta de campo
con programas de acceso
pilotos de acceso
a información a través de
información a través de
TICs
TICs
- Porcentaje del área Año 1 y 5
agrícola nacional con
información de
producción y área
Mejorar la calidad de la
sembrada obtenida con
información estadística
Resultado base en encuestas
provista para la toma de Encuesta de campo
Componente I probabilísticas
decisiones de política
- # Productos agrícolas que
agropecuaria
cuentan con información
de costos recolectada con
encuestas probabilísticas
17
Inter-American Development Bank 18
Plan de Monitoreo y Evaluacion - PE-L1122
4. METODOLOGÍA DE EVALUACIÓN
Dada la naturaleza del Componente I (la intervención afecta a todos los productores
agropecuarios) no es posible identificar un grupo de control comparable por lo que se
realizará un análisis reflexivo que compare el indicador antes y después del proyecto. Este
capítulo se focaliza en explicar la metodología que será utilizada para la evaluación de
impacto del Componente II.
Y1i si Di 0
Yi
Y0i si Di 1
Donde Di= {0, 1} denota los estados de exposición al tratamiento, es decir, Di=1 si es que la
observación “i” participa del programa y Di=0, en caso contrario. Para cada observación sólo
uno de estos estados potenciales se realizará y podrá ser observado, por lo que Y0i=0 será el
resultado potencial de la variable Y cuando Di=0, y Y1i =1 cuando Di=1.
Una vez definido los resultados potenciales, es factible definir ahora el efecto causal del
tratamiento en el resultado del agente “i” (en este caso, el agricultor) como Y1i – Y0i la
diferencia entre los dos potenciales resultados.
Como no se puede observar Y0i y Y1i para el mismo individuo al mismo tiempo, no es posible
calcular los efectos causales individuales; sin embargo, se desea estimar el efecto promedio.
Así, tenemos que el efecto promedio del tratamiento en los tratados (ATT por sus siglas en
inglés) viene dado por:
5
Para revisar los beneficios de utilizar resultados potenciales, ver Imbens y Wooldrige (2009).
18
Inter-American Development Bank 19
Plan de Monitoreo y Evaluacion - PE-L1122
ATT E Yi Y0 D 1
ATT E Yi D 1 E Y0 D 1
Así, el impacto del programa (independiente de otros factores) puede ser hallado mediante el
cálculo del ATT, que implica la comparación de la situación observada con la situación
contrafactual E[Y0 | D=1]. Debido a que este último término no se puede observar, es
necesario encontrar una aproximación correcta para el resultado contrafactual de la muestra
tratada, a partir de los no tratados. Para ello, se necesita asegurar la comparabilidad entre el
grupo tratado (D=1) y el grupo de control (D=0), de modo que la única diferencia restante
entre ambos grupos sea la participación en el programa, esto es, el impacto.
El reto entonces para calcular el impacto está en crear un grupo de control comparable para
los individuos beneficiados.
Para poder aislar la influencia de factores externos y poder realizar la evaluación se debe
cumplir el supuesto de independencia condicional. Este supuesto establece que el beneficio
obtenido por los individuos será independiente a su decisión de participar o no del programa
(Lechner 1999; Rosenbaum y Rubin 1983):
Esto se puede observar en la siguiente expresión, que muestra justamente cómo en promedio
los agricultores tratados y los no tratados presentarán las mismas características (tanto
19
Inter-American Development Bank 20
Plan de Monitoreo y Evaluacion - PE-L1122
observables como no observables), así como los mismos resultados esperados en ausencia de
la entrega de la información. En consecuencia, cualquier diferencia en sus desempeños solo
podrá ser atribuido a la entrega de información agraria.
Así, para la obtención del efecto promedio del tratamiento en los tratados (ATT) vendría
dado simplemente por la comparación de los resultados promedio entre tratados y no tratados:
ATT E Yi Y0 D 1
ATT E Yi D 1 E Y0 D 1
ATT E Yi D 1 E Y0 D 0
(Participantes)
Y1
Impacto
(Control)
Y1*
Y0
Intervención
20
Inter-American Development Bank 21
Plan de Monitoreo y Evaluacion - PE-L1122
Las provincias seleccionadas del departamento de Cusco son las siguientes: Cusco,
Acomayo, Anta, Calca, Canas, Canchis, Chumbivilcas, Paruro, Paucartambo,
Quispicanchis, Urubamba (ver mapa 1).
Por tanto, la asignación del tratamiento debe ser llevada a cabo por completo por el
programa y no debe permitir la asignación de acuerdo con la demanda por parte de
los mismos productores. De lo contrario, la aleatorización sería trastocada y se
contaría con un sesgo de autoselección en los resultados de la evaluación de impacto.
6
se decidió centrarse en dicho piloto, debido principalmente a que la información sobre alertas de plagas todavía
no está disponible y, por tanto, es difícil de evaluar. Asimismo, se contaba con una evaluación reciente de un
proyecto semejante para el caso de Junín.
7
De acuerdo con el informe de consultoría de Marcela Samarotto, de diciembre de 2013.
21
Inter-American Development Bank 22
Plan de Monitoreo y Evaluacion - PE-L1122
De esta manera, se cuenta con 75 SEA seleccionados (la lista se incluye en el Anexo
5 del presente informe). De manera aleatoria, la mitad de estas será elegida un
subconjunto será elegido como parte del grupo de tratamiento y control (la mitad en
cada caso).
8
A diferencia de los Centros Poblados, que se definen en función de viviendas y no por parcelas agrarias, de
modo que una Unidad Agraria podría pertenecer a más de un centro poblado.
22
Inter-American Development Bank 23
Plan de Monitoreo y Evaluacion - PE-L1122
Esquema de la Evaluación
Efecto Spill-over
Impacto Piloto
23
Inter-American Development Bank 24
Plan de Monitoreo y Evaluacion - PE-L1122
Por ello, de manera concreta, se planea entregar celulares a aquellos agricultores que
no posean previo a la evaluación, con la intención de no sesgar la muestra. Estos
teléfonos solo podrán recibir mensajes de texto, de modo que solo se evalúe dicho
efecto. Para poder presupuestar este gasto adicional, es importante establecer el
número de celulares requeridos. Para ello, se asume que la proporción actual de
tenencia de teléfono celular entre los agricultores de los 75 SEA seleccionados, es
76%, de acuerdo con la información de Cusco del Informe de la consultoría
desarrollada para este fin9.
En caso exista un inconveniente a lo largo del desarrollo del proyecto y no se pueda controlar
la asignación aleatoria perfecta del tratamiento 10 , se podría considerar el empleo de una
evaluación cuasi-experimental. En particular, se podría emplear una estimación de
diferencias en diferencias (difference-in difference) (Blundell y Costa Dias, 2000). Este
estimador se basa en la comparación de la situación de los individuos que pertenecen al grupo
de tratamiento con respecto a los no tratados antes y después del programa.
La aplicación de esta metodología es posible cuando está disponible, como será en el caso de
la evaluación del Proyecto de Información Estadística Agraria, el valor de una observación
en distintos periodos de tiempo (al menos un periodo antes y un periodo después del
tratamiento). En el caso particular de esta evaluación, el levantamiento de una encuesta de
línea de base responde al interés de poder contar con un valor de comparación previo al
tratamiento, tanto para agricultores tratados como no tratados. La idea detrás de esta
9
Información según el Informe “Consultoría para la Elaboracion del Análisis del Análisis Económico del
Programa de Información Estadística Agraria para el Desarrollo Rural” del consultor Goeffrey Cannock. El
Censo Agropecuario presenta valores mucho menores (39%), pero es importante indicar que esta variable no
ha sido correctamente levantada en el censo, pues se preguntó por el número de celular, y no por si tienen
celular. Así, es posible que muchos agricultores hayan contestado negativamente para preservar su privacidad.
En ese sentido, esto debe ser considerado como un valor mínimo en la tenencia de teléfonos celulares.
10
Esta situación puede darse tanto durante el diseño de la intervención a nivel de factibilidad o durante la
licitación o incluso ejecución del Proyecto. Esto debido a que, por razones operativas o políticas o de alguna
otra índole, se determine que no se podrá asignar la información a agricultores elegidos de forma aleatoria.
24
Inter-American Development Bank 25
Plan de Monitoreo y Evaluacion - PE-L1122
Para el cálculo del tamaño muestral de este estudio, se debe tener en cuenta el mínimum
detectable effect size (MDE), que es la magnitud mínima de resultado o efecto del programa
que se puede detectar, dado un grado de poder (k), un nivel de significancia (α) y la
proporción de individuos ubicados en el grupo de tratamiento (P)11.
Por tanto, en el cálculo del MDE y del tamaño de muestra en este caso, se debe incluir
adicionalmente estos aspectos. En particular, se considera el número de agricultores
encuestados de cada SEA (n); la correlación intragrupo (ρ), que mide la proporción de la
varianza total explicada por la varianza intragrupo; y el número de clusters o, en este caso,
SEAs (J). Se espera que en la medida que la correlación intragrupo aumente, el tamaño de
muestra también tienda a incrementarse, en tanto un nuevo agricultor provee de menos
información con respecto a los individuos previamente encuestados.
Así, el MDE con J grupos de tamaño n cada uno, está dado por:
𝑀𝐽−2 1−𝜌
𝑀𝐷𝐸 = √𝜌 + 𝜎
√𝑃(1 − 𝑃)𝐽 𝑛
11
Se asume que cada individuo proviene de una muestra aleatoria, por lo que se presume que los individuos
son iid, con varianza 𝜎 2 .
25
Inter-American Development Bank 26
Plan de Monitoreo y Evaluacion - PE-L1122
Esta ecuación muestra la relación existente entre poder estadístico y tamaño muestral. En la
medida que el tamaño muestral crece, el MDE crece dado un nivel de poder estadístico.
12
Es importante anotar que a la fecha no se cuenta aún con información específica sobre el piloto de difusión
de información agraria que se desea evaluar (ubicación, etc.), ni sus características específicas; que son
fundamentales para poder calcular el tamaño muestral de la evaluación. Por ello, se desarrolla en el presente
informe un ejercicio, que permita darnos una idea razonable del tamaño muestral, sujeto a ajustarse cuando se
cuente con la información completa.
13
Es importante mantener un MDE bajo, debido a que efectos semejantes encontrados en la literatura académica
se encuentran alrededor de dicho valor. Así, por ejemplo, el impacto hallado en Nakasone (2013) es de 14 por
ciento.
14
Estos celulares se entregarían solo a los beneficiados que forman parte del grupo de tratamiento que no poseen
actualmente celular (es decir, al 24%).
26
Inter-American Development Bank 27
Plan de Monitoreo y Evaluacion - PE-L1122
Área de Intervención x
Grupo de control
Muestra de control
Línea de Base
Grupo de tratamiento
Muestra de tratamiento
28
Inter-American Development Bank 29
Plan de Monitoreo y Evaluacion - PE-L1122
la Unidad de Gestión del Proyecto con una empresa que cumpla una serie de criterios técnicos
y tenga experiencia en campo de levantamiento de información en zonas rurales.
Con el objetivo de hacer un seguimiento a la ejecución del proyecto, así como, en la medida
de lo posible, encontrar y corregir posibles problemas, se plantea elaborar reportes continuos
de ejecución del proyecto. Asimismo, para la evaluación de impacto se plantea el recojo de
información al finalizar el tratamiento (al terminar la siguiente siembra de la fecha de iniciado
el tratamiento
La encuesta final deberá recoger la misma información que la Línea de base y deberá
desarrollarse en la misma época del año para controlar por la estacionalidad del calendario
29
Inter-American Development Bank 30
Plan de Monitoreo y Evaluacion - PE-L1122
agrícola. Deberá cruzarse la información recogida con los registros administrativos que
indican cuántas veces se le envió información a cada uno de los productores del grupo de
tratamiento y qué tipo de información se les envió.
La evaluación de impacto se hará teniendo en cuenta la metodología aprobada para tal fin en
el Plan desarrollado previo al desarrollo de la Línea de Base.
Es importante que el levantamiento de información se realice en la misma época del año cada
vez, de modo que se controlan las estacionalidades de la actividad agrícola, por lo que la
ejecución de las actividades correspondientes al seguimiento y evaluación de impacto se
extienden desde antes del inicio de la ejecución propiamente dicha (la línea de base se recoge
antes de empezar a distribuir la información) hasta después de culminada la ejecución,
recogiendo la encuesta final exactamente cuatro años después de recoger la línea de base15.
Tratamiento (envío de
información)
15
Tener en cuenta la recomendación sobre la temporalidad de la evaluación de impacto.
30
Inter-American Development Bank 31
Plan de Monitoreo y Evaluacion - PE-L1122
El Anexo 3 incluye el presupuesto detallado por cada acción, la siguiente Tabla muestra el
total de costos por acción de seguimiento y evaluación.
Debe tenerse en cuenta que los reportes de ejecución (monitoreo) los llevará a cabo la Unidad
de Gestión del Proyecto.
Para las otras acciones se espera la contratación de empresas o consultores especializados,
cuyas características generales se señalan en la siguiente sección.
Para las acciones que involucren el levantamiento de información se requieren equipos que
cumplan con las siguientes características:
En el caso de la línea de base se requerirá además que el equipo sea capaz de realizar las
pruebas necesarias que aseguren la correcta aplicación y recojo del grupo de control y grupo
de tratamiento.
31
Inter-American Development Bank 32
Plan de Monitoreo y Evaluacion - PE-L1122
Para las acciones de análisis de las encuestas (evaluación de impacto) se requieren equipos
con las siguientes características:
Para las acciones de seguimiento, encargadas a la Unidad de Gestión del Proyecto, se requiere
un equipo liderado por un profesional economista (o afines) con al menos 10 años de
experiencia en desarrollo rural y sector agrario. Dicha persona debe contar con habilidades
para coordinar con las empresas encargadas de la provisión de información.
32
Inter-American Development Bank 33
Plan de Monitoreo y Evaluacion - PE-L1122
Bibliografía
Aker, J.C. (2008), “Does Digital Divide or Provide? The Impact of Cell Phones on Grain
Markets in Niger.”, University of California, Berkeley
Aker, J.C and M. Fafchamps (2011), “Mobile Phones and Farmers.Welfare in Niger”,
University of California, Berkeley
Cannock, G. (2013) “Consultoría para la Elaboracion del Análisis del Análisis Económico
del Programa de Información Estadística Agraria para el Desarrollo Rural”. Informe de
Consultoría.
Chong, A. (Ed). (2011). Conexiones del desarrollo: Impacto de las nuevas tecnologías de la
información. Serie Desarrollo en las Américas (DIA). Washington D.C: BID
DiMaggio, P., E. Hargittai, C. Celeste et al. (2004). “Digital Inequality: From Unequal
Access to Differentiated Use”. En K. M. Neckerman (Ed.). Social Inequality. Nueva York,
Russell Sage Foundation, 355–400.
Goyal, A. (2010), "Information, Direct Access to Farmers, and Rural Market Performance
in Central India", American Economic Journal: Applied Economics, 2 (July 2010): 22-45
33
Inter-American Development Bank 34
Plan de Monitoreo y Evaluacion - PE-L1122
Bank
Pineda Burgos, A., M. Agüero Rodríguez y S. Espinoza. (2010). “Impact of Information and
Communication Technologies on Vegetable Farmers in Honduras”. Washington, D.C.,
Banco Interamericano de Desarrollo. Documento mimeografiado.
Rosenbaum, P. y D. Rubin (1983) “The central role of the propensity score in observational
studies for causal effects” Biometrika Vol. 70 (1), pp. 41-55.
34
Anexo 1: Cronograma tentativo de ejecución de la Línea de Base
Actividad
01 02 03 04 05 06 07 08 09 10 11 12 13 14
FASE 1: Análisis del diseño final del Proyecto
FASE 2: Diseño final de la evaluación de impacto
1 Informe Metodológico
FASE 3: Recolección de información en campo para la Línea de Base
1 Revisión de instrumentos
2 Diseño de estrategia de campo
3 Programa de capacitación para encuestadores
4 Salida al campo: levantamiento de información
5 Organización de la labor de digitación y consistencia
6 Elaboración de las bases de datos
7 Elaboración de Informe de Campo
FASE 4: Evaluación de la calidad de información y Elaboración del informe final
1 Comparación estadítica del grupo de tratamiento y grupo de control
2 Elaboración de la línea de base
3 Elaboración del manual de Evaluación de Impacto
4 Elaboración de Informe Final de línea de base
Inter-American Development Bank 36
Plan de Monitoreo y Evaluacion - PE-L1122
Costo
Línea de Base Cantidad Unidad Costo Total
unitario
Diseño de la encuesta y procesamiento y
evaluación de la calidad de la infomación 25,000.00 1.00 Global 25,000.00
Personal de
Salario de Encuestadores Capacitación 70.00 523.25 campo 36,627.50
Otros costos de capacitación 1,500.00 1.00 Global 1,500.00
Encuestadores-
Salario de Encuestadores Linea de Base 60.00 3689.58 día 221,375.00
Supervisores-
Salario de Supervisores Linea de Base 80.00 737.92 día 59,033.33
Verificadores-
Salario de Verificador Linea de Base 80.00 368.96 día 29,516.67
Personal de
Costos de Transporte 30.00 4796.46 campo - día 143,893.75
Impresión de encuestas de linea de base 1.20 4025.00 Encuestas 4,830.00
Ingreso de Data 15.00 4025.00 Encuestas 60,375.00
36
Inter-American Development Bank 37
Plan de Monitoreo y Evaluacion - PE-L1122
Costo
Línea de Base Cantidad Unidad Costo Total
unitario
TOTAL 632,101.25
Costo
Encuesta Final Cantidad Unidad Costo Total
unitario
Levantamiento de la información,
evaluación de la calidad de la infomación 15,000.00 1.00 Global 15,000.00
Personal de
Salario de Encuestadores Capacitación 70.00 523.25 campo 36,627.50
Otros costos de capacitación 1,500.00 1.00 Global 1,500.00
Encuestadores-
Salario de Encuestadores 60.00 3689.58 día 221,375.00
Supervisores-
Salario de Supervisores 80.00 737.92 día 59,033.33
Verificadores-
Salario de Verificador 80.00 368.96 día 29,516.67
Personal de
Costos de Transporte 30.00 4796.46 campo - día 143,893.75
Impresión de encuestas 1.20 4025.00 Encuestas 4,830.00
Ingreso de Data 15.00 4025.00 Encuestas 60,375.00
Costo
Evaluación de Impacto Cantidad Unidad Costo Total
unitario
Desarrollo de la Evaluación de Impacto: con
información de encuesta de línea de base y 130,000.00 1.00 Global 130,000.00
final; y con información referida a la
ejecución
TOTAL 130,000.00
37
Inter-American Development Bank 38
Plan de Monitoreo y Evaluacion - PE-L1122
TÉRMINOS DE REFERENCIA
Evaluación del Proyecto de Información Estadística Agraria para el Desarrollo Rural
I. Antecedentes
i. El Ministerio de Agricultura y Riego – MINAGRI ha impulsado una serie de experiencias de
generación, acceso y uso de la información agraria en atención a la demanda de los productores
agrarios. En especial destaca la experiencia con el Programa de Servicios de Apoyo para Acceder a los
Mercados Rurales PROSAAMER, implementado durante el periodo 2005 – 2011.
ii. Dada la importancia del acceso adecuado a información relevante para la toma de decisiones
económicas, en especial en el sector agrario, en el que existe una alta incertidumbre y asimetrías de
información que pueden limitar el desarrollo de los agricultores; el MINAGRI, a través de su Oficina
de Estudios Estadísticos y Económicos (OEEE) ha tomado la iniciativa de implementar una
intervención que mejore el acceso a los productores agrarios a información de calidad y oportuna.
iv. El perfil aprobado plantea dos componentes para el proyecto: (i) Generación de Información y; (ii)
Difusión de Información. El fin del proyecto es contribuir a mejorar la productividad y el ingreso de
los agricultores del país, a través de mecanismos que apoyen la generación y difusión de información
relevante para la toma de decisiones y el acceso a los mercados de los productores.
38
Inter-American Development Bank 39
Plan de Monitoreo y Evaluacion - PE-L1122
por parte de los agricultores y de las autoridades locales a través de Tecnologías de Información
y Comunicación (TICs) para mejorar el acceso a mercados.
La evaluación a la que está referido la presente consultoría se concentra en el Componente II del Proyecto
de Inversión Pública. La evaluación busca cuantificar y caracterizar el impacto que puede ser
atribuido directa y exclusivamente al Proyecto de Información Estadística Agraria, en
particular al componente de Difusión de Información a través de Tecnologías de Información
y Comunicación (TICs)
Estos documentos deberán ser entregados a la Unidad de Gestión del Proyecto en versión electrónica e
impresa. El resumen ejecutivo (solo) del informe de evaluación final será traducido en ambos idiomas
oficiales.
El equipo consultor deberá estar liderado por dos profesionales, el primero debe ser un evaluador con por
lo menos 05 años de experiencia en evaluación y el segundo debe ser un experto en temas de información
para el desarrollo agrario.
Líder 1: Evaluador
o Al menos 05 años de experiencia en el diseño, implementación y/o coordinación de
evaluaciones de proyectos educativos y en la supervisión de profesionales junior.
o Estudios de posgrado en economía, gestión pública o afines.
o Habilidad para dialogar con funcionarios del gobierno, producir informes analíticos y
recomendar una acción apropiada.
39
Inter-American Development Bank 40
Plan de Monitoreo y Evaluacion - PE-L1122
40
Inter-American Development Bank 41
Plan de Monitoreo y Evaluacion - PE-L1122
Nombre Código de
Nro. Distrito
Provincia la SEA
1 ANTA ANTA 301
2 ANTA ANTA 1706
3 ANTA ANTA 1802
4 ANTA ANTA 2003
5 ANTA ANTA 2004
6 ANTA ANTA 2005
7 ANTA ANTA 2105
8 ANTA ANTA 2202
9 ANTA ANTA 2301
10 ANTA ANTA 2303
11 ANTA ANTA 2304
12 ANTA ANTA 2401
13 ANTA ANTA 2404
14 ANTA ANTA 2500
15 ANTA ANCAHUASI 802
16 ANTA ANCAHUASI 902
17 ANTA HUAROCONDO 1101
18 ANTA HUAROCONDO 1102
19 ANTA HUAROCONDO 1202
20 ANTA LIMATAMBO 701
21 ANTA LIMATAMBO 702
22 ANTA LIMATAMBO 703
23 ANTA LIMATAMBO 707
24 ANTA LIMATAMBO 710
25 ANTA PUCYURA 108
26 ANTA ZURITE 103
27 ANTA ZURITE 201
28 ANTA ZURITE 202
29 ANTA ZURITE 203
30 ANTA ZURITE 300
31 ANTA ZURITE 601
32 ANTA ZURITE 602
33 ANTA ZURITE 701
34 ANTA ZURITE 704
35 CALCA CALCA 301
36 CALCA CALCA 302
37 CALCA CALCA 400
38 CALCA CALCA 701
41
Inter-American Development Bank 42
Plan de Monitoreo y Evaluacion - PE-L1122
42
Inter-American Development Bank 43
Plan de Monitoreo y Evaluacion - PE-L1122
43