Editor Programa PyMerural Coordinadores de la experiencia Johanna Sánchez Navarro, Asesora de PyMerural Alma Iris Herrera, Soporte Técnico-Plataforma online del SMVI Experiencia sistematizada por Marissa Azmitia Revisión Técnica del Documento Johanna Sánchez, Nidia Pereira y Rudolf Krummenacher - PyMerural Fotografías Programa PyMerural Copyright Oficina de la Cooperación Suiza en América Central Diseño Gráfico y Diagramación Soluciones Creativas Teléfono: (505) 2714 - 1105 E-mail: s.creativas@turbonett.com.ni Para mayor información dirigirse a: Oficina de Swisscontact en Nicaragua: Bolonia, de Lugo Rent a Car 20 varas al sur, Managua, Nicaragua Teléfono: (505) 2268-1147, 2268-2384 Fax: (505) 2264-0695 E-mail: info@swisscontact.org.ni Web: www.pymerural.org Noviembre, 2012 Indice Acrónimos ............................................................................................................ 3 I. Introducción ............................................................................................................. 4 II. Objetivos del Estudio de Caso .................................................................................. 6 III. Metodología ........................................................................................................... 7 IV. El Sistema de Monitoreo y Valoración de Impacto ..................................................... 9 i. Objetivos y propósito del SMVI ......................................................................... 10 ii. Cualidades del Sistema de Monitoreo y Valoración de Impacto ......................... 11 V. Hallazgos ............................................................................................................... 14 i. ¿Cómo se percibe el Monitoreo en el Programa? ............................................. 15 ii. La Responsabilidad Compartida en el SMVI entre Pymerural, Cofacilitadores, 15 Contraparte y Socios ...................................................................................... iii. Los indicadores del sistema ............................................................................ 17 a. Indicadores que miden efectos de las acciones del proyecto ...................... 17 b. Los Indicadores de Desempeño de los Cofacilitadores .............................. 18 iv. El Desarrollo de Capacidades en los Cofacilitadores y sus Resultados ............ 21 a. Capacidades encontradas en los cofacilitadores ......................................... 21 b.El proceso de desarrollo de capacidades .................................................... 21 VI. Aprendizajes y Lecciones aprendidas ...................................................................... 23 Lecciones aprendidas ......................................................................................... 25 VII. Conclusiones ....................................................................................................... 27 Bibliografía .......................................................................................................... 30 Glosario .............................................................................................................. 31 Acrónimos SMVI Sistema de Monitoreo y Valoración de Impacto UNAG Madriz Unión Nacional de Agricultores y Ganaderos filial Madriz UNAG NS Unión Nacional de Agricultores y Ganaderos filial Nueva Segovia MIFIC Ministerio de Fomento de Industria y Comercio MAGFOR Ministerio Agropecuario y Forestal GERSON Cooperativa Multisectorial GERSON GEPROLAM Grupo Empresarial de Productores Lácteos de Madriz DGPSA- MAGFOR Dirección General de Protección y Sanidad Agropecuaria - MAGFOR COOPROCA Cooperativa Multiservicios de Productores Cañeros de Cuidad Antigua R.L. SWISSCONTACT Fundación Suiza de Cooperación para el Desarrollo Técnico I. Introducción Este documento contiene los aprendizajes sobre la implementación y ejecución del Sistema de Monitoreo y Valoración de Impacto (SMVI), del Programa Pymerural. Este Sistema forma parte integral de la estrategia de intervención y se incluye como una responsabilidad compartida en todos los convenios que el Programa suscribe con su contraparte y organizaciones e instituciones cofacilitadoras. La tabla a continuación describe, en términos generales, al Programa. PyMerural Programa del Gobierno de Nicaragua auspiciado por la Cooperación Suiza en América Central y facilitado por Swisscontact. Fecha de inicio y finalización Septiembre 2008 - Abril 2013. Objetivo superior: Contribuir a la generación de empleo e ingresos para hombres y mujeres desfavorecidos en zonas rurales. Objetivos Objetivo de fase: Afianzar la sostenibilidad de la MIPYME en cadenas agroindustriales alimentarias y no alimentarias, y en conglomerados de turismo rural, en sectores y regiones seleccionados en Honduras y Nicaragua Enfoque sistémico para el crecimiento inclusivo, parte del entendimiento del sistema económico, identificando cadenas de valor importantes para la inclusión de poblaciones y territorios menos favorecidos. Estrategias Promoción de Cadenas de Valor, cadenas con oportunidades de mercado con potencial de crecimiento, que a su vez sean compatibles con el potencial de desarrollo competitivo del grupo meta. Desarrollo Económico Local o Territorial, tendrá como punto de partida aquellos territorios donde hay potencial productivo para desarrollar uno o varios eslabones de una o varias cadenas de valor o conglomerados seleccionados. Ejes transversales priorizados Género, medio ambiente y gobernabilidad. Grupo meta directo Instituciones del sector público, organizaciones del sector privado y proveedores de servicios. Sector principal Micro, pequeña y mediana empresa rural en cadenas agroindustriales alimentarias y no alimentarias, y en conglomerados de turismo rural, en sectores y regiones seleccionados en Nicaragua. Contraparte: MIFIC. Cofacilitadores: INTUR, INTA, INPYME/MEFCCA, MAGFOR Contrapartes Cofacilitadores - DGPSA, UNAG Nueva Segovia, UNAG Madriz, Cooperativa y Socios Multisectorial GERSON, Alcaldía de Yalagüina. Socios: VECOMA, CARE, ANF, CEP, ACDI, OIRSA, IICO, etc. Sistema de Monitoreo y Valoración de Impacto Experiencia y aprendizaje del Programa PyMerural en Nicaragua 5 II. Objetivos del Estudio de Caso Los objetivos que orientaron este estudio son: Objetivo General ▪▪ Rescatar los aprendizajes que surgen de la implementación del Sistema de Monitoreo en los proyectos de Pymerural a nivel institucional y personal. Objetivos Específicos Valorar la Responsabilidad compartida del Sistema de Monitoreo de Pymerural y sus cofacilitadores. ▪▪ Identificar aportes de los Indicadores de Desempeño al monitoreo de los proyectos. ▪▪ Rescatar la valoración sobre el desarrollo de capacidades en los cofacilitadores. III.Metodología Recolección de datos de fuentes primarias y participantes La recolección de datos fue organizada a partir del rol desempeñado por la organización y/o institución. Fueron hechas entrevistas y grupos de enfoque, además, tres entrevistas exploratorias del tema con personal de Pymerural, Alcaldía de Yalagüina y UNAG Nueva Segovia. Posteriormente, al definir los objetivos del estudio, se realizaron entrevistas y dos grupos de enfoque. La tabla a continuación expone nombres de participantes y la institución a que pertenecen. Sistema de Monitoreo y Valoración de Impacto Experiencia y aprendizaje del Programa PyMerural en Nicaragua 7 Organización Institución UNAG Filial Madriz Rol Desempeñado Cofacilitador Participantes Cargos GE Omar Jiménez Técnico responsable SMVI x Paula Antonia Méndez Directora Departamental UNAG x UNAG Filial Nueva Segovia Cofacilitador Orestes Herrera Técnico responsable SMVI x Alcaldía de Yalagüina Cofacilitador Lesly Buezo Técnico responsable SMVI x Jaime Monjarretz Planificación de la Alcaldía x Miriam Cruz Coordinadora de Proyecto x MAGFOR-DGPSA Cofacilitador Sergio Herrera Técnico responsable SMVI x PyMerural Unidad Ejecutora Alma Iris Herrera Soporte Técnico del SMVI x Johanna Sánchez Asesora Técnica del SMVI x Nidia Pereira Coordinadora PyMerural x Maura Ligia Zelaya Equipo Técnico SMVI x MIFIC Contraparte Recopilación de datos en fuentes secundarias: La bibliografía revisada fue suministrada por Pymerural. Los documentos estudiados fueron: Sistema de Monitoreo y Valoración de Impacto (SMVI), Manual de Funcionamiento, Manual del Usuario de SMVI, Informe de Indicadores de Desempeño, sector público y privado; Presentación Power Point SMVI y The DCED Standard for Measuring Achievements in Private Sector Development / Control Point and Compliance Criteria Version V, 13 January 2010. x Análisis de los datos Fueron transcritas las entrevistas individuales y los grupos de enfoque, y organizados los datos en matrices. Éstas fueron analizadas con el método hermético, que se basa en la interpretación de lo manifiesto y lo latente del tema, permitiendo explicar las relaciones existentes entre un hecho y el contexto en el cual acontece. Instrumentos para la recolección de datos: Fueron elaboradas las guías para entrevistas y para grupos de enfoque, tomando en cuenta que se entrevistó a personal técnico responsable del SMVI y personal directivo. En este sentido las entrevistas fueron diferentes en algunos aspectos. 8 Entrevista Sistema de Monitoreo y Valoración de Impacto Experiencia y aprendizaje del Programa PyMerural en Nicaragua IV. El Sistema de Monitoreo y Valoración de Impacto El diseño del SMVI proviene del enfoque en que ha trabajado ProEmpresa y Agropyme, y responde a la necesidad que tiene el Programa de acreditar el alcance, y medir e informar sobre los resultados e impactos. El propósito es generar información cuantitativa y cualitativa actualizada, para apoyar la gestión del conocimiento, y dar seguimiento al ciclo del proyecto. (PyMerural, 2010). Diseño del SMVI 1.Los objetivos del SMVI están en función de los objetivos y estrategias del Programa. 2.Identificar las áreas de impacto o campos de observación: a) contrapartes, cofacilitadores y socios; b) asociaciones gremios; c) empresas; d) empleados de las empresas; y e) entorno social, económico y político. 3.Formulación de hipótesis de impacto. 4.Desarrollo del marco de desempeño: indicadores y metas. 5.Desarrollo del sistema de reportes de seguimiento y levantamiento de datos para la evaluación de impacto. 6.Interpretación y retroalimentación de la información. Manual del SMVI, 2012 i. Objetivos y propósitos del SMVI Objetivo General del SMVI ▪▪ Medir la eficiencia y efectividad de las intervenciones del Programa PyMerural, específicamente lo referente a empleo, ingresos y medios de vida, generando indicadores en cada uno de los niveles de la lógica de impacto. Objetivos Específicos ▪▪ Identificar impactos atribuibles al Programa PyMerural. ▪▪ Contribuir a la generación de información, para determinar si es necesario ajustar la estrategia, la planificación y los procesos de los proyectos. ▪▪ Propiciar la participación y retroalimentación de la mayor cantidad de actores, para la gestión del conocimiento y el aprendizaje continuo. ▪▪ Comunicar los resultados del monitoreo, utilizando un mismo estándar y marco conceptual que facilita compartir y comprender la información. ▪▪ Generar información, para la toma de decisiones y el empoderamiento de cofacilitadores y contrapartes. ▪▪ Contribuir a la determinación de buenas prácticas, y lecciones aprendidas. ▪▪ Demostrar la gestión responsable y transparente para la rendición de cuentas. 10 Sistema de Monitoreo y Valoración de Impacto Experiencia y aprendizaje del Programa PyMerural en Nicaragua ii. Cualidades del Sistema de Monitoreo y Valoración de Impacto El SMVI provee información periódica en apoyo a la Gerencia La información se obtiene mediante diferentes mecanismos: estudios externos, el monitoreo de indicadores de impacto, las visitas de campo de los asesores, y los reportes que se extraen de la plataforma online sobre el avance físico y financiero de las actividades de cada una de las intervenciones del Programa. De esta manera, el Sistema sustenta las acciones gerenciales relacionadas con: la planeación, seguimiento de los proyectos, las líneas de base y la aplicación de los instrumentos en apoyo a la MIPYME. Contribuye a la gestión del conocimiento Los informes que genera la plataforma online, así como los que provienen de las visitas de seguimiento, de la medición de indicadores, de los estudios externos, totalizan los insumos básicos para la generación de conocimiento. La información de estos reportes se socializa en diferentes ámbitos: con los cofacilitadores, donde interviene personal directivo y técnico, y en la Unidad Facilitadora, en la que contribuye a la construcción de lecciones aprendidas. Las partes interesadas participan en el SMVI y comparten responsabilidades Contrapartes y cofacilitadores desempeñan un papel en la implementación y el desarrollo de las actividades de monitoreo, y participan desde el diseño de los proyectos donde se acuerdan los indicadores a medir, así como en la implementación del Sistema, es una elaboración conjunta. Este enfoque contribuye al desarrollo de habilidades y capacidades de las partes interesadas. Sistema de Monitoreo y Valoración de Impacto Experiencia y aprendizaje del Programa PyMerural en Nicaragua 11 Es un Sistema definido para medir las intervenciones dirigidas al fomento empresarial Esta cualidad está asociada a la norma DCED ¹, que persigue mejorar la capacidad de establecer indicadores globales y atribuir resultados. El sistema responde a las estrategias de trabajo de Pymerural y a sus ejes transversales. En lo que se refiere a las estrategias, vale exponer, como ejemplo, que desde el enfoque de cadena, se propone la mejora y adaptación de los sistemas de monitoreo y evaluación de la UF, de los socios y de la contraparte. La ilustración siguiente muestra cómo el SMVI está integrado en las estrategias del Programa. El diagrama presenta varios procesos, el color celeste representa la dinámica que sigue el Programa para decidir la selección de una cadena; el color morado indica el desarrollo de capacidades/gestión del conocimiento; en rojo se expone el rol del SMVI observándose que desde la selección de la cadena éste empieza a proveer información para la toma de decisiones. ¹ DCED Comité de Donantes para el Desarrollo Empresarial (por sus siglas en inglés) Desarrollo de Capacidades GC CDE Género RRNN Selección de la Gobernabilidad cadena Prospección Análisis de cadena 2 1 Pre Selección de la cadena Acuerdo de competitividad CDE Decisores Monitoreo y Valoración de Impacto COP Aprobación de intrvenciones sistémicas 12 Sistema de Monitoreo y Valoración de Impacto Experiencia y aprendizaje del Programa PyMerural en Nicaragua 1 Elaboración/definición 2 Actualización Posee Indicadores de Desempeño del cofacilitador El propósito de estos indicadores es medir el efecto producido en los cofacilitadores por la relación de acompañamiento y asesoramiento que Pymerural les brinda en el marco de la ejecución de los proyectos y con el fin de dar un mejor servicio a la MIPYME. Basado en las cuatro dimensiones del desarrollo de capacidades ²: recurso humano, organizacional, redes y marco normativo institucional, fueron definidos indicadores para medir aspectos específicos promovidos por Pymerural: manejo de marco lógico, lógica de impacto, rol facilitador, uso del SMVI, liderazgo/ participación en redes, captación de proyectos e incidencia en marco regulatorio. Mide resultados y evalúa el impacto a nivel de las empresas Evalúa el impacto producido en las empresas por las intervenciones de los proyectos. Se realizan mediciones periódicas a partir de los datos de las Líneas de Base elaboradas al inicio de cada proyecto, en ambos casos se trata de la medición de indicadores estrechamente relacionados con el nivel de cambios previstos para el proyecto, recurriéndose a diferentes métodos para su medición. La tabla siguiente expresa este vínculo. ² Desarrollo de la Capacidad, El concepto Mariposa - http://www.odcpconsult.com/archivos/file34_ Desarrollo%20de%20la%20Capacidad.pdf Nivel de Cambio Tipo de Indicadores Método de Medición- Atribución Reducción de pobreza Mejora el nivel de vida, incremento del ingreso neto y del empleo equivalente Estudios de caso, encuestas cuasi - experimentales Crecimiento económico inclusivo Incremento en ventas, Productividad, Producción, Clientes Estudios de caso Opinión de actores del sector, Encuestas cuasi- experimentales, Análisis de tendencias Cambios en el sistema y/o cadena de valor Adopción de nuevas/mejores prácticas de producción Intervenciones Resultados directos de las actividades Grupo de actividades del proyecto Estudios de caso Opinión de actores del sector Seguimiento a actividades y sus resultados (SMVI Online) Los instrumentos de recolección de información planteados son: plataforma informática, encuestas, estados financieros, estudios de mercado, fotografías y estudios de casos, y sistematizaciones Los objetos de observación a los que está orientado el SMVI son: • Las empresas beneficiarias. • Los cofacilitadores o socios estratégicos. • Los empleados de las empresas. • Las asociaciones o gremios. • El entorno social, económico y político. Sistema de Monitoreo y Valoración de Impacto Experiencia y aprendizaje del Programa PyMerural en Nicaragua 13 Plataforma online es accesible, confiable/segura y disponible Está diseñada de tal forma que pueden acceder a ella todos los participantes en el Programa: la contraparte, la unidad ejecutora y los cofacilitadores. La confiabilidad/seguridad está protegida, porque cada usuario tiene una contraseña para ingresar, limitando a cero las posibilidades de que la información de un proyecto se utilice en otro. Ejemplo de ello es que durante toda la experiencia de PyMerural nunca se perdieron datos de los proyectos. La plataforma está disponible 24 horas al día, 365 días al año, y solamente se requiere de internet. En ella se concentra aproximadamente el 50% de la información de monitoreo. Pymerural utiliza esta información para identificar logros a nivel de actividades. Los aspectos que orientan el funcionamiento de la plataforma online del SMVI son: ▪▪ La importancia de asignar desde su diseño un peso, un porcentaje, que valore la trascendencia de la actividad con respecto al resultado esperado de la misma. ▪▪ El ingreso de datos veraces. Debe proveerse soporte físico de cada una de las actividades reportadas y los comprobantes financieros de la ejecución. ▪▪ Para la ejecución de la Línea de Base, se deben aplicar todos los pasos de una investigación, desde el protocolo hasta el informe y la validación de los hallazgos. 6 Procesa información y emite reportes Usuario 5 Ingresa información Internet 1 4 Obtiene información Seleccione una opción Registro Instrumentos Proyectos 3 Escribe su nombre y contraseña Instituciones Empresas Oferentes Linea de Base Usuario: 2 Se conecta con el sitio web a través de internet 14 Contraseña: Ingresar Sistema de Monitoreo y Valoración de Impacto Experiencia y aprendizaje del Programa PyMerural en Nicaragua V.Hallazgos i. ¿Cómo se percibe el Monitoreo en el Programa? Pymerural ha introducido el Sistema de Monitoreo y Valoración del Impacto [evaluación], como un componente rutinario en cada uno de los diseños de proyectos. Desde la experiencia vivida por los participantes, y tomando en cuenta la definición que exponen sobre el mismo, se concluye que el SMVI se concibe como un instrumento que permite: “Llevar el registro para un control y seguimiento de la ejecución física y financiera del proyecto; valorar los aciertos y fallas, y, finalmente, apreciar el impacto logrado”. “Es un sistema para medir el impacto del proyecto, el propósito es tomar decisiones y visualizar en lo que estamos fallando y lo que hemos logrado”. Omar Jiménez, UNAG Madriz “El sistema es una forma de darle seguimiento y control, es ir midiendo el avance del proyecto, a través del reporte de las actividades y de la parte financiera”. Mirian Cruz Peralta - Alcaldía de Yalagüina “Es un sistema estructurado de componentes, actividades, resultados y otros instrumentos donde se registra a los beneficiarios, las lecciones aprendidas, los datos de Línea de Base”. Sergio Herrera, MAGFOR De igual manera, los cofacilitadores y la contraparte del Programa consideran que el monitoreo tiene las siguientes aplicaciones en la vida de los proyectos: ▪▪ Ayuda a todos los actores en la toma de decisiones, mediante los informes y reportes de líneas de base, visitas de campo y de ejecución de actividades. ▪▪ Colabora con la administración y planeación de los proyectos, mediante el informe financiero, el cual contiene los soportes físicos de cada acción. ▪▪ Asiste a todos los actores para una mejor rendición de cuentas de la ejecución técnica y financiera de los proyectos. ▪▪ Ayuda a comprender cómo las intervenciones del Programa/proyecto generan impactos en los territorios y sectores empresariales seleccionados. ii. La Responsabilidad Compartida en el SMVI entre Pymerural, Cofacilitadores, Contraparte y Socios Compartir la responsabilidad del monitoreo, desde la perspectiva de los usuarios, tiene una connotación estrechamente relacionada con la participación de los cofacilitadores públicos y privados en la implementación del SMVI, y rompe con el esquema tradicional de que “generalmente son los donantes quienes deciden qué se debe lograr y cómo se hará para lograrlo 16 en la intervención”. En esta experiencia, se entiende como “participación” el involucramiento “directo” de la organización cofacilitadora en todo el proceso de monitoreo y valoración del impacto, que implica una coordinación basada en el cumplimiento de las responsabilidades que cada parte interesada debe desempeñar. Sistema de Monitoreo y Valoración de Impacto Experiencia y aprendizaje del Programa PyMerural en Nicaragua Responsabilidades de las Organizaciones Cofacilitadoras ▪▪ Construye, junto con el Programa la lógica de impacto, expresada en el Marco Lógico de las intervenciones. Esto se vincula con el SMVI, porque es en esta etapa que son establecidas las metas, expresadas en indicadores, que luego el cofacilitador presenta ante el Comité Operativo de Pymerural para la aprobación del proyecto, metas que posteriormente serán medidas por el SMVI. ▪▪ Dispone, y/o responsabiliza a una persona, para que específicamente se dedique al SMVI. ▪▪ Con asesoría y acompañamiento de Pymerural ejecuta los procesos de monitoreo y/o de verificación de impacto en sus proyectos. Algunas veces participan consultores externos, en este caso, forman equipo de trabajo con este consultor y generalmente se comparten – aprenden nuevas habilidades. Participan en la recolección de datos, sesiones de reflexión, revisión y aprobación de documentos. ▪▪ Ofrece asistencia técnica y asesoramiento sobre el uso y manejo de la plataforma online. (Debe tomarse en cuenta que durante la experiencia hubo rotación de personal en las instituciones públicas, lo que conllevó a desarrollar procesos de capacitación y fortalecimiento en varias ocasiones). ▪▪ Promueve espacios de reflexión colectiva a lo interno del cofacilitador y con los grupos metas, para analizar los datos que arroja el monitoreo. ▪▪ Informa a la gerencia de Pymerural sobre la ejecución de los proyectos a nivel de resultados o logros e impactos. Responsabilidades Programa de la contraparte del ▪▪ Verifica la ejecución física y financiera de los proyectos. ▪▪ Rinde cuentas a las autoridades nacionales. ▪▪ Utiliza los resultados de los estudios que se realizan como parte de la implementación del SMVI, en la toma de decisiones en los proyectos – Programa. Responsabilidad de los sectores empresariales beneficiarios del Programa ▪▪ Asume la responsabilidad de disponer de manera oportuna de los datos del SMVI, tanto los de las acciones de levantamiento de datos, como los de las actividades de seguimiento. ▪▪ Utiliza la información que genera el Sistema, para crear oportunidades de gestión y aprendizaje. Algunas empresas, a partir de su participación en el proyecto, se interesaron por implementar contabilidad a fin de manejar mejor los ingresos y gastos. ▪▪ Reporta a nivel de actividades, la ejecución física y financiera. ▪▪ Provee información veraz relacionada con los indicadores del Programa. ▪▪ Soporta la ejecución financiera con la documentación adecuada. Responsabilidades de PyMerural o Unidad Ejecutora ▪▪ Asegura que el personal que está involucrado en la implementación del SMVI entienda muy bien la lógica de impacto y su implementación. ▪▪ Brinda asistencia técnica y asesoramiento para la implementación del Monitoreo de Impacto, esto implica la determinación de la muestra, diseño de instrumentos, análisis, y devolución de los datos. ▪▪ Asegura el funcionamiento técnico de la plataforma online del SMVI. Sistema de Monitoreo y Valoración de Impacto Experiencia y aprendizaje del Programa PyMerural en Nicaragua 17 iii. Los Indicadores del Sistema El SMVI tiene dos tipos de indicadores: primero, los que miden los efectos de las acciones del proyecto en el grupo meta, que a su vez están divididos en indicadores globales, entre ellos: empleo, escala, ingreso neto y los indicadores específicos, que calculan: productividad, adopción de Buenas Prácticas Agrícolas y Buenas Prácticas de Manufactura; segundo, los que miden los efectos del acompañamiento de la Unidad Facilitadora hacia el cofacilitador, llamados Indicadores de Desempeño. Programa Unidad Facilitadora Contraparte y cofacilitadores Empresas Generamos capacidades para el desarrollo sostenible Indicadores que miden el efecto del acompañamiento de la Unidad Ejecutora hacia el Cofacilitador Indicadores que miden efectos de las acciones del proyecto en el grupo meta: empresas según la cadena o rubro Indicadores de desempeño Indicadores globales y específicos a. Indicadores que miden efectos de las acciones del proyecto Los indicadores globales Pymerural ha adoptado la Norma DCED,³ para medir los logros en el Desarrollo del Sector Privado (The DCED Standard for Measuring Achievements in Private Sector Development). Esta Norma contempla tres indicadores de impacto, generalmente llamados “globales”. Éstos son: Empleo, Ingreso Neto Adicional y Alcance o Escala. Se mide el empleo: permanente, temporal y el equivalente del temporal. Este último se obtiene dividiendo las horas de trabajo de varios trabajadores a tiempo parcial por la cantidad de horas de un período laboral completo. Antes de adoptar la Norma, se medía el empleo temporal y permanente en número de personas, no se calculaba el equivalente. “…Si 200 productores de caña han recibido asistencia técnica y capacitación, por ejemplo, en Buenas Prácticas Agrícolas, luego tengo que ver cuántas de esos 200 aplican BPA, y esos son los que contabilizo como mi escala”. Asesora PyMerural El indicador del ingreso, antes de emplear la Norma DCED, se medía ingreso por venta; con la Norma se mide Ingreso Neto Adicional, que es la cantidad total de ganancias adicionales que una empresa ha obtenido desde el inicio del proyecto. El alcance o escala es el número de empresas o productores que se están beneficiando; no son las que reciben un servicio del proyecto, sino aquéllas que logran implementar cambios en sus empresas a partir de los servicios. Los indicadores globales se miden en la Línea de Base, que se hace al inicio de cada intervención y en las mediciones posteriores se valoran los cambios. Cabe observar en la tabla siguiente el Objetivo Superior de Pymerural y cómo se expresan en el ejemplo del proyecto de la Cadena de Dulce de Panela los indicadores globales, antes y después de la adecuación a la Norma del DCED. 18 Sistema de Monitoreo y Valoración de Impacto Experiencia y aprendizaje del Programa PyMerural en Nicaragua Nivel Indicador Indicador ajustado con la Norma DCED • Al final del proyecto se observan mejoras en el nivel de vida del grupo meta. 15% de beneficiarios manifiestan mejoras en su nivel de vida, respecto a mejoras de sus viviendas, alimentación y educación de sus hijos(as). Contribuir a la reducción de la pobreza rural mediante el incremento de ingresos y empleos en la Cadena de Valor de Dulce de Panela. • Al final del proyecto se atendieron a 112 productores de caña, 45 procesadores de dulce de panela y 51 comercializadores, para un total de 208 beneficiarios con la ejecución del proyecto. 20% de crecimiento en empleos permanentes al final del proyecto. 20% de crecimiento en empleos temporales al final del proyecto, 15% del empleo permanente y temporal son mujeres y/o jóvenes. 10% de incremento en los ingresos económicos de los actores de la cadena. Al final del proyecto se generan 563 empleos temporales, que equivalen a 104 empleos fijos, para un total de 55 empleos equivalentes adicionales respecto a LB • Al final del proyecto 28 empleos temporales son ocupados por mujeres, que equivalen a 4 empleos fijos. • Al final del proyecto al menos 56 empleos temporales son ocupados por jóvenes, que equivalen a 8 empleos fijos. Al final del proyecto se incrementa en 64% el ingreso neto adicional para toda la cadena, en un total de U$196,812 respecto a LB. Los indicadores específicos Se ubican en el ámbito del crecimiento económico y cambios de las cadenas y pueden diferir, según la naturaleza del proyecto, por ejemplo: el SMVI “mide”, como parte de los cambios en las cadenas, la implementación de las Buenas Prácticas de Manufacturas, en cadenas de alimentos, como rosquilla somoteña, queso y panela. En cadenas productivas, como la de frijol, bambú, y caña, “mide” el cumplimiento de las Buenas Prácticas Agrícolas. Como puede observarse, los indicadores globales y específicos de los proyectos, se centran en “apreciar los cambios” acordados entre el Programa y el Cofacilitador cuando aprueban la lógica del impacto, es decir, representan los intereses de ambos. Estas aseveraciones sustentan que la responsabilidad compartida del SMVI desarrollado por Pymerural tiene una característica: fomenta la participación. Sistema de Monitoreo y Valoración de Impacto Experiencia y aprendizaje del Programa PyMerural en Nicaragua 19 b. Los Indicadores de Desempeño de los Cofacilitadores A finales del año 2010, Pymerural fue objeto de una evaluación intermedia de parte de COSUDE. La evaluación recomendó “definir indicadores para monitorear el efecto directo sobre el desarrollo de capacidades de los cofacilitadores”. Esta sugerencia hace ver una particularidad del diseño del Programa, donde su concepto y enfoque de trabajo dice que trabajará mediante actores locales y que es primordial desarrollar en ellos, capacidades para la atención de las cadenas productivas. La evaluación consideró que Pymerural debía formular indicadores que le contribuyeran a “medir” precisamente el desarrollo de capacidades en los cofacilitadores y no solamente en determinar el alcance a nivel de las empresas. Para crear estos indicadores, Pymerural se basó en las cuatro dimensiones del desarrollo de capacidades (Teoría de la Mariposa), para valorar el fortalecimiento de los cofacilitadores públicos y privados producto de su acompañamiento técnico. Los indicadores se miden a partir de la percepción de y por los cofacilitadores, utilizando para ello una escala de Likert con valoración alto, medio y bajo. Un aspecto clave de estos indicadores es que en los ámbitos de desarrollo del recurso humano y organizaciones se incluye aspectos relacionados con el SMVI, como la capacidad de explicar el marco lógico, así como el manejo del Sistema de Monitoreo. Tabla 1. Indicadores de Desempeño de los Cofacilitadores Ámbito /Alcance Indicadores Desarrollo de Recursos Humanos Capacidad de explicar Marco Lógico del proyecto y la (s) lógica (s) de impacto de cada intervención. Desarrollo Organizacional Desarrollo de capacidades Marco Regulatorio Redes Funciones/actividades de co-facilitación incluidos en el organigrama institucional, presupuesto regular y capacidad de incidencia en decisiones estratégicas de otros departamentos. El co-facilitador maneja el SMVI de manera correcta (cualitativo y cuantitativo), y puede explicar la pertinencia de los indicadores Capacidad del co-facilitador de diseñar y liderar procesos o establecer relaciones relevantes con instituciones (lobbying), para la formulación de política/ estrategia a nivel nacional /local y/o introducir normas o reglamentos. El co-facilitador asume de manera eficiente el liderazgo en convocatorias de cadena o en ausencia de un Comité: El cofacilitador participa de manera activa en redes relacionadas con la actividad del proyecto, logrando incidir en el diálogo público-privado. Capacidad de la institución de captar otros recursos y/o firmar convenios de colaboración con otras instituciones destinados al fomento de la Mipyme. 20 Sistema de Monitoreo y Valoración de Impacto Experiencia y aprendizaje del Programa PyMerural en Nicaragua El informe de la segunda medición, realizada en noviembre de 2012, refleja cómo en su conjunto los cofacilitadores fortalecieron sus capacidades a partir de su participación en los proyectos, y expresan cambios en la gestión del mismo. El gráfico siguiente muestra el avance de los cofacilitadores en estos indicadores, se observa que se lograron buenos resultados en el 83% de los indicadores, siendo precisamente el uso del SMVI el indicador que presenta debilidad en cuanto a que su uso aún no logra instaurarse de forma sólida en las entidades, no obstante, se logró a nivel personal un buen manejo de este tema. Valoración de los Indicadores de Desempeño ”Los indicadores de desempeño nos muestran en qué línea vamos como cofacilitador…ayuda a abandonar costumbres que se tienen, no siempre tenemos la costumbre de planificar, de cumplir, de monitorear, éstos [se refiere a los indicadores] son una herramienta para el personal, para la institución”. Planificación Alcaldía de Yalagüina. “En Yalagüina, un tema serio era el uso del suelo para la producción de ladrillos; la necesidad era cómo regularlos y se mejoró con una Normativa del Uso del Suelo para la producción de ladrillos, es un ejemplo de cambios en el tema de marco regulatorio, que a su vez generan capacidades en el cofacilitador cuando impulsa estos procesos”. Asesora PyMerural. Sistema de Monitoreo y Valoración de Impacto Experiencia y aprendizaje del Programa PyMerural en Nicaragua 21 iv. El Desarrollo de Capacidades en los Cofacilitadores y sus Resultados a. Capacidades encontradas en los cofacilitadores Para rescatar esta valoración, primeramente es necesario conocer las capacidades desarrolladas por los cofacilitadores antes de su participación en esta experiencia con Pymerural. En general, los cofacilitadores comparten casi los mismos niveles de desarrollo, en lo que se refiere a la capacidad de monitoreo; expresaron que: “No contaban con experiencia en monitoreo de impacto, no poseían un sistema para administrar información de monitoreo y tampoco contaban con instrumentos para recopilar información de monitoreo”. De igual manera, UNAG Madriz y la Cooperativa Multisectorial GERSON, expresaron en el análisis de sus debilidades: “Desconocimiento de los instrumentos y el tema del sistema de monitoreo” y “Sin experiencia en Sistema de Monitoreo”, respectivamente. Sin embargo, ambas organizaciones contaban con procedimientos para la toma de decisiones e involucraron a sus asociados a través de asambleas ordinarias y extraordinarias, plenarias y de junta directiva. b. El proceso de desarrollo de capacidades El desarrollo de capacidades constituyó un proceso de enseñanza aprendizaje, que abarcó varias temáticas para garantizar la ejecución e implementación del SMVI. El personal de Pymerural, -asesor y responsable del soporte técnico- con el apoyo de los asesores temáticos, desarrollaron la capacitación; algunas de esas sesiones fueron en grupo, otras individuales, bajo un enfoque de formación continua que, sobre todo, exigió tiempo y dedicación. La tabla a continuación expone las temáticas y sus contenidos. Los aspectos anteriores no quieren decir que los cofacilitadores no han acumulado experiencia, conocimiento y aprendizaje en la ejecución de proyectos, en realidad lo que significa es que han ejecutado proyectos, en los cuales, los sistemas de monitoreo y evaluación han sido ejecutados desde los Programas y/o agencias donantes y no han sido partícipes de los aprendizajes, ni de los insumos generados por los mismos. Esta situación, incide directamente en la población meta ya que generalmente son consultados para obtener información, pero no son convocados para conocer los resultados. En este sentido, a veces hay desánimo, desconfianza y una actitud a no proveer o proveer a medias datos sobre sus empresas. Ejecutamos un proyecto, que el financiador traía contratado un consultor desde Managua que hacía la línea de base y la medición, organizaba los trabajos de campo, pero ellos, llegaban y se iban. UNAG - MADRIZ 22 Sistema de Monitoreo y Valoración de Impacto Experiencia y aprendizaje del Programa PyMerural en Nicaragua Temáticas y/o instrumentos Contenidos Uso del módulo de proyectos de la plataforma web Diseño de la plataforma, estructura del módulo de proyecto, y el contenido de cada una de las ventanas que conforman el módulo, cómo se calcula y reporta el avance físico y financiero del proyecto Uso del módulo de instrumentos de la plataforma online Registro de las empresas beneficiadas por las acciones del proyecto con la finalidad de determinar el aporte de las partes involucradas. Módulo de Línea de Base de la plataforma Digitación de encuestas y emisión de reportes para interpretar la información. Medición del efecto de las actividades de los proyectos a través de: diagnósticos, Líneas de Base y mediciones posteriores. Diseño de instrumentos para levantar información en campo, diseño de muestra, validación de instrumentos, interpretación y análisis de la información, devolución de la información ante el sector empresarial, elaboración de informes de Líneas de Base y mediciones, conceptualización del estándar del Comité de Donantes, cadenas de resultados, cambios sistémicos, crecimiento económico y reducción de pobreza. La capacitación fue realizada en el territorio del cofacilitador. Los procedimientos de Línea de Base y de diagnóstico fueron utilizados como instrumentos para consolidar los aprendizajes. Una dificultad que se presentó y que requirió de acompañamiento fue la redacción de logros y la elaboración de criterios para ponderar el valor numérico de 0 a 100 del avance de cada actividad, para cumplir con el indicador, y así valorar si se está cumpliendo en tiempo y forma, caso contrario, podría resultar un dato importante para analizar las causas y tomar decisiones para su cumplimiento. Los resultados de ese proceso fueron: • El responsable del SMVI, los técnicos y en el personal de finanzas en los cofacilitadores, desarrollaron capacidades para un mejor control, seguimiento, apropiación y/o comprensión de la dinámica del proyecto.. • Se crearon las capacidades para que el personal a cargo del SMVI, oriente y participe en los procesos de investigación que requiere la ejecución de Línea de Base y los estudios de medición. • Los técnicos capacitados desarrollaron habilidades para observar cómo se alcanza el cambio que se proyectó en el marco lógico del proyecto; y cómo se presenta en la dinámica del sector empresarial y de las empresas. • A medida que utilizaron los diferentes instrumentos de monitoreo y de mediciones, el personal técnico fortaleció sus habilidades para trabajar en equipo, incidiendo en la toma de decisiones en el ámbito del proyecto. • Respecto al uso de la plataforma online, el personal a cargo perfiló una meta común: lograr introducir una descripción adecuada de los logros alcanzados y aplicar acertadamente una ponderación del alcance de la actividad, generando con ello credibilidad en los reportes. • Mediante las actividades se desarrollaron habilidades para conocer y distinguir los cambios cualitativos y cuantitativos de la intervención. La capacitación fue para mí una experiencia nueva como técnico, muy valiosa, en temas de desarrollo de capacidades locales, la parte de encuestas, de manejar sistemas de base de datos, manejar aportes de personas, aspectos financieros, la parte de comunicar, de elaborar informes y cosas que estén adecuadas al requerimiento de quienes lo piden. Lesly Buezo Técnico de monitoreo, Alcaldía de Yalagüina Sistema de Monitoreo y Valoración de Impacto Experiencia y aprendizaje del Programa PyMerural en Nicaragua 23 VI. Aprendizajes y Lecciones aprendidas Los aprendizajes que se presentan a partir de hallazgos, constituyen una visión de las cualidades del SMVI. Hallazgos Aprendizaje individual Todas las herramientas que posee la plataforma son fáciles de utilizar y aplicar, no es algo sofisticado; en el proceso de capacitación y aprendizaje ha sido una nueva experiencia de gran valor en este campo. UNAG Nueva Segovia La plataforma online del SMVI tiene un manejo sencillo, accesible y seguro. Es confiable…es adaptativo, es un sistema que se puede implementar en cualquier institución pública o privada, va a estar en dependencia de cómo lo quiera ver la institución o para programas específicos. MAGFOR La plataforma online permite llevar el seguimiento a todos los proyectos de una forma homologada, para diferentes tipos de proyectos en cuanto al concepto de monitoreo de impacto. Asesora de Pymerural Pymerural promueve en los cofacilitadores la apropiación del SMVI, mediante el desarrollo de capacidades en monitoreo y verificación del impacto El SMVI, como instrumento para conocer el avance y el alcance de la implementación del proyecto Aprendizaje organizacional Se aprendió a tomar decisiones oportunas a medida que se implementaba el proyecto. UNAG Madriz Aprendí a levantar líneas de base, levantamiento de mediciones, análisis de resultados, elaboración y redacción de logros, de informes. UNAG Madriz Se han adquirido nuevos conocimientos sobre monitoreo y sobre su uso, manejo y utilización en la A saber formular los logros y a analizar los resultados de una toma de decisiones en la actividad, al principio no sabíamos, pero nos capacitaron y comprendimos que las actividades deben estar soportadas con ejecución del proyecto. memorias, fotos, listas de asistencia, facturas. UNAG Madriz. UNAG Nueva Segovia Monitorear el Impacto es un sistema completo de información donde día a día vamos analizando los datos para ver en qué estamos mal y en qué estamos bien y de esta manera tomar algunas decisiones para el beneficio de la ejecución del proyecto, todo esto según un estándar al que estamos adecuándonos como proyecto. Alcaldía de Yalagüina El Sistema nos ha ayudado a valorar como institución, que podemos ejecutar más proyectos en menos tiempo. Quizás no lo hacíamos porque no teníamos esta herramienta, es decir, el Sistema de Monitoreo. Alcaldía Yalagüina Es un sistema confiable, específico y bien dirigido, que refleja los logros, los impactos generados por cada actividad ejecutada y lo dicen los informes de medición, los de línea de base y los de medición de impacto intermedia. De esa forma hemos medido el impacto y los cambios. MAGFOR El Sistema de Monitoreo permite revaluar inmediatamente, planificar actividades, hacer reajustes de presupuesto, hacer evaluación de eficiencia, hacer las evaluaciones de rendimiento de los proyectos, de acuerdo a cómo van avanzando en las actividades y con el presupuesto ejecutado. Pymerural Sistema de Monitoreo y Valoración de Impacto Experiencia y aprendizaje del Programa PyMerural en Nicaragua 25 Hallazgos Aprendizaje individual Aprendizaje organizacional El SMVI, como instrumento para conocer el avance y el alcance de la implementación del proyecto El sistema de monitoreo sirve para la toma de decisiones y para llevar el control de las actividades y de lo financiero de cualquier proyecto. Omar Jiménez, Técnico de monitoreo, UNAG Madriz El SMVI contribuye a valorar el impacto mediante las Líneas de Base y sus mediciones La Línea de Base y sus diferentes mediciones a lo largo de la vida del Programa, proporcionan una valoración acerca del efecto de las acciones del Programa y/o proyecto en la población meta, en las empresas.El avance del proyecto y/o Programa se hace visible en el tiempo El avance del proyecto y/o Programa se hace visible en el tiempo El SMVI es un mecanismo para sustentar la credibilidad ante la población meta Con el SMVI, los cofacilitadores han experimentado una nueva experiencia. Consiste en el monitoreo de actividades y la valoración del impacto, incluida la acción de compartir la información con las empresas; superando la práctica de enfocarse solamente en el seguimiento a las actividades. Compartir los resultados de las Líneas de Base y de las mediciones de impacto sustenta la credibilidad de los cofacilitadores ante las empresas participantes en los proyectos. De la lectura de los aprendizajes expresados por participantes en esta experiencia, surge la pregunta: ¿Cuál es la trascendencia de estos aprendizajes? En primer lugar, de manera individual se ha logrado: • La utilización y manejo del SMVI mejora sustancialmente las capacidades técnicas para ejecutar, apropiadamente, las actividades a realizar, desarrollar el sentido de responsabilidad, para cumplir en tiempo y forma la ejecución del proyecto, lo que se visualiza en la calidad del trabajo en cada responsable del Sistema. • Manejar una plataforma online, que permite ingresar y actualizar la información con herramientas fáciles de utilizar y aplicar, caracterizándose como confiable, dinámica y flexible, que favorece reflejar los logros y el impacto en la ejecución de cada proyecto; mostrando la información en tiempo real, apoyando la toma de decisiones oportunas en pro del cumplimiento de los indicadores. Proporciona confianza en la información que ingresan en el Sistema debidamente soportadas por los medios de verificación. 26 Sistema de Monitoreo y Valoración de Impacto Experiencia y aprendizaje del Programa PyMerural en Nicaragua Lecciones aprendidas De manera individual En el plano Institucional El SMVI es una herramienta de trabajo para medir indicadores, y con ello el impacto del proyecto. Para el personal técnico responsable del SMVI, esta fue su primera experiencia a cargo de un sistema de monitoreo y valoración de impacto. Factor clave de su experiencia es que en la práctica se constató el rol de los indicadores y cómo éstos pueden ser medidos a partir de la ejecución de las actividades planificadas. La Institución se posiciona del SMVI. La experiencia ha permitido observar cómo se posicionan los cofacilitadores de este tipo de sistema, por ejemplo, cómo se asimila el rol, la importancia y conceptos de los indicadores. El SMVI permite aprender cómo funcionan los proyectos. La experiencia de estar a cargo de un SMVI ha sido enriquecedora, porque se conoce cómo funcionan los proyectos en los territorios. La explicación de este aprendizaje es que se expone el avance de las actividades, y es a través de su cumplimiento que se alcanzan los resultados. La plataforma online puede ser utilizada con éxito por personal que no es informático. Capacitar en el manejo de la plataforma online no fue fácil, porque muchos de ellos no eran informáticos y para algunos de ellos fue difícil, sin embargo, se logró que ésta fuese usada adecuadamente. Los cofacilitadores tienen dificultades para adoptar sistemas complejos como el SMVI, que es un sistema completo. La mayor limitante para asumir un sistema, como el utilizado por PyMerural -monitoreo y valoración del impacto-, tiene que ver con los propios requerimientos institucionales de cada cofacilitador y la falta de información secundaria estadística, que pueda ser usada para analizar el comportamiento de los sectores o rubros económicos. El SMVI es un instrumento que fortalece la gestión del Programa. Provee información constante de las actividades que ejecutan los proyectos -a través de la plataforma online- y del impacto que estas actividades generan en los grupos metas a través de líneas de base y mediciones. A partir de ello es posible tomar decisiones para ajustar la estrategia y la ejecución; también provee datos importantes sobre resultados del Programa en términos de su aporte a la reducción de la pobreza. El SMVI permite aprender lo importante que es compartir información y tener acceso a ella. Para algunos participantes esto es lo más importante en su aprendizaje. “…El mecanismo de trabajo te lo da el proyecto que es cuantificado en el Sistema, te dice los aportes que van recibiendo los beneficiarios…la alcaldía ha cambiado mucho, hay empresarios que han aprendido que deben regresarle a la Alcaldía a través de los impuestos”. Alcaldía Yalagüina Sistema de Monitoreo y Valoración de Impacto Experiencia y aprendizaje del Programa PyMerural en Nicaragua 27 VII.Conclusiones El SMVI es un instrumento que contribuye a lograr mayor comprensión de la implementación de las intervenciones del Programa y sus proyectos. Los equipos técnicos de los proyectos lograron visualizar cómo la lógica del impacto o marco lógico y las inversiones financieras van generando cambios en el sector empresarial; han logrado apreciar la importancia de la Línea de Base, como punto de partida para valorar el impacto. Se comprende que son los elementos que sustentan la obtención de una comprensión de cómo en la práctica diaria se aplica lo propuesto en un marco lógico. El SMVI provoca cambios en la cultura organizacional. La UNAG filial Madriz y Nueva Segovia, la Alcaldía de Yalagüina y la DGPSA del MAGFOR, han ajustado su cultura organizacional relacionada con el monitoreo y valoración del impacto. Habitualmente son los donantes los únicos responsables de la ejecución del monitoreo de proyectos, y casi siempre, los procesos de línea de base y mediciones son realizados por equipos externos y sólo se comparte la información generada. Por lo general, en los Consejos Técnicos no es costumbre utilizar un informe de monitoreo. No fue fácil para Pymerural, introducir el SMVI, y se requirió de tiempo para que las organizaciones entendieran su objetivo y dejaran de verlo como una “condición” del proyecto. Los indicadores de construcción de capacidades en los cofacilitadores Se conocen como “indicadores de desempeño”. Durante la reflexión de la experiencia, desempeño fue entendido como: el desarrollo de capacidades en los cofacilitadores. Su propósito es medir “el asesoramiento que hace Pymerural al cofacilitador, en términos de desarrollo del recurso humano y desarrollo organizacional en temas transversales importantes para el Programa”. Desde la perspectiva de los cofacilitadores, estos indicadores han contribuido a poner la mirada en el “impacto” de los proyectos y progresar en la apropiación de la necesidad de darle seguimiento a los proyectos a través de un sistema de monitoreo. Desde la perspectiva de la coordinación de Pymerural, los cofacilitadores han logrado avances en sus acciones de manejo del proyecto, y cambios en: el concepto de sistema de cadenas, en su percepción de la reducción de la pobreza, y en sus capacidades para gestionar fondos. El análisis de los datos, deja en claro que en su conjunto estos indicadores mejoran el vínculo de la entidad cofacilitadora con el grupo meta del proyecto. El SMVI como instrumento de aprendizaje La responsabilidad compartida hace que el SMVI sea considerado como un instrumento de aprendizaje, de toma de decisiones, de vigilancia constante de las actividades del proyecto y sus efectos. El personal a cargo del SMVI en los cofacilitadores, ha entendido la responsabilidad compartida como una delegación de tareas a lo interno de cada organización, y como un vínculo estrecho con el Programa. La información es compartida, y es la base de un diálogo constante entre la Unidad Facilitadora y los cofacilitadores. Sistema de Monitoreo y Valoración de Impacto Experiencia y aprendizaje del Programa PyMerural en Nicaragua 29 La construcción de capacidades para el monitoreo y valoración de impacto Para un cofacilitador, al principio el SMVI es un requisito básico para la implementación de un proyecto, pero durante el proceso, la idea de que esto es “una obligación” va quedando atrás. La construcción de capacidades, realizada por Pymerural, ayudó a generar cualidades institucionales, entre ellas, la comunicación y el flujo de información acerca del desarrollo del proyecto entre: a) El personal técnico del proyecto, b) El personal técnico del proyecto y los asesores de Pymerural, c) El personal técnico del proyecto y la MIPYME. Institucionalmente, se comprende la importancia de delegar en una persona la responsabilidad del monitoreo; los Consejos Técnicos mejoran, porque se toman decisiones informadas y se comparte el conocimiento de logros y cumplimiento de actividades; la información sobre el proyecto fluye en diferentes niveles, y cambia el liderazgo institucional. Estas aseveraciones son percibidas principalmente por el personal de los proyectos, que valoran la experiencia como una ventaja para la organización. En el personal a cargo del monitoreo, la satisfacción específica más frecuente es: “poder ver el desarrollo de las actividades a través de su cumplimiento y, sobre todo, sus efectos”. La experiencia ha creado valores, entre ellos: confianza, trabajo en equipo, calidad en lo que se reporta, responsabilidad. En las relaciones interpersonales e institucionales, se cohesiona el equipo de trabajo y mejora el ambiente para aprender. El SMVI no acumula dificultades, las ajusta en la marcha. A lo largo de la vida del Programa, el sistema ha enfrentado diferentes “cuellos de botellas”. Con la plataforma online fueron referidos al no cumplimiento de las fechas establecidas para introducir los datos. Esto implicó revisar y determinar una fecha para los públicos y otra para los privados. En los técnicos a cargo del Sistema, la mayor dificultad fue la de redactar logros y estimar el porcentaje de avance. La contraparte del Programa considera su mayor dificultad los criterios para determinar el porcentaje de avance, y que muchas veces los datos financieros no estaban paralelos con la ejecución física. El monitoreo de impacto enfrentó retos que también fueron subsanados. Un ejemplo de ello es que la mayoría de la información para medir los efectos de las intervenciones en las empresas se toma de las unidades empresariales/productivas, y éstas, además de no llevar registros, tienen un alto nivel de informalidad. Esto incide de manera negativa en la calidad de los datos obtenidos. Por ello, el Programa asesoró a los cofacilitadores, para que se desarrollaran instrumentos de medición con secciones bien detalladas en ventas, costos, producción y otros. Una cualidad del desarrollo de capacidades, es que éste ha sido un proceso constante, dirigido, con metas y propósitos definidos, mediante el cual se fortalecieron las competencias requeridas para la implementación del SMVI. 30 Sistema de Monitoreo y Valoración de Impacto Experiencia y aprendizaje del Programa PyMerural en Nicaragua Bibliografía Morra, L., & Amy, F. (2001). Evaluaciones con Estudios de Caso. n.d.: n.d. PyMerural. (2010). Sistema de Monitoreo y Verificación de Impacto, Manual de Funcionamiento. n.d.: n.d. PyMerural. (2012). Informe de Medición de Indicadores de Desempeño. Managua: n.d. Sistema de Monitoreo y Valoración de Impacto Experiencia y aprendizaje del Programa PyMerural en Nicaragua 31 Glosario Actividad: Una pieza discreta de trabajo, típicamente representados por un contrato entre el Programa y un contratista, socio o consultor. Cofacilitador: Entidad pública o privada (dependencias ministeriales, organismos descentralizados, asociaciones empresariales, centros de negocios, ONG, y otros), que se hace responsable, según su facultad, de la ejecución de las acciones apoyadas por PyMerural y reciben capacitación y asesoría para su fortalecimiento. (PyMerural, 2010). Contraparte: Entidad oficial de Gobierno, que actúa como interlocutor para los asuntos de adecuación de estrategias y mecanismos de intervención. En Nicaragua, la principal contraparte es el Ministerio de Fomento, Industria y Comercio (MIFIC). (PyMerural, 2010). Empresas: Unidades empresariales incluidas en la cadena de valor, que puede incluir productores primarios, transformadores, comercializadores, empresas asociativas o de otra naturaleza jurídica. (PyMerural, 2010). Encuesta: Recopilación de información de un número específico de encuestados en una población general determinada, utilizando un conjunto de preguntas, para las cuales las respuestas pueden ser cuantificadas. Indicadores: Factor cuantitativo o cualitativo o variable, que proporciona una forma sencilla y fiable para reflejar los cambios vinculados con una intervención, o ayudar a evaluar el rendimiento de un sector de desarrollo; medios para medir logros,. Intervención: Conjunto coherente de actividades que comparten una cadena de resultados individuales, y están diseñados para lograr un cambio específico y limitado. Línea de base: Es el análisis que describe la situación antes de una intervención para el desarrollo. Esto debe incluir el estado de los indicadores antes de una intervención, que tiene como resultado cambios en el nivel que se está midiendo. Programa: Un Programa es la unidad típica de análisis para un donante, a menudo contratados para un socio general o empresa. Socio: Es toda aquella entidad de la cooperación, pública, privada, Programa o proyecto con el/la cual PyMerural establece acuerdos de coordinación para la realización de actividades conjuntas, principalmente vinculadas con las intervenciones implementadas por las entidades cofacilitadoras. (PyMerural, 2010) Impacto: Positivos y negativos, primarios y secundarios a largo plazo; efectos producidos por una intervención de desarrollo, directa o indirectamente, intencional o no intencional. 32 Sistema de Monitoreo y Valoración de Impacto Experiencia y aprendizaje del Programa PyMerural en Nicaragua