HERRAMIENTAS COMUNITARIAS Capítulo 31, Sección 9 INDICADORES DE NIVEL DE LA COMUNIDAD Contribuido por Aimee Wittman Editado por Bill Berkowitz y Jerry Schultz Traducido por Silvia Morales Chainé ¿Qué son los indicadores del nivel? Imagínese que usted jugara básquetbol y que a pesar de tener buenos jugadores, su equipo terminó la temporada sólo con un promedio regular. La siguiente temporada, su equipo practica mucho tiempo la defensiva, la ofensiva y los tiros libres. Por lo tanto durante el juego de la temporada regular, todos juegan bastante bien, tanto que alcanza las metas establecidas al principio de la temporada. Finalmente, y llegado marzo, logran llegar a las finales. En este escenario, podría decirse que uno de los objetivos del equipo al comenzar la temporada fue hacer el 50% de tiradas desde medio campo y anotar el 75%. La mejoría del equipo como un todo es equivalente a los indicadores de nivel de la comunidad. Para los programas comunitarios, los indicadores del nivel de la comunidad podrían ser vistos como el resultado final de cualquier programa. Mientras que el sistema de Monitoreo, las encuestas, los reportes de las entrevistas ayudan a puntualizar el éxito de los eventos individuales, los indicadores de nivel de la comunidad tratan de determinar que tanto estos eventos individuales afectan a la comunidad como un todo. Una forma de tener una impresión general de los efectos es revisar los "indicadores " recomendados por los expertos del campo de interés de su grupo. Por ejemplo, para un grupo que esté enfocándose al abuso de sustancias, un indicador podría ser el número de ingresos médicos de emergencia relacionados con el uso de alcohol. Examinando estos números, su grupo tendrá una visión más clara de los efectos últimos del trabajo en la comunidad de su grupo a largo plazo. ¿ Porque utilizar indicadores de nivel? Mientras que otras herramientas de evaluación pueden ofrecer un punto de vista de la efectividad de las acciones específicas y de los objetivos del programa, los indicadores de nivel proveen una perspectiva general. • Los indicadores de nivel proveen la "línea base" la cual evidencia el impacto del programa. 1 La evidencia de la "línea base" describe el último efecto del trabajo de su grupo sobre el programa. Los indicadores de nivel proporcionan una manera objetiva de medir y evaluar el punto de inicio. Algunos ejemplos serían los choques nocturnos de vehículos particulares (como una forma de realizar esfuerzos para reducir el abuso de sustancias) o el número de admisiones hospitalarias por daños relacionados con la violencia (como una forma de hacer esfuerzos por reducir la violencia juvenil). Además, los indicadores de nivel le permiten medir el progreso en cuanto a las metas. Las mediciones deben ser como múltiples paradas a lo largo del camino, de tal manera, que usted y su comunidad puedan ver como van y como ajustar el curso de las acciones. • Ayudan a determinar los efectos de los componentes claves del programa. Si usted decidiera implementar una serie de ideas importantes en su plan de acción, los indicadores de nivel podrían ayudarle a determinar la efectividad de estas ideas y de los objetivos específicos. De esta manera, se puede ver cuáles ideas y estrategias le permitieron alcanzar algunas de sus metas, y cuáles podrían necesitar ser trabajados en un plan de acción futura. • Los indicadores de nivel permiten priorizar los problemas. Si los indicadores de nivel revelan resultados negativos (por ejemplo, el número de choques de automóvil permanece igual después de haber implementado varios de los objetivos), éste puede ser el momento perfecto para recordarle a la comunidad que su problema sigue existiendo. Este problema necesita seguir siendo trabajado. Aunque los resultados negativos resultaron ser aquellos que usted no quería encontrarse, trate de verlos como una oportunidad de oro para priorizar el problema. • Los indicadores de nivel que muestran resultados positivos ayudan a asegurar más apoyo para el programa. Sí los indicadores de nivel muestran o sugieren que su trabajo ha provocado muchos cambios positivos para la comunidad, usted puede utilizar estos reportes para obtener más apoyo para su programa y el buen trabajo que usted hace. Esto puede incluir apoyo financiero, el cual puede ser utilizado para mejorar y extender el programa de trabajo. Así que no olvide salir y mostrar sus resultados; su grupo merecer reconocimiento y apoyo por todo su trabajo duro y sus contribuciones. ¿Cuando se deben evaluar los indicadores de nivel? Tan pronto como usted evalúe sus indicadores de nivel, conocerá y comprenderá cómo su comunidad esta siendo afectada por una serie de variables. De esta forma, podrá planear de tal manera que obtenga los efectos que desea. 2 Es aconsejable empezar la medición de los indicadores de nivel tan pronto como inicie un nuevo proyecto o evento, de tal manera que puede cambiar todo lo que sea necesario. Por supuesto, deben medirse al terminar un proyecto o evento, de tal forma que pueda medir los resultados y efectos de su actividad así como aprender más para el futuro. ¿Cómo conseguir indicadores de nivel? Existen cinco pasos principales para elegir los indicadores de nivel. Estos incluyen: 1. Seleccionar indicadores que encuentren los criterios de ser: Disponibles Confiables Fáciles de recolectar Relevantes para el programa 2. Obtener los datos de agentes estatales y locales relevantes 3. Resumir y graficar los datos 4. Presentar los datos a los líderes y evaluadores de la comunidad 5. Utiliza los datos para priorizar los problemas y redirigir los esfuerzos del programa 1. Seleccionar indicadores que sean disponibles, confiables, fáciles de recolectar y relevantes para el programa. La clave del éxito se encuentra en hacer las preguntas correctas. Primero, su grupo deseará realizar varias reuniones con el personal y también con grupos de miembros de la comunidad para identificar cuáles indicadores de nivel servirán mejor a sus necesidades. En la sección de ejemplos, encontrara una variedad de indicadores de nivel para: • • • • • Coaliciones de abuso de sustancias Programas de prevención para embarazo adolescente Programas de control contra el tabaco Programas de control de daños Programas de prevención contra la violencia Digamos, por ejemplo, que su grupo quiere enfocarse en reducir la tasa de adolescentes que fuman marihuana en su comunidad. Uno de los indicadores de nivel incluiría el número de arrestos juveniles relacionados con las drogas (vea ejemplos). 3 2. Contactar agencias estatales y locales relevantes para conseguir los datos. Una vez que ha decidido cuáles son los indicadores de nivel apropiados, los miembros del personal pueden aumentar su conocimiento a partir de las fuentes federales, estatales, regionales y locales, quiénes podrían constituir buenos recursos para obtener información. Estas fuentes deben incluir departamentos de salud, y agencias legales, u oficinas de transportes. Sus opciones exactas serán determinadas por lo que usted desee estudiar. Continuando con el ejemplo anterior, si usted sabe que los indicadores de nivel que usted desea medir son el número de arrestos juveniles relacionados con las drogas, deberá contactar al departamento policía. De esta forma, recopila información sobre el número de arrestos relacionados con drogas, entre las edades de catorce a veinte en los últimos años. 3. Obtenga, resuma y grafique la información. Los miembros del grupo de evaluación deben reunir toda la información en un reporte, así como poner en tablas toda la información. ¿Como graficar información?. Una forma podría ser graficar los números de personas arrestadas en intervalos de seis meses. Si, por ejemplo, usted implementó su paso de acción hace un año, usted deseará comparar los niveles de arrestos por drogas antes y después de este. 4. Presentar los datos a los líderes y evaluadores de la comunidad. Los datos obtenidos pueden ser utilizados para informar y educar a su organización y a la comunidad. Puede funcionar como una herramienta para promover el apoyo público, y mostrar los resultados positivos de su grupo. 5. Utilizar los datos para priorizar los problemas y redirigir los esfuerzos del programa. Si los indicadores de nivel muestran resultados negativos, aproveche la oportunidad para priorizar problemas. Adicionalmente, los datos pueden también proporcionar la oportunidad de redirigir el trabajo en una dirección más efectiva. Si, por ejemplo, su investigación muestra que los niveles de arrestos por drogas entre los jóvenes continua, manténgase de pie, ya que esto podría ser una oportunidad excelente para recordarle a la comunidad que el abuso de sustancias existe y continua siendo una gran preocupación en la comunidad. En este caso, usted deseará distribuir sus resultados en las escuelas locales, a los lideres comunitarios y a otros grupos u organizaciones que se enfocan al abuso de sustancias. 4 Finalmente, recuerde que los resultados pueden ser vistos en una gran variedad de formas. Los resultados positivos podrían significar que se necesita redirigir la energía hacia otras áreas, si es que se han alcanzado la metas originales. Los resultados negativos podrían ser vistos como fallas. Sin embargo, estos resultados deberían simplemente significar que otra estrategia podría funcionar mejor. Así que en lugar de continuar desgastando su energía en la dirección equivocada, tratará de encontrar formas más efectivas para lograr el cambio. Resumen: Es importante que se mantenga buscando ejemplos útiles sobre indicadores de nivel comunitarios. Además, prepárese para sumergirse al mundo de la retroalimentación (Vea el capitulo 32). Promovemos la reproducción de este material, pero no olvide dar el crédito a las Herramientas comunitarias. Ejemplos Todos los ejemplos son de Fawcett, S. B., Paine-Andrews, A., Francisco, V. T., Schultz, J. A., Richter, K .P., Lewis, R. K., Williams, E. L., Harris, K.J., Berkley, J. Y., Fisher, J.L., & Lopez, C.M. (1994). Work Group Evaluation Handbook: Evaluating and Supporting Community Initiatives for Health and Development, Lawrence, KS: Work Group on Health Promotion and Community Development, University of Kansas. Ejemplo 1: Indicadores de nivel recomendados para las coaliciones de abuso de sustancias. 1. Número de accidentes nocturnos de vehículos particulares 2. Número de pruebas positivas en relación a ingesta de drogas de personas arrestadas 3. Número de arrestos por posesión de drogas 4. Costo y pureza de las drogas en las calles 5. Número de pruebas positivas a la hora del parto en relación a las drogas 6. Número de episodios en la sala de emergencia relacionados con alcohol o drogas (AOD) 7. Numero de muertes relacionadas con AOD 8. Numero de individuos inscritos en listas de espera para su admisión a programas de servicio de AOD 9. Número de canalizaciones y admisiones a centros de salud mental por problemas con AOD 10. Incidencia de resultados negativos a la hora del nacimiento relacionados con AOD (Síndrome de Alcohol fetal, toxicología de drogas positiva) 11. Incidencia de enfermedades de transmisión sexual relacionadas con drogas (ETS), incluyendo transmisión de VIH en casos de SIDA. 5 12. Incidencia de condiciones medicas relacionadas con AOD (por ejemplo, Cirrosis, Hepatitis) 13. Número de muestras de orinas positivas por drogas de aspirantes y empleados Ejemplo 2: Mas indicadores de nivel recomendados para las coaliciones de abuso de sustancias 1. Bebes afectados por las drogas 2. Estudiantes que abusan de las drogas y el alcohol 3. Arrestos juveniles por ofensas relacionadas con las drogas 4. Arrestos adultos por ofensas relacionadas con las drogas 5. Personas arrestadas que salen positivos en las pruebas 6. Plantas cortadas de marihuana 7. Personas aspirantes a trabajos que salen positivas 8. Empleados con programas de asistencia 9. Personas en tratamiento por problemas de abuso de sustancias 10. Adolescentes involucrados en muertes en el tráfico por alcohol 11. Adultos involucrados en muertes en el tráfico por el alcohol 12. Muertes por sobredosis Ejemplo 3: Indicadores de nivel recomendados para los programas del control del enojo. 1. Muertes ocurridas por daños no intencionales 2. Hospitalizaciones debidas daño no intencional 3. Muertes causadas por choques de vehículos de motor 4. Muertes a partir de caídas o daños relacionados con caídas 5. Ahogados 6. Fractura de cadera en adultos mayores 7. Admisiones de emergencia por envenenamientos no riesgosos 8. Hospitalizaciones debido a daños en la cabeza no riesgosos 9. Hospitalizaciones debidos a daños espinales no riesgosos 10. Daños secundarios asociados con daños en la cabeza o la médula espinal 11. Muertes debidas a daños relacionados con el campo 12. Hospitalizaciones debidas a daños relacionados con el campo 13. Las fuentes locales de otras medidas pueden incluir reportes policíacos, datos a partir de clínicas y salas de emergencia, centros de cuidado infantil, escuelas, casas de enfermería, agencias de servicio social, servicios para ancianos y compañías de seguros. Ejemplo 4: Indicadores de nivel recomendados para programas de prevención contra la violencia 1. Reportes de crímenes como violaciones, asalto, homicidio y robo 2. Maltrato infantil, de ancianos, de pareja y otros 3. Muertes por violencia 6 Referencias Berkowitz, William. (1982) Community impact: creating grassroots change in hard times. Cambridge, MA: Schenkman Publishing Company, Inc. Cox, Fred and eds. (1984) Tactics and techniques of community practice. Itasca, IL: F.E. Peacock Publishers, Inc. Fawcett, S.B., Paine-Andrews, A., Francisco, V.T., Schultz, J.A., Richter, K.P., Lewis, R.K., Williams, E.L., Harris, K.J., Berkley, J.Y., Fisher, J.L., & Lopez, C.M. (1994). Work group evaluation handbook: evaluating and supporting community initiatives for health and development, Lawrence, KS: Work Group on Health Promotion and Community Development, University of Kansas. Fetterman, David and eds. (1996) Empowerment evaluation: knowledge and tools for self-assessment and accountability. Thousand Oaks, CA: SAGE Publications, Inc. Francisco, V. and Wolff, T. (1990). Evaluating coalition efforts. Amherst, MA: AHEC Community Partners. Pietrzak, J., Ramler, M., Renner, T., Ford, L., and Gilbert, N. (1990) Practical program evaluation: examples from child abuse prevention. Newbury Park, CA: SAGE Publications, Inc. Rutman, Leonard, ed. (1984) Evaluation research methods: a basic guide. Newbury Park, CA: SAGE Publications, Inc. Materiales Healthy People 2000: National Health Promotion and Disease Prevention Objectives Superintendent of Documents Government Printing Office Washington, DC 20402-9325 (202) 783-3238 Temas relacionados Capítulo 30, Sección 1: Líderes, evaluadores y patrocinadores comunitarios Capítulo 30, Sección 2: Selección del grupo de trabajo Capítulo 30, Sección 3: Determinando si el programa comunitario está funcionando. Capítulo 31, Sección 1: Uso del sistema del grupo de trabajo para evaluar los programas comunitarios para la salud y el desarrollo. 7 Capítulo 31, Sección 2: Sistema de monitoreo Capítulo 31, Sección 3: Encuestas sobre las metas Capítulo 31, Sección 4: Encuesta del proceso Capítulo 31, Sección 5: Encuesta de resultados Capítulo 31, Sección 6: Reporte de metas Capítulo 31, Sección 7: Encuesta conductual Capítulo 31, Sección 8: Entrevistas con participantes claves Capítulo 32, Sección 1: Sistema de evaluación para responder preguntas clave sobre el programa Capítulo 32, Sección 2: Retroalimentación para mejorar el programa Capítulo 32, Sección 3: Comunicando información sobre el programa para obtener apoyo de audiencias clave Capítulo 32, Sección 4: Reflexión sobre el sistema de evaluación Lista cotejable A continuación encontrará una lista checable que resume los puntos más importantes contenidos en el texto. ¿Qué son los indicadores de nivel comunitarios? ¿Porqué utilizar los indicadores de nivel? Proveen la línea base para evidenciar el impacto del programa Ayudan a determinar los efectos de los componentes clave Ayudan a priorizar problemas Ayudan a asegurar apoyo ¿Cuándo evaluar los indicadores de nivel? ¿Cómo encontrar los indicadores? Seleccionar indicadores disponibles Contactar agencias relevantes para encontrar los datos Compilar, resumir y graficar los datos Presentar los datos a la comunidad Utilizar los datos para obtener la atención sobre el problema Acetatos A continuación encontrará los puntos que resumen esta sección. Indicadores de nivel comunitarios Los indicadores de nivel comunitarios ayudan saber como las metas afectan a la comunidad Proveen la “línea base” para evidenciar el impacto de la iniciativa Ayudan a determinar los efectos de los componentes clave del programa 8