DESCRIPCIÓN DEL PROCESO DE DEFINICIÓN DE LOS INSTRUMENTOS DE EVALUACIÓN DE LAS CAPACIDADES TECNICAS DEL CENTRO NACIONAL DE PREVENCIÓN DE DESASTRES INTRODUCCIÓN El presente trabajo pretende mostrar, el proceso de desarrollo de las dos capacidades técnicas1 específicas definidas para el Centro Nacional de Prevención de Desastres: CENAPRED, organismo desconcentrado de la Secretaría de Gobernación. La capacidades definidas para el CENAPRED corresponden a la capacitad técnica sobre el apoyo técnico que se proporciona al Sistema Nacional de Protección Civil, y a la capacidad de Prevención de Desastres. La descripción de ambas capacidades técnicas se considera como una primera aproximación de un nivel genérico considerando las condiciones actuales de organización al nivel gubernamental para hacer frente a los diferentes tipos de fenómenos perturbadores de origen natural y antrópico que se presentan en la República Mexicana, así como la aproximación a su solución que se ha implementado a través de políticas públicas que buscan dar atención a los desastres con la intervención de las estructuras gubernamentales del nivel local (estatal y municipal), así como con la asistencia económica directa a las familias o sectores afectados por desastres. Cabe hacer la mención de que a partir de la creación del Sistema Nacional de Protección Civil en mayo de 1986 y como respuesta a la necesidad de contar con un conjunto de estructuras y programas que permitieran al gobierno federal tener una respuesta a la sociedad civil en materia de protección ante la ocurrencia de desastres en la República Mexicana evidenciadas por la ocurrencia de los sismos del 19 y 20 de septiembre de 1985, con afectación importante en la ciudad de México y en otras ciudades del territorio nacional y, sobre todo ante la falta de una respuesta organizada y coordinada por las autoridades de los niveles federal, estatal y municipal , es que el gobierno federal de ese momento tomó la decisión de crear un sistema que cubriera dichas necesidades y se instrumentaron los primeros programas no militares a través de dependencias del gobierno que llevaran a cabo las acciones de protección a la población mexicana. En el presente año, se cumplen por cierto 20 años de la creación del Sistema Nacional de Protección Civil. 1 De acuerdo al artículo 54 del Reglamento de la Ley del Servicio Profesional de Carrera en la Administración Pública Federal, las capacidades son los conocimientos, habilidades, actitudes y valores expresados en comportamientos, requeridos para el desempeño de un puesto. 1 PROCESO DE DEFINICIÓN DE LAS CAPACIDADES TÉCNICAS ESPECÍFICAS DEL CENAPRED. La tarea de desarrollar las capacidades técnicas específicas significa desarrollar la descripción detallada de la “radiografía” de conocimientos, aptitudes y habilidades que habrá de poner en práctica el servidor público de carrera certificado en las capacidades de apoyo a la protección civil y prevención de desastres. Para desarrollar esta “radiografía” fue necesario aplicar técnicas de análisis de tareas para descomponer los elementos de cada tarea, identificando las condiciones antecedentes, el comportamiento y el consecuente de cada tarea sustancial de un proceso de trabajo. Ante la necesidad de dar cumplimiento al requerimiento de parte de la Dirección General de Recursos Humanos de la Secretaría de Gobernación para el llenado de formatos referentes a la Descripción de Capacidades Técnicas Específicas, se siguió el siguiente proceso: 1. Se reunieron todos los servidores públicos susceptibles a ser Servidores Públicos de Carrera en reunión plenaria para escuchar de los representantes de la Secretaría de la Función Pública y de la Dirección General de Recursos Humanos de la SEGOB, las definiciones y características de las capacidades técnicas. 2. Se procedió al inicio del llenado de formatos de capacidades técnicas en 3 grupos : Grupo 1 integrado por la Dirección de Investigación, Grupo 2, integrado por la Dirección de Instrumentación y Cómputo y por la Dirección de Capacitación y Grupo 3 integrado por la Dirección de Difusión y la de Administración y Servicios Técnicos. 3. Posteriormente, ante el cambio constante de formatos, se abandonó el esquema original de trabajo en tres grupos. 4. Se realizó una reunión plenaria entre los funcionarios públicos de las Direcciones Sustantivas de la operación del CENAPRED. 5. Se definieron 35 capacidades técnicas específicas, contando con un diccionario de niveles conductuales2 (ver cuadro 1) elaborado por la Dirección de Capacitación del Centro y con toda la información sobre el llenado de formatos leído por los servidores públicos. 6. Ante la sugerencia de la Secretaría de la Función Pública, se redujo la estrategia de descripción de capacidades a 5 (una por área sustantiva del Centro). Con la participación de un grupo más reducido: un Integrante de cada Dirección Sustantiva. 7. Nuevamente ante la solicitud de la Dirección de Capacidades de la SFP, se decidió reducir el número a 2 capacidades técnicas específicas. 8. Ante la dificultad de que todos los puestos se vieran reflejados en las capacidades técnicas específicas, se optó por decidir aquellas con las cuales se cumpliera la Misión del CENAPRED, de tal modo que al cubrirlas, todos los puestos del Cenapred tuvieran alguna vinculación en menor ó mayor grado. 9. Se encontró que las dos capacidades técnicas específicas que cubrían con la premisa de reflejar la Misión del CENAPRED son: Prevención de Desastres y Apoyo al Sistema Nacional de Protección Civil 2 Descripción de la taxonomía de Benjamín Bloom, cuya aproximación en el estudio cognoscitivo de los comportamientos de las personas los clasifica en dos grupos: 1. conocimientos y habilidades intelectuales y 2. destrezas (Lona, 2005, pag. 109). Subdivididas a su vez en seis. 2 10. Se realizó el llenado entre un equipo interdisciplinario, compuesto por funcionarios públicos de las diferentes Direcciones Sustantivas del Centro Nacional De Prevención De Desastres, con el apoyo de la asesoría de la Secretaría de la Función Pública y posteriormente se efectuó el registro de las mismas, correspondiendo actualmente a los siguientes números de registro: TE04HOO00033000025 y TE04HOO000033000045 CUADRO 1. Verbos conductuales. NIVEL COGNITIVO VERBOS CONDUCTUALES Y EJEMPLO CONOCIMIENTO Verbos: recuerda, memoriza, reconoce, Ejemplo: Repite oralmente un artículo de una Ley. Verifica los elementos de un kitt de monitoreo ambiental, comparándolo contra una lista existente. COMPRENSIÓN Verbos: explica, parafrasea, redacta Ejemplo: Describe las características que debe tener un albergue considerando su localización. APLICACIÓN Verbos: aplica, construye, manipula, opera, muestra resuelve Ejemplo: Utiliza un monitor de radiación ionizante para determinar si una persona está contaminada. ANÁLISIS Verbos: Analiza, compara, contrasta, diagrama, desmenuza, ilustra Ejemplo: Frente a un escenario de riesgo radiológico, calcula el tiempo de arribo de una nube radiactiva a una población determinada. SÍNTESIS Verbos: categoriza, combina, diseña, genera, crea Ejemplo: Frente a un escenario determinado, diseña las rutas de acceso a una zona en riesgo, considerando el tipo de equipo de protección necesario para el personal de rescate. EVALUACION Verbos: concluye, defiende, justifica, resuelve Ejemplo: Explica y justifica la solución más efectiva para atender a un paciente irradiado, contemplando el riesgo biológico y las dosis recibidas a un órgano determinado. Fuente : Elaboración propia, basada en el Manual del Curso: Diseño de Pruebas y Elaboración de Reactivos. CENEVAL. México (2005) DEFINICIÓN DE TEMARIOS Y BIBIOGRAFÍA BÁSICA DE LAS CAPACIDADES TÉCNICAS ESPECÍFICAS DE LA INSTITUCIÓN: A través de la evaluación diferentes grados de desarrollo de las descripciones de las capacidades técnicas específicas, se conformó el grupo técnico encargado de su descripción de la siguiente manera: A partir de los temas generales sugeridos por la dirección de capacitación del CENAPRED en coordinación con la asesora de la Secretaría de la Función Pública, se acordaron los componentes generales de cada capacidad técnica específica, misma que fue revisada contando con la aprobación y participación del servidor público designado por cada Director de área para encargarse de formular cada renglón de descripción: conocimientos específicos y profundidad de conocimiento. Al finalizar la descripción, nuevamente se circuló entre todos los servidores públicos para su revisión y aprobación ó sugerencias de modificación. Podríamos decir, entonces que se desarrollaron dos capacidades técnicas de nivel estratégico que comprenden los diferentes puestos de las diferentes Direcciones del CENAPRED, tanto sustantivas, como de apoyo a un nivel elemental- básico. Esta condición de contar con capacidades de nivel estratégico nos da la ventaja de poder 3 abarcar a todos los puestos comprendidos en el Servicio Profesional de Carrera, sin embargo, no es posible a través de esas dos capacidades técnicas abarcar los niveles altos de especialidad de cada puesto, por lo que no se desarrolló el nivel experto. para el nivel experto de la capacidad específica de prevención de desastres, se prevé que en un futuro se desarrollen nuevas capacidades técnicas específicas para cada para de especialidad, por ejemplo: para el monitoreo del volcán Popocatépetl, para la aplicación del Sistema de Alerta Temprana ante Huracanes, etc. En razón de lo anterior, se procedió a solicitar a cada servidor público la identificación del nivel correspondiente al puesto que ocupan, para cada una de las dos capacidades técnicas específicas desarrolladas y se acordó con. DISEÑO DE CONTENIDOS PARA LA CAPACITACIÓN DE CAPACIDADES TÉCNICAS ESPECÍFICAS Bajo este contexto, el responsable de la capacitación en protección civil, debe poseer conocimientos de la protección civil en general, de los Programas nacionales en ese tema y debe ser capaz de confrontar contra los diferentes programas estatales y municipales, las líneas de acción que comprenden sus acciones de gobierno en la materia y adicionalmente, deben poseer la capacidad de seleccionar la técnica didáctica más adecuada al tipo de comportamiento que se pretenda establecer de tal manera que la descripción de dicha capacidad sería el producto de la combinación de varias capacidades específicas, lo que la convierte en una capacidad especializada de mayor nivel. Es decir, podría decirse que se requiere la combinación de ambas áreas del conocimiento: la pedagógica en lo general y la de protección civil en lo particular. Tomando como referencia los formatos empleados por la Secretaría de la Función Pública para la descripción de capacidades técnicas la siguiente: CUADRO 2. Estructura de las capacidades técnicas. Ejemplo para la capacidad técnica de prevención de desastres Áreas de conocimiento: Conceptos básicos NIVEL DE DESCRIPTOR que comprende DOMINIO CONOCIMIENTOS GENERALES (TEMAS ó CAPÍTULOS DE ESTUDIO) Avanzado Interpretar el diagnóstico Diagnóstico de de riesgos para la peligros e Prevención de Desastres identificación de riesgos 4 Áreas de aplicación específica CONOCIMIENTOS ESPECÍFICOS (SUBTEMAS DE ESTUDIO) : Origen y manifestación de riesgos químicos. Origen y manifestación de riesgos hidrometeorológicos. Origen y manifestación de riesgos geológicos. Tecnologías Monitoreo Alertamiento Fenómenos Naturales. Monitoreo de sismos: instrumentos para de realizar monitoreo. y Monitoreo de volcanes: instrumentos de de monitoreo. Monitoreo de inundaciones: Sistemas de Alerta hidrometeorológica. Alertamiento de ciclones tropicales: Sistema de Alerta TEMPRANA DE Ciclones Tropicales (SIAT) FUENTE: elaboración propia basada en los formatos para la descripción de capacidades técnicas específicas emitidos por la SFP. Posteriormente, en la fase de definición de temarios para la descripción de los cursos de capacitación de cada capacidad específica y para el desarrollo de las herramientas de evaluación de la capacidad técnica específica, se procedió a realizar el acopio de todos los documentos, publicaciones de diferente tipo: libros y revistas publicados por el propio CENAPRED, ponencias, presentaciones de power point, así como las Leyes y Reglamentos que rigen el funcionamiento del Centro, que los diferentes servidores públicos consideraron como soporte documental existente a la descripción de componente de conocimiento requerido en la que participaron y que pudieran aglutinar los conocimientos mínimos que pudieran “cubrir” a todos los conceptos básicos requeridos para que de manera genérica se pudieran describir ambas capacidades técnicas específicas. Considerando la aplicación de ambas capacidades en el desempeño de su trabajo, el Servidor Público de Carrera del CENAPRED, como resultado, aplicará la combinación de ambas capacidades, mismas que deberán responder a una realidad social-económica y tecnológica del país en un contexto de vulnerabilidad ante la posible ocurrencia de diversos fenómenos en las diversas zonas geográficas de nuestro país. Tomando en cuenta la polivalencia de las diferentes áreas de dominio que será requerida para quien presente una capacidad técnica en materia de protección civil y prevención de desastres, la descripción, herramientas de evaluación y mecanismos de capacitación que se empleen deberán ser desarrollados con toda precisión y cuidado dado el nivel de “expertise” que la propia capacidad requiere. Es decir, sin pretender que el perfil de desempeño del encargado de la capacitación en protección civil y prevención de desastres sea un “todólogo”, sí deberá presentar un conjunto de conocimientos diversos de nivel básico en diferentes materias y un conocimiento profundo de los aspectos referidos a cada puesto en particular. Se registró ante la Dirección de Capacidades de la Secretaría de la Función Pública a la Dirección de Capacitación del CENAPRED como ente capacitador para ambas capacidades registradas para el Centro y se desarrolló la carta descriptiva correspondiente, así como los materiales básicos de apoyo, conformando el libro de texto de cada capacidad técnica específica. El libro de texto se estructuró tomando directamente de los documentos base seleccionados por los expertos de cada tema, los párrafos y páginas cuyo contenido responde a los materiales mínimos requeridos. Se editó el material en un solo texto y se reprodujo para cada participante en el curso. 5 CUADRO 3.Técnicas de evaluación cualitativa de contenidos para la capacitación de las capacidades técnicas específicas TÉCNICA Visión de Futuro DESCRIPCION DE LA TÉCNICA EMPLEADA El coordinador , bajo una hipótesis de la aplicación de cursos de capacitación sobre las capacidades técnicas específicas desarrolladas para el CENAPRED promovió las participaciones creativas de su equipo. Arbol de Mediante la combinación de la técnica de brainstorming, y de análisis de causa-efecto, transformación para cada elemento o rama de aplicación, se propusieron de 2 a 4 alternativas posibles, asignándoles probabilidades de aplicación. Check- List Se elaboró un listado de indicadores a evaluar para el programa de capacitación y se establecieron valores esperados del indicador (# de aciertos/total de reactivos), marcando si se han alcanzado ó no. Matriz de Se elaboró una matriz de doble entrada (Carta Descriptiva del Curso), considerando Solución de tareas ó elementos de los cursos de capacitación, contra problemas ó limitaciones para la Problemas consecución de las tareas planeadas, y se llenaron las celdas que correspondían al cruce entre columnas y filas. Fuente: Elaboración propia, basada en Gairín, Joaquín. (1997) Estrategias para la gestión del Proyecto Curricular de Centro Educativo. Universidad Autónoma de Barcelona. Síntesis. España. pag. 162 El momento de verdad de este tipo de acción, como de todas las acciones planeadas de capacitación, desde luego que será la evaluación de las capacidades técnicas y la certificación de los Servidores Públicos de Carrera del CENAPRED, a través de la opinión y aceptación de los evaluados mediante los instrumentos correspondientes. GRUPO DE EXPERTOS EN LA EVALUACIÓN DE CAPACIDADES TÉCNICAS ESPECÍFICAS Se integró un grupo de 3 personas para el desarrollo de la herramienta de evaluación de cada capacidad específica, con las siguientes funciones: - un encargado de la redacción de un banco de reactivos para cada nivel conceptual de la capacidad técnica. - un “sujeto de prueba” con la función de recibir grupos de reactivos y contestarlos, brindando sus observaciones, y - un encargado de revisión , para posteriormente efectuar la validación final de los reactivos componentes del banco de reactivos para la prueba definitiva. Ambos instrumentos de evaluación están compuestos por reactivos de opción múltiple, verdadero-falso y de relación de columnas y se aplicarán con lápiz-papel. Habrá un aplicador del instrumento de evaluación externo al CENAPRED, quien a partir del banco de reactivos de la capacidad técnica y del listado de claves de respuesta, efectuará la selección al azar de los reactivos de pruebas paralelas, las aplicará a cada servidor público y emitirá posteriormente la calificación correspondiente para que la Dirección de Capacitación del CENAPRED verifique que las calificaciones sean las correctas y emita la calificación correspondiente para que el servidor Público reciba finalmente su certificación del dominio de la capacidad técnica que posee ó en su caso, reciba la notificación de que requiere nuevamente recibir la capacitación correspondiente. 6 CONCLUSIONES Para que una capacidad técnica descrita alcance su utilidad máxima, deberá acompañarse de una definición operacional de las conductas que se esperan por niveles de dominio, que sean elegidos métodos didácticos adecuados no sólo para que los alumnos adquieran los conocimientos necesarios para llevar a cabo la actividad, sino para que puedan practicarlos. De la misma manera, la evaluación deberá partir de objetivos operativos, de las metas referidas al “ para qué” se llevan a cabo las acciones de capacitación; esto es, partir de evaluación de la eficacia de los programas de capacitación en la materia. El encargado de la capacitación en prevención de desastres y en protección civil debería conjuntar un perfil de competencias en pedagogía–capacitación de adultos, un conocimiento genérico de los riesgos y herramientas tecnológicas existentes para detectar los fenómenos, y una competencia de traducción de esos conocimientos en programas de capacitación especializada para los diferentes encargados de implementar las tareas específicas planeadas para cada tipo de fenómeno y en función de los planes de emergencia que sean desarrollados. En suma, la tarea de desarrollar capacidades técnicas específicas para una dependencia u organismo desconcentrado, comprende un conjunto de capacidades y competencias diversas que es necesario tener muy claro, para estar en condiciones de orientar líneas de acción ó programas de formación- capacitación de los encargados de desarrollar esta tarea, en particular considero que la experiencia de conformar grupos interdisciplinarios entre los expertos de la capacidad técnica y los expertos en desarrollo de cursos y en técnicas de análisis conductual es básico para lograr los resultados esperados. Referencias Bibliográficas Brenner, Teresa. Behavioral and Cognitive Task Análisis Integration for Assessing Individual and Team Work Activities. http://www.ijoa.org/currentwork/98symposium/brenneretal.html Castillo, Arredondo Santiago. Coordinador. (2002) Compromisos de la Evaluación Educativa. Prentice Hall. España, p.p. 35-112 Diario Oficial de la Federación. 31 de marzo de 2004. Reglamento de la Ley del Servicio Profesional de Carrera en la Administración Pública Federal. Estados Unidos Mexicanos. Escudero Muñoz, J.M. (1980) . Memoria sobre el concepto, método, programa y fuentes de Didáctica. Barcelona, España. p.p. 2- 47 Gairín, Joaquín. (1997) Estrategias para la gestión del Proyecto Curricular de Centro Educativo. Universidad Autónoma de Barcelona. Síntesis. España. pag. 162 Goleman, Daniel (2000). La inteligencia emocional en la empresa. Vergara. México. p.p. 167 - 315 7 López Quero, Manuel y Berrocal B., Francisca. (2003). Unidades Didácticas del Curso: Formación y Gestión del Conocimiento. Universidad Politécnica de Madrid. Centro de Estudios de Postgrado de Administración de Empresas. Lona, Sandra Victoria. Manual del Curso: Diseño de Pruebas y Elaboración de Reactivos. CENEVAL. México (2005). p.p. 109 Lorenzo Delgado, Manuel. (2001) La organización y gestión del centro educativo: Análisis de Casos Prácticos. Editorial Universitas. España, pag 348. Medina Rivilla, Antonio, (1995) “Elaboración de un modelo para valorar el proyecto formativo de un centro”, en Evaluación de programas educativos, centros y profesores. Medina, A y Villar, L.M. (Coordinadores) Madrid, España, Universitas. Pag. 146 Medina Rivilla, Antonio, Rodríguez Diéguez José Luis y Sevillano García, Ma. Luisa. (2003) Diseño, Desarrollo e Innovación del Currículum en las Instituciones Educativas . TOMO I., Universitas , Madrid, España , pp. 28-63 Reporte de Investigación Pelage, Agnès. 1998, en – Piloter des Sistèmes èducatifs en èvolution. Le role de’l encadrement. Coloque International. 13-14 Novembre 1997. Palais des Congrès du Futuroscope. Ministere de’lEducation nationale de la Recherche et de la Technologie: Centre Regional de Documentation Pedagogique de Poitou-Charentes, Paris-France p.p. 185-191 8