EVALUACIÓN INICIA 2012 JORNADA DE SOCIALIZACIÓN DE TEMARIOS CPEIP, 25 de Septiembre 2012 Objetivos de la Jornada • Informar a las Instituciones de Educación Superior que forman Educadores(as) de Párvulos y Profesores de Educación Básica y Media, sobre los contenidos y habilidades que serán evaluados en las pruebas que comprenden la Evaluación INICIA 2012. • Presentación Temarios: información general sobre la prueba; criterios de selección de estándares a ser evaluados; temas a evaluar en cada prueba y estándares asociados; cantidad (rango) de preguntas por tema. • Indagar en la percepción de los representantes de las Instituciones de Educación Superior sobre aspectos principales de los temarios socializados. Organización de la Jornada Jornada Mañana Jornada Tarde Presentación General Pruebas Conocimientos Disciplinarios Presentación General Pruebas Conocimientos Pedagógicos Talleres Grupales por prueba: - Presentación Temarios Estándares Disciplinarios - Protocolos de Revisión de Temarios Talleres Grupales por prueba: - Presentación Temarios Estándares Pedagógicos - Protocolos de Revisión de Temarios Comentarios y Cierre Pruebas de Conocimientos Disciplinarios Comentarios y Cierre Pruebas de Conocimientos Pedagógicos Características Evaluación Inicia • Evaluación Diagnóstica Nacional para Egresados de Carreras de Pedagogía. • - Objetivos Entregar información diagnóstica a las Instituciones de Educación Superior, sobre la calidad de la formación de sus egresados de Pedagogía. - Proveer información a los egresados de carreras de Pedagogía, respecto a los aprendizajes adquiridos en su formación de pregrado. - Identificar fortalezas y debilidades de la formación docente, a fin de orientar el diseño de las políticas públicas para mejorar la formación inicial docente en Chile. - Propiciar una mayor valoración profesional y social de los profesores. Proyecto de Ley Nueva Carrera Docente • Mayores exigencias para ingresar a la carrera laboral. • Mejoramiento del sistema de promoción y desarrollo profesional. • Perfeccionamiento del sistema nacional de evaluación de desempeño. • Aumento significativo de la remuneración para los buenos docentes. • Mayores atribuciones a los sostenedores y directores de escuela • Disminución de las horas lectivas • Evaluación Nacional obligatoria y habilitante: Examen Inicial de Excelencia Profesional Docente. Evolución Evaluación Inicia Año 2008 Año 2009 Año 2010 Año 2011 Prueba de Conocimientos Pedagógicos y Disciplinarios Ed. Parvularia Prueba Conocimientos Pedagógicos Ed. Parvularia Prueba Conocimientos Disciplinarios Ed. Parvularia Prueba Conocimientos Pedagógicos Ed. Básica * Prueba de Conocimientos Disciplinarios Ed. Básica Prueba de Conocimientos Pedagógicos Ed. Media Prueba de Conocimientos Disciplinarios Ed. Media Lenguaje y Comunicación Prueba de Conocimientos Disciplinarios Ed. Media Matemática Prueba de Conocimientos Disciplinarios Ed. Media Historia, Geografía y Cs. Sociales Prueba de Conocimientos Disciplinarios Ed. Media Física Inicia 2012 NO incluirá Prueba TICs Prueba de Conocimientos Disciplinarios Ed. Media Química Prueba de Conocimientos Disciplinarios Ed. Media Biología Prueba de Habilidades de Comunicación Escrita Prueba de Habilidades TICs en ambiente pedagógico * Año 2012 Avances Evaluación Inicia 2012 • Estándares Orientadores como referentes en la Elaboración de las Pruebas de Conocimientos Disciplinarios y Pedagógicos en cada uno de los niveles escolares y disciplinas evaluadas. • Evaluación a egresados de Educación Parvularia consistente en dos pruebas diferenciadas: Prueba de Conocimientos Disciplinarios y Prueba de Conocimientos Pedagógicos. • Incorporación de egresados de carreras de Pedagogía en Educación Media al proceso de evaluación, en las áreas de Lenguaje y Comunicación; Matemática; Historia, Geografía y Ciencias Sociales; Biología; Física; y Química; ampliando el universo de egresados y sectores pedagógicos evaluados. Referentes Evaluación Inicia • Estándares Orientadores para : - Egresados de Carreras de Pedagogía en Educación Parvularia - Egresados de Carreras de Pedagogía en Educación Básica - Egresados de Carreras de Pedagogía en Educación Media en Lenguaje y Comunicación; Matemática; Historia, Geografía y Ciencias Sociales; Física; Química; y Biología. • Bases Curriculares Componentes de la Evaluación Inicia Conoce la disciplina • Prueba de Conocimientos Disciplinarios Sabe cómo enseñar • Prueba de Conocimientos Pedagógicos Competencias profesionales básicas • Prueba de Habilidades Básicas de Comunicación Escrita Puntajes de Corte - Niveles de Desempeño • Para los reportes de resultados del 2012 se espera poder especificar la posición de los puntajes informados (tanto a instituciones como a evaluados) respecto de un punto de corte. • Estos puntajes de corte permiten diferenciar distintos niveles de desempeño en cada una de las pruebas aplicadas. • El establecimiento de puntajes de corte implica un juicio experto que determina cuánto es lo mínimo que se debe poder responder en una prueba para alcanzar un determinado Nivel de Logro. • Se utilizará el procedimiento de Bookmark*, cuya metodología es una de las más empleadas a nivel internacional para establecer niveles de desempeño en pruebas estandarizadas. • El establecimiento de puntos de corte se realizará para las Pruebas de Conocimientos Pedagógicos y las Pruebas de Conocimientos Disciplinarios en Educación Parvularia, Educación Básica y Educación Media (Lenguaje, Matemática, Cs. Sociales, Física, Química y Biología). *Lewis, Mitzel & Green, 1996; Mitzel et al., 2001; Cizek & Bunch, 2007. Niveles de Desempeño • La Evaluación Inicia, y su alineación a los estándares orientadores, permite distinguir entre distintos Niveles de Desempeño: • A partir de este año, las pruebas Inicia respaldadas en los Estándares Orientadores Dominio avanzado de tres habilidades para Egresados de Pedagogía en Educación Básica, permiten distinguir niveles y conocimientos necesarios para de desempeño: Nivel Sobresaliente desempeñarse como docente. Nivel Aceptable Nivel Insuficiente Dominio básico de habilidades y conocimientos necesarios para iniciar el ejercicio de la profesión docente. No demuestra conocimientos y habilidades necesarios para iniciar el ejercicio de la profesión docente. 11 ASPECTOS GENERALES EVALUACIÓN INICIA 2012 Características de la Evaluación Inicia 2012 PRUEBA FORMATO PREGUNTAS CANTIDAD PREGUNTAS Conocimientos Disciplinarios Selección Múltiple mín. 60 Conocimientos Pedagógicos Selección Múltiple mín. 50 Habilidades Básicas de Comunicación Escrita Ensayo Escrito Participantes Evaluación Inicia 2012 • Egresados de Carreras de Pedagogía en Educación Parvularia • Egresados de Carreras de Pedagogía en Educación Básica • Egresados de Carreras de Pedagogía en Educación Media en Lenguaje y Comunicación; Historia, Geografía y Ciencias Sociales; Física; Química; y Biología. Inscripción Institucional: Instituciones de Educación Superior Pre-Inscripción Diciembre 2012 / Confirmación Marzo 2013 • Participantes en la Evaluación Inicia de años anteriores Inscripción Individual: Directa por parte del Evaluado Pruebas Prueba C. Pedagógicos Educación Parvularia Prueba C. Disciplinarios Educación Parvularia Prueba C. Pedagógicos Educación Básica Prueba C. Disciplinarios Educación Básica Prueba C. Pedagógicos Educación Media Prueba C. Disciplinarios Ed. Media - Lenguaje Prueba C. Disciplinarios Ed. Media - Matemática Prueba C. Disciplinarios Ed. Media – Cs. Sociales Prueba C. Disciplinarios Ed. Media – Química Prueba C. Disciplinarios Ed. Media – Física Prueba C. Disciplinarios Ed. Media – Biología Prueba Habilidades de Comunicación Escrita Prueba de Habilidades Básicas TICs Ed. Parvularia Ed. Básica Ed. Media Lenguaje Matemática Cs. Sociales Química Física Biología Fecha y Lugar de Aplicación • Fecha de Aplicación Abril 2013 Dos días consecutivos Consideración a carreras mixtas (Física-Matemática; Biología-Física-Química) • Lugar de Aplicación Instituciones de Educación Superior 16 Reporte de Resultados • Reportes individuales a los egresados de las carreras de pedagogía: – – – • Asistencia. Resultados totales y por dimensión evaluada en cada prueba. Resultados comparativos a nivel nacional e institucional. Reporte de resultados a las instituciones de educación superior Enviada a Rectores, Decanos de Facultades y/o Directores de Escuelas de Educación y Coordinadores. Informa sobre: – Asistencia por prueba. – Resultados individuales de sus egresados por prueba (sin identificación). – Resultados generales por prueba. Comparación entre programas y sedes. Comparación con resultados nacionales. • Entrega Pública de resultados Transmitida a los medios de comunicación masiva y a la población general: – Resultados Nacionales en cada prueba aplicada. – Resultados Regionales en cada prueba aplicada. – Resultados Institucionales en cada prueba aplicada. PROCESO DE ELABORACIÓN EVALUACIÓN INICIA 2012 Equipos Elaboradores Pruebas de Conocimientos Disciplinarios en Ed. Parvularia, Básica y Media • Centro de Investigación Avanzada en Educación (CIAE) – U. de Chile • Centro de Modelamiento Matemático (CMM) – U. de Chile • Departamento de Evaluación, Medición y Registro Educacional (DEMRE) – U. de Chile • Centro de Políticas Comparadas en Educación (CPCE) – U. Diego Portales Pruebas de Conocimientos Pedagógicos en Ed. Parvularia, Básica y Media • MIDE UC. Pontificia Universidad Católica de Chile Prueba de Habilidades de Comunicación Escrita • Adaptación: CPEIP 19 Criterios de Elaboración de Preguntas Pruebas Conocimientos Disciplinarios y Pedagógicos Criterios utilizados: • Evaluables con formato lápiz y papel • Evaluables con preguntas de selección múltiple • Estándares Orientadores • Alineadas con currículum escolar vigente • Imprescindibles, criterio experto Metodología para alinear los temarios o tablas de especificaciones de las prueba de Conocimiento Disciplinarios y Pedagógicos a) Concurrencia entre las categorías consideradas en los estándares y en las tablas de especificaciones*. A partir del análisis de los estándares, se han determinado los principales ámbitos o temas centrales de conocimiento a evaluar tanto para los estándares disciplinarios como para los pedagógicos, para estructurar las especificaciones de las pruebas. *Categorical concurrence (Webb, 1997, 1999) Webb, N. (1997). Determining Alignment of Expectations and Assessments in Mathematics and Science Education. NISE Brief 1(2). Madison, WI: University of Wisconsin-Madison, National Institute for Science Education. January, 1997. Metodología b) Amplia representatividad de temas y estándares asociados en la prueba definitiva, con pesos asignados en consideración a su alineación con el currículo escolar. Incorporación exhaustiva de temas y estándares orientadores correspondientes a cada prueba, a fin de representar la mayor parte de los conocimientos disciplinarios y pedagógicos establecidos en los estándares. La asignación de pesos para cada uno de los Temas asociados a las distintas pruebas, depende de la alineación de sus contenidos con el currículo escolar vigente. Metodología c) Consistencia entre las habilidades cognitivas relevadas por los estándares y las que se propone que sean evaluadas por las pruebas*. Se definen las habilidades cognitivas a evaluar para determinar luego cuáles de ellas son más relevadas en la formulación de los estándares para que se vean representadas en la prueba con fuerza similar. Esto implica determinar las demandas cognitivas presentes en los estándares para incorporarlas en la información contenida en las tablas de especificaciones, y, a su vez, en el proceso de levantamiento de las preguntas de la prueba. *Depth-of-knowledge consistency (Webb, 1999; Wixon, 2002) Webb, N. (1999). Alignment of Science and Mathematics Standards and Assessments in Four States. Madison, WI: University of Wisconsin-Madison, National Institute for Science Education. Wixson, K.K., M.C. Fisk, E. Dutro, J. McDaniel. (2002). The Alignment of State Standards and Assessments in Elementary Reading. CIERA Report #3-024. Ann Arbor, MI: University of Michigan School of Education, Center for the Improvement of Early Reading Achievement. Metodología Categorías de habilidades relacionadas con el dominio de conocimientos de egresados de pedagogía*: • El profesor conoce: maneja información relevante en relación con los conocimientos disciplinarios y pedagógicos, siendo capaz de reconocer y recordar conceptos, fenómenos, principios, teorías, estrategias y métodos. • El profesor comprende: demuestra dominio de conocimientos disciplinarios y pedagógicos, siendo capaz de integrar los saberes que posee. Es capaz de aplicar y relacionar conceptos, principios, leyes y teorías a situaciones y problemas. • El profesor analiza y utiliza el conocimiento: recurre a sus conocimientos disciplinarios y pedagógicos para analizar y evaluar información en base a la cual debe llegar a una conclusión. Es capaz de plantear hipótesis y preguntas, dilucidar significados o información implícita, establecer generalizaciones, contrastar evidencia, criticar conceptos, modelos, acciones, estrategias, fenómenos o situaciones para tomar decisiones. *Bloom, 1956; Marzano, 2000; Anderson, 2001) Bloom B. S. (1956). Taxonomy of Educational Objectives, Handbook I: The Cognitive Domain. New York: David McKay Co Inc. Marzano, R. J. (2000). Designing a new taxonomy of educational objectives. Thousand Oaks, CA: Corwin Press. Anderson, L. W. and David R. Krathwohl, D. R., et al (Eds..) (2001) A Taxonomy for Learning, Teaching, and Assessing: A Revision of Bloom's Taxonomy of Educational Objectives. Allyn & Bacon. Boston, MA (Pearson Education Group). Habilidades Cognitivas Evaluadas: Representatividad en Pruebas Inicia 2012 30% 30% Conocer Comprender Analizar y Utilizar 40 % Temas Estándares Disciplinarios Educación Parvularia Prueba de Conocimientos Disciplinarios Educación Parvularia Tema 1 Tema 2 Desarrollo infantil integral Artes visuales, musicales y escénicas Tema 3 Desarrollo del lenguaje verbal Tema 4 Matemática Tema 5 Ciencias Naturales Tema 6 Ciencias Sociales Temas Estándares Disciplinarios Educación Básica Prueba de Conocimientos Disciplinarios Educación Básica Eje: Lenguaje y Comunicación Eje: Matemática Geometría Conocimiento del aprendizaje de la Disciplina Historia Álgebra Física Geografía Lectura Números Tema 2 Escritura Tema 3 Comunicación oral Gramática Datos y Química probabilidades Tema 5 Tierra y Universo Tema 6 Eje: Historia, Geografía y Ciencias Sociales Conocimiento científico y su aprendizaje Biología Tema 1 Tema 4 Eje: Ciencias Naturales Habilidades de pensamiento científico Formación ciudadana Habilidades de investigación en Ciencias Sociales Temas Estándares Disciplinarios Educación Media Pruebas de Conocimientos Disciplinarios Educación Media Lenguaje y Comunicación Matemática Cs. Sociales Biología Tema 1 Lectura Tema 2 Sistemas numéricos y álgebra Conocimiento de la enseñanza y aprendizaje de la disciplina Conocimiento científico y su aprendizaje Conocimiento Científico y su aprendizaje Conocimiento científico y su aprendizaje Escritura Cálculo Historia Herencia y evolución biológica Movimiento y fuerza Estructura atómica y molecular Tema 3 Comunicación oral Estructuras Algebraicas Geografía Célula: Estructura y función Ondas: Propiedades y fenómenos asociados Estados de agregación Tema 4 Conocimientos fundamentales de la disciplina Geometría Ciencias Sociales Estructura y función de los seres vivos Comportamiento de fluidos Estequiometría, termodinámica y cinética Datos y azar Habilidades de investigación e interpretación Ecología Modelos y principios termodinámicos Compuestos orgánicos e inorgánicos: Estructura y reactividad Formación ciudadana Habilidades del pensamiento científico Campos eléctricos y magnéticos Habilidades del pensamiento científico Tema 5 Tema 6 Física Tema 7 Principios físicos a nivel atómico y subatómico Tema 8 Tierra y universo Tema 9 Habilidades de pensamiento científico Química Temas Estándares Pedagógicos Prueba de Conocimientos Pedagógicos Ed. Parvularia, Básica y Media Tema 1 Tema 2 Aprendizaje y desarrollo de los estudiantes Diseño e implementación de la enseñanza Tema 3 La profesión docente y el sistema educacional chileno Estimación de Pesos por cada Tema en Pruebas Definitivas • La representatividad de los distintos Temas dentro de las pruebas de Conocimientos Pedagógicos y Disciplinarios, se expone a través de una estimación de la cantidad de preguntas por Tema a ser incorporadas en las mismas. • La cantidad de preguntas por Tema que se incluirían en la prueba definitiva se expresa en rangos. • Para asignar los pesos a cada Tema, se han considerado los estándares correspondientes y su alineación al currículum escolar. “La calidad de un sistema educativo no puede exceder la calidad de sus profesores” (Informe McKenzie, 2007) Gracias www.mineduc.cl