PISA 2022 APLICACIÓN DEFINITIVA MANUAL DEL EXAMINADOR DE PRUEBAS Producido por Westat, Equipo A de Operaciones de Campo en colaboración con los supervisores internacionales y la OCDE Manual del Examinador de Pruebas MS 2022 i Manual del Examinador de Pruebas MS 2022 TABLA DE CONTENIDOS CAPÍTULO 01: INTRODUCCIÓN ........ ¡ERROR! MARCADOR NO DEFINIDO. 1.1. ¿Qué es PISA?................................................................................................... 4 1.2. Componentes de PISA 2022 .............................................................................. 5 1.3. Rol del Colaborador en el establecimiento ......................................................... 6 1.4 Rol del Coordinador del establecimiento............................................................. 6 1.5. Rol del Examinador de prueba ........................................................................... 7 CAPÍTULO 02: ANTES DEL DÍA DE LA PRUEBA11 ¡ERROR! MARCADOR NO DEFINIDO. 2.1. Revise los materiales de entrenamiento y asista a la capacitación de Examinadores de prueba PISA ........................................................................ 11 2.2. Recibir información acerca de las fechas y horas de las pruebas ..................... 11 2.3. Recibir, revisar, y empaquetar de forma segura los materiales de prueba junto con el Coordinador del establecimiento................................................... 11 2.4. Familiarizarse con los códigos de identificación de las sesiones ...................... 15 2.5. Segunda visita al establecimiento. Revisar los planes para la prueba con el Coordinador del Establecimiento y el Colaborador en el Establecimiento .................................................. ¡Error! Marcador no definido. 2.6. Reconfirmar la fecha y hora de la prueba con el Colaborador en el establecimiento................................................................................................ 19 2.7. Prepare todos los materiales necesarios para las sesiones de prueba ............ 19 2.8. Familiarizarse con el guión para administrar la prueba y las Notas sobre el Cuestionario de estudiantes PISA 2022 para el Examinador de prueba .......... 20 CAPÍTULO 03: DÍA DE LA PRUEBA .............................................................21 3.1. Llegue al establecimiento y reúnase con el Colaborador en el Establecimiento y el Coordinador del establecimiento ..................................... 21 3.2. Reciba de parte del Colaborador en el establecimiento el Formulario de Seguimiento de estudiantes y actualícelo ........................................................ 21 3.3. Ordene la sala y los materiales ......................................................................... 21 3.4. Revise aspectos claves de la administración de la prueba ............................... 22 3.5. Conduzca la sesión de prueba ......................................................................... 25 3.6. Determine si se necesita realizar una sesión complementaria .......................... 26 CAPÍTULO 04: DESPUÉS DE LA PRUEBA ..................................................29 4.1. Complete las actividades posteriores a la prueba ............................................ 29 4.2. Prepare la carpeta del Establecimiento y el sobre para el Establecimiento....... 29 4.3. Comente la sesión de prueba con el Coordinador del establecimiento y el Colaborador en el establecimiento................................................................... 29 4.4. Organice una sesión complementaria ............................................................... 30 4.5. Prepare los materiales de prueba para devolverlos .......................................... 31 4.6. Devuelva los materiales de prueba a MIDE UC ............................................... 32 4.7. Otras actividades después de la prueba ........................................................... 32 ANEXO A: FORMULARIOS ...........................................................................34 ANEXO B: AYUDAS PARA EL TRABAJO....................................................35 ANEXO C: GUIÓN PARA EL EXAMINADOR DE PRUEBA ..........................36 ii Manual del Examinador de Pruebas MS 2022 ANEXO D: NOTAS SOBRE EL CUESTIONARIO DE ESTUDIANTES PISA 2022 PARA EL ADMINISTRADOR DE PRUEBA .................................37 iii Manual del Examinador de Pruebas MS 2022 CAPÍTULO 01: INTRODUCCIÓN Gracias por haber aceptado ser un Examinador de prueba para PISA 2022. El propósito de este manual es ayudarlo a comprender cómo usted podrá apoyar la implementación exitosa de este programa de evaluación de estudiantes a gran escala. Considerando la emergencia sanitaria por la que atraviesa el mundo y de la que aún no hay certeza en cuanto a su extensión, se asegurará que en cada uno de los países participantes, se apliquen los protocolos que garanticen la seguridad de los estudiantes en primer lugar y del personal que realiza la aplicación, y además se cumplan las normas técnicas relacionadas con cada etapa y proceso del proyecto para asegurar que los datos recolectados sean válidos y puedan ser utilizados para realizar los análisis necesarios en la etapa definitiva del proyecto. 1.1. ¿Qué es PISA? PISA significa Programme for International Student Assessment, (Programa Internacional de Evaluación de Estudiantes), y es una iniciativa patrocinada por la Organización para la Cooperación y el Desarrollo Económico (OCDE). PISA 2022 es el octavo estudio de PISA que se ha llevado a cabo desde el 2000 y que involucra a más de 85 países participantes. La aplicación experimental de PISA 2022 fue realizada en 2021 y la aplicación definitiva será en 2022. En Chile, PISA 2022 es responsabilidad de la Agencia de Calidad de la Educación de Chile y ha contratado a MIDE UC para que realice la aplicación en los establecimientos PISA tiene las siguientes características: Es el estudio internacional en educación de mayor escala del mundo. Evalúa estudiantes de aproximadamente 15 años de edad. Evalúa el grado de preparación de los estudiantes para enfrentar los retos de la vida adulta. Mide los logros de los estudiantes en Lectura, Ciencias Naturales, Matemática y Pensamiento creativo. Recoge información de contexto acerca de las prácticas educativas en los países participantes. Permite la participación de estudiantes en situación de discapacidad física, cognitiva, de comportamiento o emocional diagnosticada, que puedan trabajar de forma autónoma al menos una hora sin perder la concentración y que no requieran ningún tipo de ayuda o facilidades especiales. Participar en PISA es importante porque los resultados de esta evaluación pueden ser usados: para indicar qué tan bien preparados están los estudiantes en Chile para aprender una vez que salgan del colegio; 4 Manual del Examinador de Pruebas MS 2022 por las escuelas, los sistemas educativos y los gobiernos para identificar áreas de mejoramiento a través del tiempo; para permitir la comparación entre los distintos países del rendimiento de los estudiantes y el ambiente en que se da este aprendizaje. Para mayores detalles sobre PISA revisar la página de la OCDE: https://www.oecd.org/pisa/. y la página de la Agencia de calidad de la Educación en Chile: https://www.agenciaeducacion.cl/estudios/estudios-internacionales/pisa/ Nota sobre la Confidencialidad Todos los datos recogidos por PISA deben ser mantenidos en estricta confidencialidad. Ningún individuo o establecimiento es identificado en ningún informe del programa de evaluación. 1.2. Componentes de PISA 2022 A continuación, se describe la prueba realizada en computador, así como los diferentes tipos de cuestionarios. 1.2.1. Prueba PISA Un máximo de 42 estudiantes de cada establecimiento serán seleccionados al azar para completar una prueba en computador de dos horas, consistente en preguntas de Lectura, Ciencias Naturales, Matemática y pensamiento creativo. Ellos van a participar en una sesión de prueba estándar. Lo más probable es que, debido a la capacidad máxima permitida en un espacio cerrado por el riesgo de covid-19, no sea posible reunir a todos los estudiantes seleccionados en una sala. Por tanto, se deberán organizar tantas sesiones como sea necesario para que todos los estudiantes respondan de forma segura, garantizando el espacio necesario, así como el saneamiento de los lugares físicos y los equipos utilizados entre las diferentes sesiones a realizar. Un Examinador de pruebas coordinado por el Coordinador del establecimiento conducirá cada sesión. El Coordinador del establecimiento informará si en el establecimiento a su cargo será posible realizar una sesión específica para los estudiantes con discapacidades físicas, cognitivas, de comportamiento o emocionales diagnosticadas, pero que puedan trabajar de forma autónoma al menos una hora sin perder la concentración. Para estos estudiantes se organizará una sesión en una sala distinta y a cargo de otro Examinador. Si está conduciendo una sesión reducida para estudiantes con NEE, la prueba durará 60 minutos (por eso la llamamos sesión reducida de Una Hora), que puede extenderse a 1 hora con 40 minutos. 1.2.2. Cuestionarios de estudiantes A los estudiantes que fueron seleccionados para dar la prueba también se les pedirá completar 2 cuestionarios en el computador, inmediatamente después de la sesión de prueba o en un momento posterior. En la sesión estándar, estos cuestionarios se responden en 45 minutos 5 Manual del Examinador de Pruebas MS 2022 aproximadamente. Las descripciones de estos cuestionarios se pueden encontrar a continuación: El Cuestionario del estudiante examina las actitudes de los estudiantes hacia el aprendizaje y sus experiencias de vida. El Cuestionario de familiaridad con las tecnologías de la información y la comunicación explora las actividades y actitudes de los estudiantes en relación a estas actividades (TIC). En la sesión reducida de Una Hora, el cuestionario es uno solo y demora 20 minutos, que pueden extenderse a media hora. 1.2.3. Cuestionario de establecimiento El Cuestionario de establecimiento reúne información acerca de cómo funcionan los sistemas de educación dentro y entre los países. Es completado en línea, por el Director del establecimiento. El Coordinador de establecimiento es el responsable de supervisar esta actividad. 1.3. Rol del Colaborador en el Establecimiento Un Colaborador en el establecimiento es una persona designada por la dirección del establecimiento. Los Colaboradores son el nexo entre sus establecimientos, el personal de MIDE UC y los Examinadores de prueba. Aunque el Colaborador en el Establecimiento trabajará con usted en la planificación de la prueba y lo apoyará el día de la prueba, sólo usted puede administrar la prueba y responder las preguntas de los estudiantes. Los colaboradores en el establecimiento serán muy importantes en la planificación de las sesiones de administración de las pruebas, en diferentes turnos y/o diferentes días, con el fin de ajustarlas a los protocolos de cada establecimiento en particular. Usted recibirá la información de cada establecimiento asignado por parte del Coordinador del establecimiento para que la administración de la prueba sea consistente con los protocolos ya implementados en cada colegio. 1.4 Rol del Coordinador del Establecimiento El Coordinador del establecimiento es una persona asignada por MIDE UC para trabajar directamente con el personal de cada establecimiento. Respetando todos los protocolos sanitarios establecidos y acordados con los establecimientos en relación al covid-19, en una primera visita al establecimiento, ellos acuerdan la fecha y explican cómo se llevará a cabo la administración de la prueba. Revisan y actualizan la información de los estudiantes que pueden ser seleccionados. También ejecutarán un sistema para hacer un diagnóstico en todos los computadores disponibles en los establecimientos con el fin de identificar cuáles son adecuados para la prueba PISA y completar el Formulario de resultados del diagnóstico de computadores para cada equipo revisado. Una vez que se haga la selección de muestras de estudiantes, los Coordinadores de establecimientos informarán a los Colaboradores sobre la lista de estudiantes seleccionados. Ellos, junto con el/los Examinadores de prueba realizarán en los colegios una segunda visita 6 Manual del Examinador de Pruebas MS 2022 antes del día de la prueba para revisar la sala de clases asignada y planear la logística y todos los protocolos sanitarios establecidos y acordados con los establecimientos en relación al covid19 con los Colaboradores en el establecimiento. En el día de la prueba, los Coordinadores de establecimiento asistirán para apoyar y supervisar su trabajo como Examinador de prueba tanto en relación al cumplimiento de los protocolos de higiene y desinfección como al cumplimiento de las normas generales que se deben cumplir. Un asistente técnico asiste también al establecimiento en el día de prueba para instalar los dispositivos USB con las pruebas para los estudiantes y dar apoyo a los Examinadores de prueba en caso de problemas técnicos. Los coordinadores actúan como enlaces entre las escuelas, MIDE UC, y los Examinadores de prueba. Si bien el coordinador del establecimiento trabajará con usted para planificar la prueba y ayudarlo el día de la aplicación, solo usted puede administrar la prueba y responder a las preguntas de los estudiantes. 1.5. Rol del Examinador de prueba Esta sección resume las actividades que usted realizará junto con los formularios claves que usted va a necesitar. Nota por Múltiples Examinadores de prueba Si usted va a estar trabajando con otros Examinadores de prueba en la misma sesión, el Coordinador del establecimiento designará a uno de ustedes para ser el Examinador líder. Cuando en este manual se indica “usted” se está refiriendo al Examinador líder. Los deberes que implican a todos los Examinadores de prueba se indican mediante la referencia a múltiples Examinadores de prueba. Pero si se llevan a cabo varias sesiones en un establecimiento, con un Examinador de pruebas diferente, cada uno será el Examinador líder. 1.5.1. Formularios La Figura 1.1 contiene unos formularios importantes con los cuales el Examinador de prueba debe estar familiarizado/a. Es muy importante que rellene, revise y corrija estos formularios de manera precisa y completa para que el rendimiento de los estudiantes en la prueba, así como las respuestas al cuestionario puedan vincularse válida y confiablemente a los datos demográficos de los estudiantes. Los formatos de estos formularios se pueden encontrar en el Anexo A. Figura 1.1. Propósito de los Formularios Formulario Propósito Completado por… Formulario de recepción de materiales Registrar la recepción de los materiales de prueba en MIDE UC . Coordinador del Establecimiento y Examinador de prueba Formulario de seguimiento de estudiantes (UH si se realiza una sesión reducida de Una Hora Indicar a todos los estudiantes (y su información demográfica) seleccionados en el establecimiento para participar en PISA y registrar la asistencia de los estudiantes a la prueba 7 MIDE UC, Coordinador de establecimiento; actualizado por el Colaborador en el Manual del Examinador de Pruebas MS 2022 para estudiantes con NEE) y las sesiones del Cuestionario del Estudiante. establecimiento y el Examinador de prueba. Formulario de Login del Estudiante Conectar a los estudiantes en el programa de la prueba. MIDE UC y Examinador de prueba Formulario de registro de sesión Registrar el tiempo y las condiciones de cada una de las sesiones de Prueba y Cuestionario. Examinador de prueba Planilla para calcular tasas de evaluación (UH si en el establecimiento se realiza una sesión reducida de Una Hora para estudiantes con NEE) Calcular si es necesario realizar una sesión complementaria. Examinador de prueba Formulario de devolución de materiales Devolver los materiales de prueba a MIDE UC. Examinador de prueba Formulario para declarar pérdida de un material confidencial Registrar la pérdida de un material confidencial, como dispositivos USB, formularios con nombres, etc. Examinador de prueba Formularios de resultados del diagnóstico de computadores Determinar si los computadores del establecimiento pueden ejecutar el software de la prueba. Los resultados se discuten entre el Colaborador en el establecimiento, el coordinador del establecimiento y el Examinador de la prueba antes del día de la evaluación. Coordinador de establecimiento, Asistentes de informática de MIDE UC y persona responsable en el establecimiento de los sistemas informáticos. 1.5.2. Actividades principales del Examinador de prueba Como Examinador de prueba, su responsabilidad principal es administrar la prueba PISA, que consiste en dos secciones de 60 minutos de prueba y una sección corta de Cuestionario de estudiante. Debido a la emergencia sanitaria por causa del Covid19, es fundamental que la administración de la prueba PISA cumpla con los protocolos que garantizan la seguridad de los estudiantes en primer lugar y del personal que realiza la administración. Es fundamental que siga cuidadosamente los procedimientos descritos en este manual para asegurarse de que las sesiones PISA se administran de la misma manera en todos los países participantes. El no hacerlo podría invalidar los resultados del estudio. Un resumen de las actividades más importantes para usted se presenta en la Figura 1.2. 8 Manual del Examinador de Pruebas MS 2022 Figura 1.2. Actividades principales para el Examinador de prueba Etapa Antes de la prueba Día de la prueba Fecha Actividades Número de Página 5-6 semanas antes del día de la prueba Revisar materiales de entrenamiento y asistir a la sesión de capacitación PISA presencial/on line de Examinadores de prueba 11 Después de la capacitación Recibir información acerca de la fecha y hora de la prueba 11 3-4 semanas antes del día de la prueba Recibir y revisar los materiales para la aplicación de la prueba, desinfectados y empaquetarlos de manera segura con el Coordinador del establecimiento 11 Familiarizarse con el uso de códigos de identificación de las sesiones 15 2-3 semanas antes del día de la prueba. Segunda visita Segunda visita. Revisar la planificación de la prueba y los protocolos relativos al covid-19 con el Coordinador del establecimiento y el Colaborador en el establecimiento. 17 3-4 días antes de la prueba Revisar las fechas y horas de la prueba con el Coordinador del establecimiento 19 Preparar todos los materiales que se necesitan para las sesiones de prueba. No se olvide de llevar un aparato para controlar el tiempo. 19 Familiarizarse con el guion para aplicar la prueba y las Notas explicativas del cuestionario de estudiantes PISA 2022 para el Examinador de prueba. 20 Llegar al establecimiento conforme fue organizado en el plan logístico y respetando los protocolos relativos al covid-19 encontrarse con el Colaborador en el establecimiento y el Coordinador del establecimiento 21 1,5 hora antes de la prueba Recibir el Formulario de seguimiento de estudiantes de parte del Colaborador en el establecimiento actualizado 9 Manual del Examinador de Pruebas MS 2022 Después de la prueba Preparar la sala de clases y los materiales, respetando y aplicando todas las normas higiénicas relativas al covid-19 21 Revisar aspectos claves de la administración de la prueba 22 Sesión de prueba Respetando los protocolos relativos al covid-19, conducir las sesiones de prueba 25 Inmediatamente después de la prueba Determinar si se necesita realizar una sesión complementaria 26 Completar las actividades después de la prueba 29 Preparar la Carpeta de Establecimiento y el Sobre para el Establecimiento 29 Revisar y comentar la sesión de prueba con el Colaborador en el establecimiento y el Coordinador de establecimiento 30 Organizar una sesión o más sesiones complementarias si es necesario 30 Preparar y embalar los materiales de prueba para devolverlos 31 Devolver los materiales de prueba a MIDE UC 32 Si tiene alguna pregunta, por favor contáctese con su coordinador o bien al correo contacto_pisa@mideuc.cl para contactar al equipo central en MIDE UC 10 Manual del Examinador de Pruebas MS 2022 CAPÍTULO 02: ANTES DEL DÍA DE LA PRUEBA 2.1. Revise los materiales de entrenamiento y asista a la capacitación de Examinadores de prueba PISA Todos los Examinadores de prueba deben asistir a la sesión de capacitación de PISA. Esta sesión puede ser realizada on line, de manera presencial o tal vez en forma mixta. La modalidad para la capacitación le será informada oportunamente. Durante esta capacitación su rol se definirá más precisamente. Es importante que lea a fondo este Manual y el Manual del Sistema de la prueba en computador antes de esta capacitación y los lleve con usted a la sesión de entrenamiento junto con cualquier otro material que MIDE UC le pida que traiga. Los manuales se publicarán en una página segura a la que accederá con una contraseña, después de haber sido preseleccionado como Examinador de pruebas. 2.2. Recibir información acerca de las fechas y horas de las pruebas PISA será administrada entre el 22 de Agosto y el 30 de Septiembre de 2022 en Chile. Lo más común será que las sesiones de prueba sean en la mañana, y después de la primera visita ya se habrá planificado la forma de distribuir a los estudiantes seleccionados entre salas de clases y examinadores. Revise la Figura 3.1 para ver los detalles sobre el tiempo de las sesiones de prueba. El Coordinador del establecimiento de MIDE UC le comunicará la fecha, horario y el contacto de los establecimientos donde deberá administrar la Prueba PISA, tan pronto como esos acuerdos sean confirmados. 2.3. Recibir, revisar, y empaquetar de forma segura los materiales de prueba junto con el Coordinador del establecimiento Durante la capacitación a los Examinadores de prueba, alrededor de 3-4 semanas antes del día de la prueba, MIDE UC le pedirá a usted y al Coordinador del establecimiento revisar el material preparado para sus establecimientos, en el Centro de Operaciones de MIDE UC. Todos los materiales serán desinfectados con extrema precaución antes de ser empacados, utilizando guantes y mascarillas protectoras, con el fin de proteger al personal. Usted deberá usar guantes y mascarilla protectora al manipularlos. Cuando usted reciba la caja específica para cada establecimiento y las bolsas correspondientes a la sala de clases que le haya sido asignada (habrá una caja rotulada con el nombre del establecimiento, la que contiene dos bolsas rotuladas con “Día 1” y “Día 2” para cada sala de clases donde se aplicará la prueba, de acuerdo a las diferentes sesiones que serán administradas en cada colegio), usando guantes y mascarilla protectora, en un lugar limpio y seguro, por favor haga lo siguiente: Asegúrese de tener todos los materiales que necesitará para las sesiones de prueba. Vea la Figura 2.1. 11 Manual del Examinador de Pruebas MS 2022 Devuelva el Formulario de recepción de materiales (vea Anexo A) al equipo de logística de MIDE UC, especificando si hay algún elemento que falte o esté dañado, para que ellos lo reemplacen. Tenga en cuenta que MIDE UC enviará al Colaborador en el establecimiento una copia del Formulario de seguimiento de estudiantes para actualizarlo. En la segunda visita, usted y el Coordinador del establecimiento llevarán al colegio materiales informativos. Todos estos materiales habrán sido desinfectados antes de llevarlos al establecimiento. Figura 2.1. Recibido Lista de chequeo de materiales Material Cantidad BOLSA 1: DÍA DE LA PRUEBA Formulario de recepción de materiales (Anexo A) 1 para cada establecimiento/caja Dispositivos USB con la prueba PISA Uno para cada estudiante seleccionado en el establecimiento/sala de clases, de acuerdo al FSE, etiquetado con un número correlativo, más 3-4 dispositivos USB extra etiquetadas con el ID del establecimiento Formulario de Login para estudiante pre-impreso (Anexo A), cada uno dentro de una bolsa de plástico sellada etiquetada Uno para cada estudiante seleccionado en el colegio/sala de clases donde el Examinador de Prueba aplicará la Prueba, de acuerdo con el STF, dentro de una bolsa de plástico sellada Juego de lápiz de pasta, calculadora y hoja de papel en blanco dentro de una bolsa de plástico sellada etiquetada Uno para cada estudiante seleccionado en el colegio/sala de clases donde el Examinador de Prueba aplicará la Prueba, de acuerdo con el STF, dentro de una bolsa de plástico sellada Formulario de seguimiento de estudiantes (Anexo A) Formulario de seguimiento de estudiantes UH 12 Dos copias por establecimiento/sala de clases donde el Examinador aplica la prueba, más una copia adicional Dos copias por establecimiento/sala de clases en establecimientos donde se Manual del Examinador de Pruebas MS 2022 realizará una sesión reducida para estudiantes con NEE Formulario de registro de sesión (Anexo A) Dos copias para cada sesión, incluida la sesión reducida si se realiza, para cada establecimiento/sala de clases donde el Examinador aplique prueba, más una copia adicional Hoja de trabajo para el cálculo de la tasa de evaluación sesión UH (Anexo A) Una copia para cada establecimiento/sala de clases en establecimientos donde se realizará una sesión reducida para estudiantes con NEE, más una copia adicional Formulario de Devolución de Materiales (Anexo A) Una copia para cada sesión para cada establecimiento/sala de clases donde el Examinador aplique prueba. Otros materiales y material de oficina lápices de pasta, calculadoras, hojas en blanco Certificados de participación para estudiantes y/o Colaborador en el establecimiento (si es el caso) Material adicional desinfectado 3-4 extra de cada uno. Etiquetas removibles con los nombres y los ID de identificación, para ponerlas encima de los escritorios 1 para cada estudiante seleccionado en cada establecimiento/sala de clases Carpeta del Establecimiento 1 Sobre del Establecimiento para guardar formularios que usted le dará al Colaborador en el establecimiento después de la prueba; 1 Cartel “Prueba in Proceso – Por favor, no molestar” 1 Materiales de salud y seguridad: mascarillas adicionales, guantes adicionales, desinfectantes de manos, limpiadores para teclados y otras superficies, limpiador para zapatos. (Se usarán o no dependiendo de las disposiciones del Plan Paso a Paso. De acuerdo con el número de estudiantes en el Formulario de Seguimiento de Estudiantes Formulario para declarar pérdida de un material confidencial 13 Una copia para cada sesión para cada establecimiento/sala de Manual del Examinador de Pruebas MS 2022 clases donde el Examinador aplique prueba. BOLSA 2: SEGUNDA VISITA Formulario de Login para el Cuestionario de establecimiento con el “Documento para la preparación del cuestionario de establecimiento”. 1 2.3.1. Contar, revisar y preparar los dispositivos USB en su envoltorio según el STF Debe haber un dispositivo USB para cada estudiante seleccionado, con su etiqueta correspondiente. Estos dispositivos USB ya deben haber sido probados por el equipo de Logística, pero usted puede verificar al menos una muestra de ellas para asegurarse de que funcionan y puede ver al menos la pantalla de inicio de prueba de PISA. Dependiendo de las disposiciones sanitarias indicadas por el Plan Paso a Paso, usted deberá usar mascarilla u otros materiales de protección durante todo el proceso, y luego de revisar los dispositivos USB, debe desinfectarlos y guardarlos en una bolsa que luego será sellada. 2.3.2. Revisar los Formularios Login de estudiantes ya preparados Los Formularios de Login para el estudiante estarán cada uno dentro de una bolsa de plástico transparente, junto con otros elementos para un estudiante determinado. Verifique que los Formularios de Login de estudiantes sean los correctos que se usarán para este establecimiento y la sala de clases específica donde usted aplicará la prueba. Las identificaciones y contraseñas de los estudiantes de PISA impresas en el Formulario de Seguimiento del Estudiante (la parte del Formulario de Seguimiento de Estudiantes con los estudiantes que le fueron asignados a usted) deben corresponder exactamente a la información impresa en los Formularios de Login del estudiante. Los Formularios de Login de estudiantes deben estar numerados en orden secuencial como aparecen en el Formulario de Seguimiento del Estudiante (la parte del Formulario de Seguimiento de Estudiantes asignado a usted) empezando con “1” en el extremo superior derecho de la página. Esto le ayudará a contabilizar todos los Formularios de Login de los estudiantes. Usted debe tener todos los Formularios de Login de Estudiantes para el grupo de estudiantes/sala de clases a los que aplicará la prueba. Busque el primer estudiante que aparece en el Formulario de Seguimiento de Estudiantes (la parte del Formulario de Seguimiento de Estudiantes asignado a usted) y verifique que la primera bolsa con el Formulario de Login del estudiante coincida con la contraseña asignada a ese estudiante. Repita para todos los estudiantes que estarán en el colegio/sala de clases donde usted aplicará la prueba. A medida que revise los datos de cada estudiante, ponga las bolsas con el formulario y los elementos boca abajo. Estos deben estar en el orden en que aparecen en el Formulario de Seguimiento de Estudiantes. 14 Manual del Examinador de Pruebas MS 2022 Registre “NP” en el Formulario de Login para el estudiante para cada estudiante que no puede participar en la prueba porque tiene códigos 2, 3, 4, 5, 6 o 9 en la columna “Prueba”/”Estudiante PISA” o “Prueba”/“Estudiante UH” del Formulario de Seguimiento de Estudiantes. Probablemente habrá varias sesiones simultáneas, por esta razón es fundamental revisar que los formularios de Login sean separados de manera correcta. Usted debe mantener la seguridad de los materiales de prueba, incluidos los formularios de Login, en todo momento. Esto es fundamental para salvaguardar la integridad de las pruebas y garantizar que todos los resultados sean válidos. Consulte el Capítulo 03 para obtener información adicional. Nota sobre Mantención de la Seguridad y Confidencialidad de los Materiales de Prueba Dado que los materiales de PISA serán usados en el futuro, su seguridad es muy importante y se debe mantener en todo momento. El Colaborador en el establecimiento ni ningún otro miembro del establecimiento puede mirar la prueba ni el Cuestionario de estudiantes NO copie o fotocopie ningún material de prueba bajo ninguna circunstancia. No permita que otros lo hagan. No se permite grabar videos de las sesiones. Es imprescindible que usted evite que los estudiantes fotografíen los materiales con sus teléfonos celulares u otros dispositivos electrónicos. 2.4. Familiarizarse con los códigos de identificación de las sesiones El ID de la sesión es un código de dos dígitos otorgado a cada sesión separada administrada en un establecimiento participante. El código de sesión (ID sesión) debe ir entre 11 y 87. Usted registrará este código para identificar la sesión tanto en la porción del Formulario de Seguimiento de estudiantes como en el Formulario de Registro de Sesión relacionado para cada sesión de prueba y/o cuestionario. Por lo tanto, es importante tener una buena comprensión de codificación de las sesiones antes del día de la prueba. Una Nota sobre Sesiones Separadas Una sesión separada es una: Sesión de prueba para el conjunto completo de estudiantes seleccionados; Sesión de prueba para una parte de los estudiantes seleccionados; 15 Manual del Examinador de Pruebas MS 2022 Una sesión de cuestionario de estudiantes (si no es aplicada junto con las secciones de la prueba; se espera que haya pocas situaciones así en la aplicación); Sesión complementaria. Se requiere una sesión complementaria si el número de estudiantes que asiste a la sesión es muy bajo. Esto se discute con mayor detalle en CAPÍTULO 03. Se deben usar distintos Formularios de Seguimiento de estudiantes (UH si en el establecimiento se realiza una sesión reducida de Una Hora) y Formulario de registro de sesión para cada sesión separada que se realice, incluidas las sesiones complementarias. Podría suceder que un establecimiento no tenga espacio suficiente para evaluar a todos los estudiantes de un tipo determinado de sesión en una misma sala y debido a la emergencia sanitaria, es necesario respetar la distancia social. Usted tendrá que dividir la sesión en dos o varias salas, con otros Examinadores de prueba aplicando las sesiones de prueba en otros grupos a la misma hora. En este caso, usted o el otro Examinador de prueba usará una copia diferente del Formulario de asistencia a la sesión. Cada una de las sesiones tendrá su único ID de sesión asignado, incluso si los estudiantes estaban en un mismo Formulario de asistencia a la sesión original. Si se necesita dividir a los estudiantes en varios grupos siga el orden del Formulario de Seguimiento de estudiantes y asigne a los estudiantes a las sesiones correspondientes. Usted deberá indicar quién está en cada sesión, destacando el nombre de los estudiantes en las correspondientes copias del Formulario de Seguimiento de estudiantes. 2.4.1. Primer dígito de la identificación de sesión: Número del Examinador de Prueba El primer dígito del código ID de sesión es el número que identifica a un Examinador individual en cada establecimiento. En cada establecimiento habrá varios Examinadores. El Coordinador de Establecimiento asignará las sesiones y el código de identificación que cada uno utilizará. Si usted es el Examinador líder en el establecimiento, el primer dígito para todas las sesiones será el 1. Si usted es el Examinador 2 en el establecimiento, el primer dígito para todas las sesiones que usted aplique será el 2. Si hay otros Examinadores, el primer dígito para todas sus sesiones será 3 y sucesivamente los siguientes. 2.4.2. Segundo dígito de la identificación de sesión: Número de sesión El segundo dígito del código ID de sesión es el número de sesión que usted u otro Examinador está administrando en cada establecimiento. Siga estos pasos para asignar números de sesión: Haga una lista de todas las sesiones que van a realizarse. Determine quién va a aplicar cada una de las sesiones y comience esa sesión con el número de ese Examinador de prueba. Escriba el número de sesión secuencial para cada sesión después del número de Examinador de prueba (empezando por “1” para cada Examinador de prueba diferente). 16 Manual del Examinador de Pruebas MS 2022 Por ejemplo: el Examinador de prueba 1 conduce una sesión de prueba con un tercio de los estudiantes seleccionados y después hace una sesión complementaria. El Examinador de prueba 2 conduce otra sesión con el otro tercio de los estudiantes. El Examinador de prueba 3 conduce otra sesión con el otro tercio de los estudiantes y después una sesión complementaria. La Figura 2.2 muestra cómo se asignarían los IDs a estas sesiones. Figura 2.2. Asignar números de ID de sesión Sesión Examinador de prueba #1 Sesión ID Sesión Sesión de prueba (30% de los estudiantes) 11 Sesión complementaria 12 Examinador de prueba #2 Sesión ID Sesión Sesión de prueba (30% de los estudiantes) 21 Examinador de prueba #3 ID Sesión Sesión de prueba (30% de los estudiantes) 31 32 2.5. Segunda visita a los establecimientos. Revisar los planes para la prueba con el Coordinador del Establecimiento y el Colaborador en el Establecimiento Respetando todos los protocolos sanitarios establecidos y acordados con los establecimientos en relación al covid-19, aproximadamente 2-3 semanas antes del día de la prueba, usted y todos los otros Examinadores de prueba asignados a un establecimiento, junto con el Coordinador, harán una visita al establecimiento para llevar materiales y reunirse con el Colaborador en el establecimiento para confirmar los planes para la prueba. Es importante que el Coordinador del establecimiento confirme en esta oportunidad la cantidad de sesiones y la cantidad de Examinadores de prueba que serán necesarios para conseguir que todos los estudiantes respondan en condiciones seguras, teniendo el espacio suficiente, así como que haya desinfección de los lugares físicos y de los equipos usados en las distintas sesiones que se realizarán. Qué tan bien funcionen las sesiones de prueba en gran parte dependerá de cómo se prepare para ellas de antemano. Una de las consideraciones más importantes es asegurar que el Colaborador en el establecimiento entienda cuánto tiempo debe estar disponible la sala en que se va a dar la prueba y qué tipo y tamaño de espacio se requiere. Las salas para hacer la prueba deben reservarse entre 5 a 7 horas dependiendo de si hay tiempo para completar la sesión del Cuestionario del estudiante inmediatamente después de las secciones de la prueba, la cual esperamos sea la situación más usual. El espacio deberá ser suficientemente amplio para que se pueda sentar de forma cómoda el número de estudiantes esperado para esa sesión, respetando la distancia social. Recuerde al Colaborador en el establecimiento que será importante tener algunos computadores disponibles como repuestos, si eso es posible. Si el establecimiento no tiene suficientes 17 Manual del Examinador de Pruebas MS 2022 computadores, MIDE UC llevará a la sesión de prueba los necesarios, más algunos adicionales por seguridad. Durante la visita, usted debe determinar: Si ha surgido algún problema o dificultad en relación a la fecha fijada o las condiciones para la prueba; El protocolo la llegada al establecimiento (indicaciones acerca de cómo llegar, si hay estacionamiento), y presentación en él (por ejemplo, la identificación requerida, revisión en el local) en el establecimiento, y los protocolos sanitarios para ingresar en las salas y lugares donde la prueba será administrada; Actividades y elementos de cuidado necesarios para proteger al personal y a los estudiantes de posibles infecciones, distinguiendo cuáles serán responsabilidad del establecimiento (la desinfección de salas de clases y computadores, por ejemplo) y cuáles serán responsabilidad de MIDE UC; Cuando y donde reunirse con el Colaborador en el establecimiento el día de la prueba, antes y después de la aplicación de la prueba, porque usted necesitará apoyo para el inicio y un tiempo con el Examinador líder para completar una corta entrevista después de la prueba. Si el Formulario de seguimiento de estudiantes ha sido revisado y actualizado (por ejemplo, correcciones ortográficas en los nombres, fechas de nacimiento incorrectas, estudiantes que se retiraron o que son inelegibles por otras razones); La hora y ubicación/es de las sesiones para responder la prueba y el Cuestionario del Estudiante; si hay sesiones múltiples, revise el Formulario de seguimiento de Estudiantes y acuerde qué estudiantes serán asignados a cada una de las sesiones /Examinador de prueba; después de determinar si habrá sesiones múltiples, en el centro nacional o regional haga fotocopias del Formulario de seguimiento de Estudiantes basado en el número de sesiones, asigne a cada sesión un código de identificación ID, y destaque a los estudiantes que pertenecen a cada sesión /Examinador de prueba; Si en su establecimiento se realizará una sesión reducida de Una Hora para los estudiantes con necesidades educativas especiales, acuerde las adaptaciones necesarias para los estudiantes con necesidades educativas especiales (otra sala adecuada, computadores, materiales de lectura o actividades que no sean tareas para aquellos estudiantes que puedan terminar antes) y apoyo para su trabajo como el Examinador de prueba que realice esta sesión. Los resultados del diagnóstico de los computadores y la situación actual de los computadores en el establecimiento. Si se requiere permiso de “administrador” para habilitar la ejecución de pruebas desde los dispositivos USB en los computadores, pregunte quién estará disponible para hacer esto al menos una hora y media antes de que comience la prueba o el cuestionario. Acuerde con el Colaborador en el establecimiento para que indique a los estudiantes traer sus propios materiales de lectura que no sean tareas del colegio para usarlos en caso de que 18 Manual del Examinador de Pruebas MS 2022 puedan terminar antes, y les informe que el uso de teléfonos celulares no será autorizado incluso si terminan antes. Si el Colaborador en el establecimiento ha informado a los padres/apoderados de los estudiantes seleccionados, si es necesario. Ponerse de acuerdo para encontrarse con el Colaborador en el establecimiento después de la prueba. Otros temas logísticos necesarios para desarrollar una aplicación exitosa. Explique al Colaborador de la escuela la posibilidad de que un Supervisor de Calidad PISA pueda ir al establecimiento el día de la prueba, si su escuela es seleccionada para una visita. Esa persona vendrá de la Agencia de Educación de Calidad, tendrá una credencial y él/ella respetará todos los protocolos establecidos y acordados con los establecimientos en relación al covid-19. Se le debe permitir entrar a la sala de clases y tomar notas todo el tiempo que necesite. 2.6. Reconfirmar la fecha, y hora y lugares de la prueba con el Coordinador del establecimiento Es importante confirmar siempre la fecha, hora y lugares para realizar la prueba algunos días (34 días) antes de la fecha de la prueba con el Coordinador del establecimiento en el MIDE UC. No es raro que la fecha y hora de la prueba puedan cambiar de la original y, a veces en el último minuto. El Coordinador de Establecimiento habrá acordado con el Colaborador en el establecimiento cómo se le informará si el establecimiento está cerrado en el último minuto. Este es también el momento en el que debe determinar si hay otros cambios que podrían afectar la prueba, como un evento del establecimiento que no se señaló anteriormente. En el día de la prueba, se espera que llegue a la escuela por lo menos 1 hora y media antes del comienzo de la primera sesión para llevar a cabo una revisión final del Formulario de seguimiento de estudiantes, y otros arreglos con el Colaborador en el establecimiento. Por favor, asegúrese de que el Colaborador en el establecimiento es consciente de su necesidad de llegar temprano. Es importante que le den a usted y al asistente técnico tiempo suficiente para configurar los computadores en las salas de clases que ya hayan sido desinfectadas. 2.7. Prepare todos los materiales necesarios para las sesiones de prueba Usted recibirá la caja que usted ya revisó con todos los materiales para la prueba y el cuestionario, directamente en el establecimiento, antes de la aplicación de la prueba. Sin embargo, será su responsabilidad como Examinador de prueba traer los siguientes materiales a las sesiones de prueba: este Manual con el guion; Manual del Sistema de la prueba en computador; 19 Manual del Examinador de Pruebas MS 2022 un dispositivo para medir el tiempo; material de oficina (marcadores no permanentes, cinta de embalaje, etc) Pases para los estudiantes, si es que el colegio considera que son necesarios, etc. Elementos de desinfección: limpiadores para escritorios, computadores y superficies, guantes, mascarillas, productos para limpieza de manos, productos para limpiar los zapatos, etc. Formulario para declarar pérdida de un material confidencial 2.8. Familiarizarse con el guion para administrar la prueba y las Notas sobre el Cuestionario de estudiantes PISA 2022 para el Examinador de prueba Es importante que usted siga el guion de administración de la prueba palabra por palabra para asegurar que todas las sesiones son administradas de la misma manera por todos los Examinadores de prueba. Habrá un guion para la sesión estándar, que dura dos horas, y otro guion para la sesión reducida de una hora. Durante la sesión del Cuestionario del estudiante, es posible que tenga que responder las consultas de los estudiantes sobre algunas preguntas. Para ayudarle, se proporcionan notas para aclarar varios aspectos del Cuestionario del estudiante, junto con el guion (ver Anexo D). Acostúmbrese a usar estas notas antes del día de la prueba. Usted debe referirse a estas notas cuando responda las consultas de los estudiantes para asegurar que todos los estudiantes en todos los países reciban la misma información. 20 Manual del Examinador de Pruebas MS 2022 CAPÍTULO 03: DÍA DE LA PRUEBA Es importante que sepa cómo llevar a cabo todos los procedimientos descritos en el Manual del Examinador de prueba, en el Manual del Sistema de la prueba en computador y en otros documentos relativos a la prueba. Aclare cualquier pregunta que tenga con su Coordinador del establecimiento de MIDE UC lo antes posible. 3.1. Llegue al establecimiento y reúnase con el Colaborador en el Establecimiento y el Coordinador del Establecimiento Llegue a tiempo, siga los protocolos del establecimiento para registro a la entrada, respetando todos los protocolos sanitarios en relación al covid-19, como, por ejemplo, usar mascarillas protectoras y guardar la distancia social, o lo que indique el Plan Paso a Paso al momento de la aplicación. Inmediatamente reúnase con su Coordinador y el Colaborador en el establecimiento para revisar los planes para la prueba. 3.2. Reciba el Formulario de seguimiento de estudiantes actualizado de parte del Colaborador La primera cosa que debe hacer con el Colaborador es determinar si ha habido algún cambio en el Formulario de seguimiento de estudiantes (UH si en el establecimiento se realiza una sesión reducida de Una Hora) y actualizar su formulario en la forma que sea necesaria. Pida al Colaborador en el establecimiento que él/ella guarde su copia. Si hay múltiples sesiones en el establecimiento, confirme qué estudiantes estarán asistiendo a cada una de las sesiones. Las copias del Formulario de Seguimiento de estudiantes para cada sesión deben ser actualizadas también. Si hay más de un Examinador trabajando en el establecimiento, asegúrense de que cada Examinador tenga su propia copia actualizada del Formulario de Seguimiento de estudiantes. Si un estudiante llega a una sesión equivocada, cada Examinador de prueba podrá revisar el Formulario de asistencia a la sesión para determinar en qué sesión, si es que corresponde, debe estar el estudiante. 3.3. Ordene la sala y los materiales Refiérase a la lista de abajo para instrucciones acerca de cómo ordenar las salas para una sesión. Usar mascarillas protectoras y utilizar todos los elementos sanitarios que fueron acordados con el Colaborador en el establecimiento para confirmar la seguridad de los estudiantes y del personal. Asegurar que las superficies de todos los escritorios, así como los computadores en la sala de clases estén desinfectados. 21 Manual del Examinador de Pruebas MS 2022 Asegúrese de tener suficientes computadores para todos los estudiantes que se espera, y que hay espacio suficiente entre ellos para respetar la distancia social de un metro. Organice y disponga los suministros y materiales para la sesión. No abra las bolsas selladas. Arranque los computadores e inicie las sesiones en los equipos. El asistente de Informática de MIDE UC y un miembro del personal del establecimiento puede ayudarle en esta etapa. Desactive cualquier antivirus que esté activo en el computador y, si hay actualizaciones automáticas, también desactívelas. Inserte el dispositivo USB en cada uno de los computadores, corra el diagnóstico y luego inicie la aplicación de PISA. Inicie la prueba PISA e introduzca la contraseña maestra proporcionada por MIDE UC. Haga clic en “Sesión 1 – La Prueba PISA”, en cada computador. Oculte materiales de clase, tales como tablas matemáticas y tablas de ciencias, después de obtener el permiso del personal del establecimiento. Pegue el cartel “Prueba en proceso – No molestar” en la puerta. 3.4. Revise aspectos claves de la administración de la prueba 3.4.1. Tiempos Los tiempos para la prueba se muestran en la Figura 3.1a para la sesión estándar y Figura 3.1b para la sesión reducida de Una Hora para estudiantes con NEE. Figura 3.1a. Tiempos de las Sesiones de Prueba sesión estándar Actividad Tiempo Ordenar y preparar la sala 90 minutos (aproximadamente) Estudiantes inician la sesión, ingresan las contraseñas, introducción a la prueba 15 minutos (aproximadamente) Introducción general 15 minutos (aproximadamente) Primeros 60 minutos de la prueba 60 minutos (exactos) Recreo corto Generalmente no más de 5 minutos Introducción a la Segunda sección de la prueba 5 minutos (aproximadamente) Segundos 60 minutos de la prueba 60 minutos (exactos) Recreo 15 minutos (aproximadamente) Cuestionario del estudiante 35 minutos 22 Manual del Examinador de Pruebas MS 2022 Actividad Tiempo más 10 minutos para cuestionario de familiaridad con los computadores (aproximadamente) total 45 minutos (aproximadamente) Recoger el material y terminar la sesión 5 minutos (aproximadamente) Embalar materiales y dejar la sala ordenada 30-40 minutos (aproximadamente) Total Tiempo de los estudiantes: 3 horas, con 40 minutos a 4 horas (aproximadamente) Tiempo de la sala: 6 a 7 horas (aproximadamente) Figura 3.1b. Tiempos de las Sesiones de Prueba sesión reducida de Una Hora para los estudiantes con NEE Actividad Tiempo Ordenar y preparar la sala 90 minutos (aproximadamente) Estudiantes inician la sesión, ingresan las contraseñas, introducción a la prueba 15 minutos (aproximadamente) Introducción general 15 minutos (aproximadamente) Primeros 30 minutos de la prueba 30 minutos (que pueden extenderse a 50) Recreo corto Generalmente no más de 5 minutos Introducción a la Segunda sección de la prueba 5 minutos (aproximadamente) Segundos 30 minutos de la prueba 30 minutos (exactos que pueden extenderse a 50) Recreo 15 minutos (aproximadamente) Cuestionario del estudiante 20 minutos (que pueden extenderse a 30) Recoger el material y terminar la sesión 5 minutos (aproximadamente) Embalar materiales y dejar la sala ordenada 30-40 minutos (aproximadamente) Total Tiempo de los estudiantes: 2 horas, con 30 minutos a 3 horas (aproximadamente) Tiempo de la sala: 5 a 6 horas (aproximadamente) 23 Manual del Examinador de Pruebas MS 2022 3.4.2. Monitorear la sesión Usted y tal vez otro Examinador de prueba o asistente técnico que no son del personal del establecimiento son los responsables de monitorear la sesión de prueba y de mantener la disciplina. Al hacerlo, preste especial atención a los siguientes aspectos: Mantener la seguridad y confidencialidad de las preguntas de la prueba Debido al uso cada vez mayor de teléfonos celulares y otros dispositivos electrónicos con funciones de cámara, el personal PISA debe estar muy alerta en la prevención de esta violación de la seguridad de la prueba. En el guion de la sesión se ha añadido un texto que solicita que los estudiantes apaguen los teléfonos celulares y dispositivos electrónicos (que no sean calculadoras) y los guarden. Usted tiene la responsabilidad de dar cuenta de todos los materiales de prueba. Siga las siguientes pautas para garantizar la seguridad y confidencialidad de los materiales de prueba durante todo el tiempo. Nunca deje ningún dispositivo USB u otros materiales reservados y confidenciales desatendidos. Si sale del establecimiento entre las sesiones, debe llevar todos estos materiales con usted y dejarlos bajo llave en un lugar seguro. Si usted tiene que salir de la sala mientras la está preparando, lleve los materiales con usted o pida a otro Examinador de prueba que los vea. Nunca pida al personal del establecimiento que vigilen los materiales de prueba. Sólo a los estudiantes cuyos nombres aparecen en el Formulario de seguimiento de estudiantes (UH si en el establecimiento se aplica una sesión reducida de Una Hora), en el grupo asignado a la sesión que usted conducirá podrán participar en la prueba. No permita que estudiantes no seleccionados participen en la prueba o que vean las preguntas de la prueba. Si se pierde un dispositivo USB o un Formulario de Login del estudiante, pida al Colaborador en el establecimiento que le ayude a localizarlo. Si este no se encuentra, debe informar al Coordinador de establecimiento de MIDE UC tan pronto como sea posible y completar un Formulario para declarar pérdida de un material confidencial. En la capacitación de los Examinadores de pruebas, usted se comprometerá a mantener seguros los materiales de prueba utilizados y los no utilizados, a través de la firma de un compromiso de confidencialidad. Asistencia de los estudiantes Las instrucciones generales se presentan a través del software de la prueba. Si el estudiante llega alrededor de 5 minutos después que los otros estudiantes han empezado a dar la prueba, lea en voz baja el texto introductorio del guion para él o ella, y entonces pueden iniciar la sesión de prueba. Por otro lado, no admita a los estudiantes si llegan más de 10 minutos después de que los otros estudiantes han comenzado a dar la prueba porque entonces el estudiante que llega tarde puede no tener tiempo suficiente para completar la prueba. Sin embargo, si el Colaborador en el establecimiento requiere que usted evalúe al estudiante, debe codificarse como 1 “presente” en el Formulario de Seguimiento de 24 Manual del Examinador de Pruebas MS 2022 Estudiantes y debe pasar a la siguiente sección de la prueba o cuestionario con los otros estudiantes. Los estudiantes no deben salir de la sesión, a menos que sea absolutamente necesario. Una nota acerca de los códigos relativos a dificultades técnicas y falta de computadores El texto a continuación describe cómo asignar códigos a los estudiantes cuando se producen dificultades técnicas o cuando no hay suficientes computadores. La prueba no ha empezado Y a los estudiantes no se les ha asignado un computador. Si no hay suficientes computadores para el número de estudiantes presentes, asigne los computadores a los estudiantes en el orden del Formulario de Seguimiento de Estudiantes y los estudiantes que queden sin computador deben ser codificados como 0-noparticipante por otra razón. A ellos se les puede invitar a participar en la sesión complementaria si es necesaria. Registre esto en el Formulario de Registro de Sesión. La prueba no ha comenzado Y a los estudiantes se les ha asignado su computador, pero no han comenzado a responder las preguntas de la prueba. Veinte estudiantes sentados en 20 computadores. Antes de que la sesión comience, un computador deja de funcionar. El estudiante que estaba en ese computador debe ser retirado de la sala. Se le asignará un código 0-no-participante por otra razón y puede ser invitado a participar en la sesión complementaria si es necesaria. Registre esto en el Formulario de Registro de Sesión. La prueba ya empezó Y los estudiantes empezaron a responder preguntas. El computador de un estudiante falla. Si el problema no puede ser resuelto y no hay computadores adicionales, este estudiante debe ser retirado de la sala y se le asigna el código 1 – presente. Este estudiante que se retiró no puede ser invitado a participar en la sesión complementaria si se realiza porque ya trabajó en la prueba. Si el problema se resuelve en cualquier momento mientras el estudiante todavía está allí, él o ella debe continuar trabajando desde donde lo dejó y luego pasar a la siguiente sección junto con los otros estudiantes. Registre esto en el formulario de Registro de sesión. La prueba ya empezó Y los estudiantes empezaron a responder preguntas de la prueba. Un estudiante llega tarde y no hay computadores válidos disponibles. El estudiante atrasado debe ser retirado de la sala y debe asignársele un código 0-noparticipante por otra razón. Este estudiante retirado puede ser invitado a participar en la sesión complementaria, si se realiza. Registre esto en el Formulario de Registro de Sesión. Ayuda Usted NO puede ayudar a los estudiantes con ninguna pregunta en las secciones de la prueba. Si un estudiante le hace una consulta sobre una pregunta de la prueba, responda “Por favor, revisa las instrucciones en el botón Ayuda, y haz lo mejor que puedas.” Sin 25 Manual del Examinador de Pruebas MS 2022 embargo, usted podrá responder dudas sobre las preguntas del Cuestionario del Estudiante siguiendo las indicaciones de las Notas para el cuestionario de estudiantes PISA 2021 en el Anexo D. Consulte el Manual del sistema de la Prueba en computador para indicaciones para resolver preguntas y problemas técnicos. Registre las preguntas de los estudiantes y describa cualquier problema durante la situación de prueba, como por ejemplo problemas con el computador, en el Formulario de registro de sesión (Anexo A). A los estudiantes que terminen temprano se les puede permitir revisar material de lectura, no relacionados con sus tareas, como libros o revistas. Es posible que algunos o todos los estudiantes con Necesidades Educativas Especiales (NEE) si no necesitan adaptaciones especiales participen en la sesión reducida de Una Hora de PISA o se integren en la sesión estándar. Deles el mismo trato que a los demás estudiantes, pero si nota que tienen problemas para participar en la prueba en las mismas condiciones, permítales salir de la sala y registre esa situación en el Formulario de Seguimiento de Estudiantes, y en el Formulario de Registro de la Sesión. Observadores Los observadores deben limitarse a los supervisores necesarios, autorizados por MIDE UC, la Agencia de calidad de la Educación o los supervisores de calidad externos de PISA. Para evitar molestar a los estudiantes, los observadores no deben caminar por la sala de clases y nunca mirar las respuestas de los estudiantes. Para garantizar procedimientos de evaluación estandarizados y mantener la seguridad y confidencialidad de la prueba y de los ítems del Cuestionario del Estudiante, NO se permite la copia de estos materiales o la fotografía o grabación de video de las sesiones. 3.5. Conduzca la sesión de prueba El guion del Examinador de pruebas en el Anexo C entrega las instrucciones paso a paso para llevar a cabo la sesión de prueba. Los siguientes son algunos recordatorios generales: Usar mascarilla protectora y guantes y mantener la distancia social en relación a los estudiantes en la sala de clases. Asegurar que todos los estudiantes están usando y de forma correcta las mascarillas protectoras y que ellos mantienen la distancia social de al menos un metro entre ellos. Asegúrese de que cada estudiante está en la sesión correcta si es que hay múltiples sesiones. Siempre supervise a los estudiantes para asegurarse de que no están tomando fotografías o videos de los materiales de la prueba. Lea el guion palabra por palabra. Esto es muy importante con el fin de garantizar la coherencia entre los distintos países en PISA. 26 Manual del Examinador de Pruebas MS 2022 Si un estudiante hace una consulta durante la sesión del Cuestionario del estudiante, utilice las Notas para el Cuestionario del estudiante PISA 2022 para el Examinador de pruebas, que se presenta en el Anexo D. Retire y cuente todos los pendrives/unidades USB y otros materiales de prueba (se incluyen los Formularios de Login, las hojas en blanco y las calculadoras) antes de permitir que los estudiantes salgan de la sala. Si se pierde algún material confidencial, complete el Formulario para declarar pérdida de un material confidencial (Anexo A) y notifique inmediatamente a MIDE UC. 3.6. Determine si se necesita realizar una sesión complementaria PISA requiere un alto porcentaje de participación de estudiantes. Si una cantidad importante de estudiantes están ausentes, se debe organizar una sesión complementaria. Para determinar si se necesita una sesión complementaria, usted y todos los otros Examinadores de prueba deben calcular una tasa de evaluación de la prueba para la sesión a nivel del establecimiento usando la Hoja de trabajo para calcular tasa de estudiantes evaluados en la prueba. La Figura 3.2 muestra un ejemplo para determinar si se necesita una sesión complementaria en un establecimiento donde se realizó una sesión reducida de Una Hora para estudiantes con NEE, y un formato en blanco se incluye en el Anexo A. Si se debe realizar una sesión complementaria, pero el establecimiento se niega a realizar una, es importante que el Coordinador del establecimiento se esfuerce en conversar con el Colaborador en el establecimiento o las autoridades del colegio para obtener el acuerdo. Si esto no es posible, los Examinadores de prueba deben asegurarse de que la información llegue a MIDE UC, que luego se comunicará con el establecimiento. . 27 Manual del Examinador de Pruebas MS 2022 Figura 3.2. Hoja de trabajo para el cálculo de la Tasa de Evaluación de estudiantes (Ejemplo) HOJA DE TRABAJO PARA EL CÁLCULO DE LA TASA DE EVALUACIÓN DE ESTUDIANTES EN ESTABLECIMIENTOS CON SESIÓN DE UNA HORA N° establecimiento PISA: Nombre del establecimiento: PASO 1 823 Escuela Los Sauces En el Formulario de Seguimiento de Estudiantes, columna “PARTICIPACION – Prueba – Estudiante PISA”, cuente la cantidad de estudiantes con código “0.” RESULT. PASO 1 Cantidad de estudiantes con código “0” RESULT. PASO 2 Cantidad de estudiantes UH con código 0 Si tiene más de una copia del Formulario de Seguimiento de Estudiantes debido a sesiones múltiples, cuente los estudiantes codificados con “0” en el total de sesiones. Ingrese la cantidad en la tabla como el RESULT. PASO 1. PASO 2 En la columna “PARTICIPACIÓN – Prueba Estudiante UH.”, cuente la cantidad de estudiantes UH con código “0”. Si tiene más de una copia del Formulario de Seguimiento de Estudiantes debido a sesiones múltiples, cuente los estudiantes codificados con “0” en el total de sesiones. Ingrese la cantidad en la tabla como el RESULT. PASO 2. PASO 3 Calcule la cantidad de estudiantes ausentes que no son UH: (PASO 1 – PASO 2). PASO 4 ¿El valor en el PASO 3 es menor o igual a 1? RESULT. PASO 3 Cantidad de estudiantes ausentes que no son UH Sí Usted NO necesita organizar una sesión complementaria. El número de estudiantes ausentes es muy pequeño para organizar una sesión. No Vaya a PASO 5 28 Manual del Examinador de Pruebas MS 2022 PASO 5 En la columna PARTICIPACIÓN – prueba “Estudiante PISA”, cuente la cantidad de estudiantes con código “1” - Presente.” Si tiene más de una copia del Formulario de Seguimiento de Estudiantes debido a sesiones múltiples, cuente los estudiantes codificados con “1” en el total de sesiones. RESULT. PASO 5 Cantidad de estudiantes con código “1” RESULT. PASO 6 Cantidad de estudiantes UH con código 1 RESULT. PASO 7 Cantidad de estudiantes no UH presentes Ingrese la cantidad en la tabla como el RESULT. PASO 5.. PASO 6 En la columna “PARTICIPACIÓN – Prueba Estudiante UH”, cuente la cantidad de estudiantes UH con código “1”. Si tiene más de una copia del Formulario de Seguimiento de Estudiantes debido a sesiones múltiples, cuente los estudiantes codificados con “1” en el total de sesiones. Ingrese la cantidad en la tabla como el STEP 6 RESULT. PASO 7 Calcule la cantidad de estudiantes no UH que están presentes: (PASO 5 – PASO 6). PASO 8 Cuente la cantidad total de estudiantes listados en el formulario. Ingrese la cantidad en la tabla como el RESULT. PASO 8. RESULT. PASO 8 Cantidad de estudiantes listados en el Formulario de Seguimiento de Estudiantes PASO 9 Cuente la cantidad total de estudiantes UH (aquellos con 99 al final de su Número Estudiante PISA). RESULT. PASO 9 Cantidad de estudiantes UH PASO 10 Calcule la cantidad de estudiantes no UH: (PASO 8 – PASO 9). RESULT. PASO 10 Cantidad de estudiantes no UH PASO 11 Calcule: (RESULT. PASO 7 / RESULT PASO 10)*100 Calcule con 2 números decimales y aproxime al número entero más cercano. Por ejemplo, 84,50 se aproxima hacia arriba a 85 y 84,49 se aproxima hacia abajo a 84. RESULT. PASO 11 Porcentaje de estudiantes no UH evaluados Ingrese la cantidad en la tabla como el RESULT. PASO 11. PASO 12 ¿El valor en el PASO 11 es menor que 90%? No Usted NO necesita organizar una sesión complementaria. Sí Usted necesita organizar una sesión complementaria. 29 Manual del Examinador de Pruebas MS 2022 CAPÍTULO 04: DESPUÉS DE LA PRUEBA 4.1. Complete las actividades posteriores a la prueba Antes de reunirse con el Colaborador en el establecimiento y el Coordinador de establecimiento, hay varias tareas que usted debe completar. 4.1.1. Revise el Formulario de seguimiento de estudiantes Verifique que haya un Formulario de seguimiento de estudiantes (UH si en el establecimiento se realiza una sesión reducida de Una Hora) para cada sesión separada, si la aplicación se dividió en varias sesiones. Verifique que todas las columnas tienen la información necesaria y que en la columna de comentarios se registraron las notas correspondientes, si fueron necesarias. Verifique que el estado de la participación de cada estudiante fue registrado correctamente en la columna “Participación”, tanto para la “Prueba” como para el “Cuest” (Cuestionario del estudiante). Una vez que usted y los otros Examinadores de prueba revisen sus respectivos Formularios de Seguimiento de estudiantes, corchetee juntos los formularios, según el orden de la sesión, si es necesario. 4.1.2. Revise el/los Formularios de registro de sesión Junto con los otros Examinadores de prueba, verifique que haya un Formulario de Registro de Sesión para cada sesión separada, si los estudiantes fueron separados en varias sesiones. Corchetee juntos los formularios, según el orden de la sesión, si es necesario. Es importante que los datos que se envían para su análisis sean tan exactos y completos como sea posible. Si usted encuentra cualquier dato faltante o poco claro, converse con el Colaborador en el establecimiento y actualice los formularios antes de hacer copias. 4.2. Prepare la Carpeta del Establecimiento y el sobre para el Establecimiento Después de actualizar cualquier información faltante o poco clara, el Examinador líder debe hacer copias de los formularios y preparar la carpeta del establecimiento y el sobre para el establecimiento. Haga una copia legible de cada copia parcial del Formulario de seguimiento de estudiantes (UH si en establecimiento se realiza una sesión reducida de Una Hora) que incluya los nombres de los estudiantes. 30 Manual del Examinador de Pruebas MS 2022 Para las sesiones múltiples, corchetee los formularios originales juntos en el orden del ID de Sesión. Ponga estos formularios en la Carpeta del establecimiento. Ponga la/s copia/s del Formulario de seguimiento de estudiantes con nombres en el Sobre para el establecimiento. Si hay sesiones múltiples, corchetee los formularios juntos en el orden del ID de Sesión. Haga una copia legible del/de los Formulario/s de registro de sesión. Ponga el/los original(es) en la Carpeta del establecimiento y ponga las copias en el Sobre para el establecimiento. Si hay sesiones múltiples, corchetee los formularios juntos en el orden del ID de Sesión. Deje el Sobre para el establecimiento con el Colaborador en el establecimiento. Llévese la Carpeta del establecimiento. 4.3. Comente la sesión de prueba con el Coordinador del establecimiento y el Colaborador en el establecimiento Respetando todos los protocolos sanitarios establecidos y acordados con los establecimientos en relación al covid-19, después de la sesión de prueba, deberán reunirse los Examinadores de prueba con el Coordinador del establecimiento y el Colaborador en el establecimiento para comentar cómo se desarrolló la evaluación, clarificar cualquier información faltante o poco clara y también para manifestarle su agradecimiento por su apoyo. Asimismo, uno de los Examinadores de prueba aplicará una corta entrevista al Colaborador en el establecimiento para obtener retroalimentación de su parte en relación a PISA. El Formulario para la Entrevista al Colaborador en el establecimiento se encuentra en el Anexo B. 4.4. Organice una sesión complementaria Si se necesita una sesión complementaria, póngase de acuerdo con el Colaborador en el establecimiento y el Coordinador del establecimiento. Es posible que el establecimiento haya propuesto ya una fecha para ella, ustedes deberán entonces elegir una fecha que maximice el número de estudiantes que puedan asistir a la sesión complementaria y cuando usted y todos los Examinadores de prueba estén disponibles, preferentemente en la misma semana de la prueba o lo más pronto que se pueda en la semana siguiente. Si no pueden encontrar una fecha adecuada para cuando usted pueda, coméntelo con el Coordinador del establecimiento en MIDE UC, que podría hacer los arreglos para que otro/s Examinador/es conduzca la sesión complementaria. Usted necesitará nuevas copias del Formulario de Seguimiento del estudiante (UH si en establecimiento se realiza una sesión reducida de Una Hora) y Formulario de registro de sesión para cada sesión complementaria. Usted debe preparar estos formularios usando un ejemplar en blanco del Formulario de registro de sesión y haciendo copias del Formulario de Seguimiento de estudiantes original. Asigne el ID de sesión apropiado a cada uno de los formularios. 31 Manual del Examinador de Pruebas MS 2022 Si otro Examinador de prueba –y/o usted- realizará la sesión complementaria, usted deberá hacer arreglos para la entrega de los materiales de prueba. Siga en contacto y coordinados, porque el Coordinador de establecimiento decidirá quién devolverá los materiales a MIDE UC. Lo más probable es que, debido a la capacidad máxima permitida en un espacio cerrado por el riesgo de covid-19 y la baja asistencia, será necesario organizar muchas sesiones para que todos los estudiantes respondan de manera segura, permitiendo que haya el espacio necesario entre ellos y también se puedan obtener altos índices de respuesta. Será posible organizar una sola sesión complementaria para aumentar el nivel de participación de los estudiantes. Las sesiones complementarias siguen los mismos procedimientos usados para la sesión original. A no ser que lo solicite MIDE UC, no devuelva los materiales de prueba hasta después de la/s sesión/es complementarias. Si se realiza/n sesión/es complementaria/s, usted debe almacenar los materiales de la sesión original en un lugar seguro. Como se dijo más arriba, si se necesita organizar una sesión complementaria, pero el establecimiento se niega a realizarla, es importante que el Coordinador del establecimiento se esfuerce en conversar con el Colaborador en el establecimiento o las autoridades del establecimiento para obtener el acuerdo. Si esto no es posible, los Examinadores de prueba deben asegurarse de que la información llegue a MIDE UC, que luego se comunicará con el establecimiento. 4.5. Prepare los materiales de prueba para devolverlos a MIDE UC 4.5.1. Realice un control de calidad final a los materiales de prueba Antes de devolver los materiales de prueba a MIDE UC, usted debe realizar un control de calidad final, siguiendo los mismos procedimientos indicados en la sección 4.1. y en la Hoja de ayuda – Procesos de control de calidad después de la prueba en el Anexo B. 4.5.2. Organice los materiales para su devolución a MIDE UC Una vez que todas las sesiones para un determinado establecimiento hayan sido realizadas, complete el Formulario de devolución de materiales (ver Anexo A). Organice los materiales como se muestra en la Figura 4.1. Figura 4.1. Cómo organizar los materiales de prueba y los formularios en la caja y sellarla para devolverlos, una por cada establecimiento/sala de clases. • Formulario de devolución de documentos • Formulario de Seguimiento de estudiantes (UH si en establecimiento se realiza una sesión reducida de Una Hora), el que corresponde a la sala de clases en la caja o todas las copias del Formulario de Seguimiento de estudiantes que corresponden al colegio, en el orden del Número de identificación de la sesión, (si hay más salas de clases contenidas en la caja). • Formulario de Registro de sesión, el correspondiente a la sala de clases en la caja o corcheteados todos juntos si hay más de una sala de clase contenida en la caja. 32 Manual del Examinador de Pruebas MS 2022 • Breve entrevista para el Colaborador en el establecimiento • Unidades USB (uno para cada estudiante seleccionado del establecimiento/sala de clases donde el Examinador condujo la aplicación, ordenadas de acuerdo con el FSE, rotuladas con el número de identificación ID, más 3-4 unidades USB extra, rotulados con el número de identificación del establecimiento.) • Formulario para declarar pérdida de un material confidencial • Calculadoras • Formularios de Login para estudiantes, hojas en blanco para ser destruidas • Carpeta del establecimiento. 4.6. Devuelva los materiales de prueba a MIDE UC Es importante que los materiales de prueba sean devueltos tan pronto como sea posible, y normalmente dentro de las 24 horas siguientes después de haberse realizado la/s sesión/es de prueba o la/s sesión/es complementarias. Generalmente a usted lo recogerán en el establecimiento con todo el material y las cajas selladas para llevarlas a MIDE UC. Si esto no es posible, usted organizará con su Coordinador del establecimiento la manera en que usted devolverá los materiales de prueba dentro de las 24 horas siguientes a la realización de la prueba 4.7. Otras actividades después de la prueba Si su coordinador de establecimiento no estaba con usted al final de la sesión, situación que trataremos de evitar, usted tendrá que organizar una reunión donde él/ella pueda realizar el control de calidad en MIDE UC antes de que la caja pueda ser entregada a los pasos siguientes. El Coordinador del establecimiento debe firmar el Formulario de devolución de materiales para certificar que todos los materiales están completos y todas las actividades han sido desarrolladas. Su ayuda con PISA es muy importante para asegurar con éxito que los datos recogidos para Chile son de la más alta calidad. La Agencia de Calidad de la Educación, MIDE UC, y el Equipo Internacional del Proyecto agradecen su tiempo y su esfuerzo. ¡Gracias! 33 Manual del Examinador de Pruebas MS 2022 ANEXO A: FORMULARIOS Documentos a incluir: Formulario de Recepción de materiales Formulario de Seguimiento de Estudiantes UH Formulario de Login para estudiantes Formulario de Registro de Sesión Hola de trabajo para calcular las tasas de estudiantes evaluados UH Formulario para declarar pérdida de un material confidencial Formulario de devolución de materiales Materiales de recopilación de Formularios con resultados de pruebas de diagnóstico de sistemas 34 Manual del Examinador de Pruebas MS 2022 ANEXO B: HOJAS DE TRABAJO PARA AYUDA Documentos a incluir: Procedimientos de control de calidad posteriores a la prueba. Formulario para la entrevista al Colaborador en el establecimiento. 35 Manual del Examinador de Pruebas MS 2022 ANEXO C: GUIÓN DEL EXAMINADOR DE PRUEBA SESIÓN REGULAR SESIÓN UH 36 Manual del Examinador de Pruebas MS 2022 Anexo D: notas del examinador de prueba para el cuestionario del estudiante PISA 2022 37