Post on 16-Dec-2014
description
MAO. ARACELI NUÑEZ MAO. ARACELI NUÑEZ THIERRYTHIERRY
Elaboración de reactivos de opción múltiple para pruebas objetivas: CENEVAL, PISA, EXCALE, ENLACE
Elaboración de reactivos de opción múltiple para Elaboración de reactivos de opción múltiple para pruebas objetivas: pruebas objetivas:
CENEVAL, PISA, EXCALE, ENLACECENEVAL, PISA, EXCALE, ENLACE
Concepto de evaluación
Evaluación educativa
Evaluación del aprendizaje
Evaluación del desempeño
Tipología de la evaluación
Características de una buena evaluación
Medición
Características de los instrumentos de
mediciónAspectos teóricos básicos de la evaluación educativa
EvaluaciónEvaluación
Proceso de indagación dirigido a
recolectar información cuantitativa
y cualitativa con el propósito de
obtener conclusiones sobre el valor,
mérito, importancia o calidad de un
programa, producto, persona,
política, propuesta o plan.
EvaluaciónEvaluación La emisión de juicios de valor y
mérito a partir de un proceso de descripción, análisis e interpretación de información relevante.
Es la acción sistemática que recaba información objetiva y útil para la toma de decisiones racionales
EvaluaciónEvaluación
La meta principal de la evaluación
consiste en obtener información
relacionada con el atributo o
dominio a evaluar para contrastarla
contra criterios y estándares
previamente fijados para
determinar su valor
Evaluación EducativaEvaluación Educativa
Es una actividad continua e
integrada que tiene por objetivo
proporcionar la mayor cantidad de
información para valorarla y tomar
decisiones pertinentes respecto al
objeto o sujeto de evaluación.
Evaluación EducativaEvaluación EducativaDebe ser funcional, sistemática, continua, integral,
orientadora y cooperativa. Funcional, en tanto que se realiza para alcanzar o
cumplir con ciertos propósitos, se evalúa para tener información relevante, enjuiciarla y tomar decisiones.
Sistemática, requiere de cierta organización, control,
regulación y evidencias de los pasos metodológicos necesarios para realizarla.
Continua, No solamente se realiza al final de un ciclo
escolar o unidad temática, sino como una actividad en diferentes momentos y con diferentes propósitos.
Evaluación EducativaEvaluación EducativaIntegral, considera aspectos
cognoscitivos, psicomotores y afectivos Orientadora, que sirva para mejorar,
reorientar, remediar la practica educativa; solo se puede mejorar aquello que se evalúa.
Cooperativa, es un proceso socializado
desde su concepción, sus fases y procedimientos.
La evaluación educativa La evaluación educativa brinda información que brinda información que permite:permite: conocer la calidad del proceso educativo,
fundamentar la toma de decisiones
educativas,
mejorar la planeación del proceso
educativo,
decidir sobre la certificación de sujetos,
determinar la acreditación de programas.
Evaluación del Evaluación del aprendizajeaprendizaje Es el conjunto de operaciones que
tiene por objeto determinar o valorar
los logros alcanzados por los
alumnos en el proceso enseñanza-
aprendizaje con respecto a los
objetivos planteados en los
programas de estudio.
Evaluación del Evaluación del aprendizajeaprendizaje Es un proceso sistemático
mediante el cual se recoge información acerca del aprendizaje del alumno y que permite evaluar ese aprendizaje y detectar elementos para formular un juicio acerca del nivel alcanzado, de la calidad del aprendizaje logrado y de lo que el alumno es capaz de hacer con ese aprendizaje
La evaluación del La evaluación del aprendizaje muestraaprendizaje muestraLa eficacia y las limitaciones del
sistema educativo
El grado en que los alumnos
logran productos de aprendizaje
La eficacia de la acción docente
Evaluación del desempeñoEvaluación del desempeño Proceso sistemático de obtención de datos válidos y
confiables que permite emitir un juicio de valor acerca del nivel de logro alcanzado por un individuo en un examen, en relación a los conocimientos, habilidades y competencias previamente establecidos.
Algunos ejemplos de evaluación del desempeño que se realizan en México son:
EXANI EGEL Enlace PISA Excale
Tipología de la evaluaciónTipología de la evaluaciónPor su funcionalidadSumativaFormativa
Por su temporalidadInicialProcesualFinal
Tipología de la evaluaciónTipología de la evaluaciónPor su normotipoNomotética
◦Normativa◦Criterial
Por sus agentesAutoevaluaciónCoevaluaciónHeteroevaluación
Esta clasificación depende de Esta clasificación depende de varios factores y deben responder varios factores y deben responder a las siguientes preguntas:a las siguientes preguntas:¿Qué se evalúa? – Contenidos
curriculares
¿Para qué evalúa? – Propósitos
¿Cómo se evalúa? – Técnicas e instrumentos de proyección e interpretación
¿Cuándo se evalúa? – Período de aplicación
La evaluación por su función se La evaluación por su función se puede clasificar en:puede clasificar en: Diagnóstica. Aporta información acerca del
aprendizaje que poseen los sustentantes al inicio de un curso, programa o proceso de capacitación. Permite analizar los conocimientos previos del alumno para enfrentar una nueva situación de aprendizaje
Formativa. Verifica la manera en que se lleva a cabo
el proceso y se realiza periódicamente con el objeto de
retroalimentarlo y reconducirlo.
Sumativa. Obtiene información acerca de la
integración del aprendizaje al término del proceso al
que el sustentante se vio expuesto y permite emitir
juicios de acreditación.
La evaluación formativa puede La evaluación formativa puede ayudar aayudar a1. Motivar al estudiante.2. Diagnosticar y remediar las
dificultades en el proceso de aprendizaje.
3. Promover la autoevaluación.4. Clasificar los objetivos de
aprendizaje.
Un criterio. Los resultados se interpreta en función de un parámetro previamente establecido.
En términos de la interpretación de sus resultados, la evaluación se realiza con base en:
100
Punto de corte Juicio de expertos
INSUFICIENTE SUFICIENTE0
La norma. Los resultados se interpretan con base en la comparación del rendimiento individual con el grupo evaluado.
En términos de la interpretación de sus resultados, la evaluación se realiza con base en:
Características de una buena Características de una buena evaluaciónevaluaciónEl currículum prescrito (planes y
programas)El currículum implementado
(programas efectivamente desarrollados en el aula)
El currículum logrado (rendimiento del alumno)
MediciónMedición
Es asignar números a las características o
atributos de objetos, personas o procesos
medidos, de acuerdo con reglas, parámetros
o criterios establecidos.
En el ámbito educativo, el proceso de
medición es fundamentalmente descriptivo
puesto que indica, mediante una
representación numérica, en qué medida un
sujeto posee conocimientos y habilidades.
Características de los Características de los instrumentos de medicióninstrumentos de medición Validez. Es la congruencia que existe
entre lo que se planeó medir y lo que se mide.
Confiabilidad. Sus resultados son estables y consistentes, para emitir un juicio.
Objetividad. Los resultados del instrumento son independientes de quien aplica y califica.
Validez de contenidoValidez de contenido
Es el grado en que la muestra
de reactivos es representativa
de los rasgos que pretende
medir.
Esta relacionada con la
planeación del instrumento.
Validez predictivaValidez predictiva
Indica la efectividad de la prueba
para predecir algún resultado futuro.
Validez concurrenteValidez concurrente
Se obtiene al correlacionarse estadísticamente con otra prueba que mida el mismo rasgo.
La prueba pierde validez La prueba pierde validez cuando:cuando:1. Cuando están fuera de la comprensión del grupo,
porque:
a) Contienen asuntos elevados.b) Incluyen dibujos y esquemas complicados.c) Se emplea un lenguaje con términos difíciles.d) Su contenido plantea la resolución de problemas largos
y de difícil lectura.
2. Cuando piden muchos datos de carácter memorístico (ejemplo: reproducción exacta de datos y un exceso de fórmulas)
3. Cuando se altera el estado emocional de los alumnos, como sucede al aplicar una prueba en presencia de personas extrañas (exámenes públicos)
Estándares de calidadEstándares de calidadEstándar de utilidad, implica que el
instrumento es de provecho y beneficia al proceso de enseñanza aprendizaje. Que al estudiante le sirve para conocer su rendimiento, sus debilidades y fortaleza.
Estándar de exactitud, implica que el instrumento requiere seguir una metodología, procedimientos y tareas.
Estándares de equidad, ofrecen al estudiante condiciones de equidad al ser evaluados.
Estándares de factibilidad, implica que el instrumento es viable y ejecutable dadas las particulares de tiempo, espacio, recursos
Pruebas estandarizadas y no
estandarizadas
Rasgos o aspectos clave de las
pruebas objetivas
Pruebas objetivas: CENEVAL, PISA,
EXCALE, ENLACE
Proceso de construcción de una
prueba objetiva.Las pruebas como instrumentos de evaluación
Pruebas no estandarizadasPruebas no estandarizadas
Se elaboran para utilizarlas en un salón con un solo grupo de alumnos
Reflejan el área de preferencia del profesor
El docente no tiene la intención de comparar el avance educativo del grupo con otro
Pruebas estandarizadas Pruebas estandarizadas
Son las que administran, califican e interpretan del mismo modo en todos los casos, sin que importe dónde ni cuándo se apliquen
Pruebas estandarizadasPruebas estandarizadasEstán destinadas a varios grupos
en condiciones idénticas de aplicación, calificación e interpretación.
Se elabora para hacer comparaciones objetivas entre alumnos de diversos grupos, escuelas, estados, países.
Pocas evaluaciones hechas por el docente son estandarizadas
Rasgos de las pruebas objetivasRasgos de las pruebas objetivasPropósito generalPropósito especificoDominio exploradoCobertura del dominioReferencia para reportar los resultadosTipos de poblaciónCobertura de la poblaciónTipos de reactivosControl de la aplicación Impacto sobre los sustentantesPeriodicidad
Propósito generalPropósito general
Evaluar personas
Evaluar programas educativos
Evaluar centro escolares
Evaluar sistemas educativos
Propósito específicoPropósito específico
Responden a lo que se quiere hacer con la evaluación
¿Se busca un diagnóstico? ¿Se pretende clasificar?
Admisión a un centro escolar¿Certificar un centro escolar?Clasificación de centrosRendición de cuentas
Dominio exploradoDominio explorado
Alineadas al currículo
Conocimientos o habilidades genéricas
Habilidades específicas de un puesto o profesión
Cobertura del dominioCobertura del dominio
Homogéneo todos los sustentantes deben responder a las mismas preguntas
Modular
Referencia para reportar los Referencia para reportar los resultadosresultadosPor norma ordena a los
sustentantes según el desempeño de la prueba. La referencia fundamental es el grupo que ha presentado la prueba.
Por criterio se determina una o varias calificaciones de corte y establece de esta manera ciertos niveles de dominio o desempeño
Tipos de poblaciónTipos de población
Los instrumentos de evaluación pueden estar planeados para conocer el comportamiento de ciertos grados.
Ciertos grados ENLACE, EXCALECierta edad PISATodos los aspirantes EXANIOtro criterio
Cobertura de la poblaciónCobertura de la población
Censo ENLACE
Muestra PISA
De acuerdo a la demanda EXANI
Tipos de reactivosTipos de reactivos
Opción múltiple
Respuesta construida
Portafolio de evidencias
Examen oral
Control de la poblaciónControl de la población
Alto
Bajo
Impacto sobre los Impacto sobre los sustentantessustentantesAlto
Bajo
PeriodicidadPeriodicidad
Anual
Cada dos, tres o cuatro años
Cuando se requieren datos
Sin periodicidad definida
PPruebas objetivas: CENEVAL, PISA, EXCALE, ruebas objetivas: CENEVAL, PISA, EXCALE, ENLACEENLACE
AÑOINSTRUMENTO O
PROGRAMA DESCRIPCIÓN
1984 SINPrograma para evaluar a docentes/investigadores y otorgarles apoyoseconómicos
1989 Conaeva Comisión para evaluar a las IES. En los hechos ya no opera
1989 IDANIS Instrumento de evaluación al término de la educación primaria
1991 CIEES Comités de pares académicos que evalúan programas de licenciatura
1994 EXANIInstrumento para ayudar a tomar las decisiones de admisión a la educación media y superior
1994 EGELInstrumento que proporciona información sobre los egresados de 34 carreras
Pruebas objetivas: CENEVAL, PISA, EXCALE, Pruebas objetivas: CENEVAL, PISA, EXCALE, ENLACEENLACE
AÑOINSTRUMENTO O
PROGRAMA DESCRIPCIÓN
1995 TIMSSTercer estudio internacional de matemáticas y ciencias (IEA). México participó pero retiró los resultados del reporte final
1997 LLECEPrueba ligada al currículo para tercero y sexto grados de educación básica. Desarrollada por UNESCO para los países latinoamericanos.México ha participado desde el principio
1998 Estándares nacionalesPrimer esfuerzo por evaluar la educación básica nacional. En su lugar opera ahora la prueba Excale
1998 PISAPrueba internacional para evaluar las competencias básicas para la vida y el trabajo de los jóvenes de 15 años
2000 CopaesComisión para acreditar a los órganos certificadores de programas académicos
2003 ExcaleInstrumento desarrollado por el INEE y destinado a evaluar al sistema educativo nacional
2006 EnlaceInstrumento que proporciona información a estudiantes, docentes y padres de familia acerca del nivel de cada alumno de educación básica
Centro Nacional de Evaluación Centro Nacional de Evaluación de la Educación Superior.de la Educación Superior.
CENEVALCENEVALServicios de evaluación a disposición de las
instituciones de educación superior.www.ceneval.edu.mx
CENEVAL CENEVAL
Objetivos
Elaboración y aplicación de instrumentos de
medición de conocimientos y habilidades.
Difusión de los resultados que arrojan las
pruebas.
Promoción de la cultura de la evaluación.
Diseño de estrategias de evaluación.
Ingreso Superior
Media superior
Posgrado
EXANI-I
EXANI-II
EXANI-III
EgresoLicenciatura
T. S. universitario
EGEL
EGETSU
Acreditación
Superior
Básica
Media superior
Exasec
Exaba (Acuerdo 286)
Exali
Diagnóstico Superior
Media superior
Conalep
Exil
Certificación
Laboral Función pública
Profesional ECEP
Exámenes Ceneval
Instrumentos de EvaluaciónInstrumentos de EvaluaciónEXANI I, II y IIIEXANI I, II y IIIFunciones:a)La de selección son herramientas que
miden la aptitud académica. Son útiles para proveer información relativa a la medida en que los sustentantes han desarrollado las habilidades intelectuales básicas indispensables para cursar los estudios posteriores.
b) La de diagnóstico indica el nivel de adquisición de un conjunto de conocimientos disciplinarios durante la educación del nivel que evalúa, los cuales son requisito previo para la integración de los nuevos contenidos en los estudios posteriores.
Exámenes Generales para el Exámenes Generales para el Egreso de las Licenciaturas Egreso de las Licenciaturas (EGEL)(EGEL)
Contribuir a la mejora de la educación superior. Los resultados pueden orientar a las IES para introducir mejoras a los programas y servicios.
Aportar elementos de juicio para la titulación.
Exámenes Generales para el Exámenes Generales para el Egreso de las Licenciaturas Egreso de las Licenciaturas (EGEL)(EGEL)Exámenes de acreditación• Identifican si los sustentantes adquirieron los
conocimientos y las habilidades que son equivalentes a los estudios que se proporcionan en un nivel escolar (por ejemplo, los exámenes de acreditación de la secundaria, el bachillerato o licenciatura.
• Estos exámenes se aplican en momentos no ligados a procesos de instrucción.
• Generalmente, los sustentantes son los que deciden tomar una prueba para mostrar que son aptos, por lo que no se aplican en determinados momentos del proceso educativo.
• El Ceneval participa con la SEP en los procesos de acreditación de la secundaria, el bachillerato y de algunas licenciaturas (exámenes de los acuerdos 286 y 357).
OCDE PISAOCDE PISAProgramme for Programme for
International Student International Student Assessment Assessment
Programa Internacional de Programa Internacional de Evaluación de Estudiantes, Evaluación de Estudiantes,
http://www.oecd.orghttp://www.pisa.oecd.org
Programme for International Programme for International
Student Assessment Student Assessment PISAPISAPrograma Internacional de Evaluación de Estudiantes,
OBJETIVO(S): Medir que tan bien estén preparados los jóvenes actualmente para enfrentar los retos del mundo moderno.
INSTACIA(S) QUE LO PROMUEVEN:Organización para la Cooperación y Desarrollo Económicos (OCDE) Instituto Nacional para la Evaluación de la Educación (INEE)
POBLACIÓN: Jóvenes que están acabando el período de escolarización obligatoria (15 años) o se encuentran en el momento de ingresar a la educación post-secundaria o incorporarse a la vida laboral.
APLICACIÓN: Se lleva a cabo cada tres años con énfasis en diferentes dominios o áreas de evaluación.
¿Qué evalúa PISA?¿Qué evalúa PISA?La evaluación cubre las áreas de
lectura, matemáticas y ciencias. Esta prueba mide competencias y habilidades para analizar y resolver problemas, manejar información y enfrentar situaciones relacionadas con cada una de estas áreas.
¿Qué evalúa PISA?¿Qué evalúa PISA?Es importante mencionar que, en PISA no
se evalúa el aprendizaje de los conocimientos establecidos en los programas de las escuelas, ni tampoco está diseñada para evaluar el desempeño de los docentes, ni de los programas vigentes.
PISA no es un reporte del sistema educativo mexicano sino más bien un reporte de la manera de cómo el país, en su conjunto (sistema educativo, idiosincrasia, tradiciones, medios de comunicación, familia), educa a sus jóvenes
CompetenciasCompetencias
La evaluación de PISA se centra en tres áreas que tradicionalmente se han considerado claves para el aprendizaje en todos los sistemas educativos: Ciencias, Lectura y Matemáticas.
Competencia lectoraCompetencia lectoraEs la capacidad para comprender, emplear información y reflexionar a partir de textos escritos, con el fin de lograr las metas individuales, desarrollar el conocimiento y el potencial personal, y participar eficazmente en la sociedad. La lectura, desde la perspectiva de PISA, es vista como un proceso “activo” que implica no sólo la capacidad para comprender un texto sino la de reflexionar sobre el mismo a partir de las ideas y experiencias propias (INEE, 2005)
Competencia en cienciasCompetencia en ciencias
Se entiende como la capacidad de emplear el conocimiento científico para identificar preguntas y extraer conclusiones basadas en hechos o evidencias con el fin de comprender y poder tomar decisiones sobre el mundo natural y los cambios realizados en él mediante la actividad humana (INEE; 2005)
Competencia matemáticaCompetencia matemáticaSe refiere a la capacidad para analizar, razonar y comunicar eficazmente cuando se enuncian, formulan y resuelven problemas matemáticos. La competencia matemática no se limita al conocimiento de la terminología, datos y procedimientos matemáticos, aunque lógicamente se incluyen, tampoco a las destrezas para realizar ciertas operaciones y cumplir con ciertos métodos. La competencia matemática implica la combinación de estos elementos para satisfacer las necesidades de la vida del individuo como ciudadano constructivo, comprometido y reflexivo (INEE; 2005)
Dimensiones de competencia Dimensiones de competencia lectoralectoraDIMENSIONES ASPECTOS
ProcesosSon las tareas o actividades que se deben demostrar en función de los tipos de tarea que los estudiantes encontrarán en la vida real.Nota: En lectura, con base en los procesos se organizan subescalas.
Se espera que los estudiantes demuestren su capacidadpara la:• Recuperación de información específica,• Interpretación de textos, y• Reflexión y evaluación de éstos.
ContenidoEs el tipo de texto que se incluye en la medición de lectura. Hay distintas formasen que el material escrito aparece y en cómo debe ser entendido (muchas y variadas, tales como prosa narrativa o presentación gráfica).
PISA introduce textos continuos y discontinuos.Los textos continuos normalmente están organizados en oraciones y párrafos. También se distingue entre diferentes formas de prosa, como descripción, narración, exposición, argumentación y prescripción.Los textos discontinuos presentan la información de forma diferente en función de su estructura, por ejemplo: impresos, avisos y anuncios, convocatorias, listas, gráficos, formularios, diagramas o tablas.
Contexto o situaciónEs una clasificación general de los textos basada en el motivo o propósito de su empleo o uso en la medición de la lectura.
Se identifican cuatro situaciones:La situación está definida por el uso al que está destinado el texto. Por ejemplo, una novela, una carta, o una biografía se escriben para uso privado; los anuncios o documentos oficiales, para uso público; un manual o informe, para uso laboral; y un libro de texto o una hoja de ejercicios para uso educativo.
Dimensiones de competencia Dimensiones de competencia matemáticamatemática
ProcesosContenidoContexto
Dimensiones de competencia Dimensiones de competencia matemáticamatemáticaDIMENSIONES ASPECTOS
Procesos
Son las capacidades de los estudiantes que deben activarse para analizar, razonar y comunicar ideas de manera efectiva mediante el planteamiento, la formulación y la resolución de problemas matemáticos.
Reproducción de cálculos simples o definiciones del tipo más familiar.
Conexión. Requiere la reunión de ideas y procedimientos matemáticos para resolver problemas
Reflexión. En este proceso se espera que el estudiante sepa lo que es una demostración matemática y sus diferencias con otros tipos de razonamiento
Dimensiones de competencia Dimensiones de competencia matemáticamatemática
DIMENSIONES ASPECTOS
Contenido
Cantidad Este tema se centra en la importancia de la cuantificación para entender y organizar el mundo.
Espacio y forma Se relaciona con los fenómenos espaciales y geométricos.
Cambio y relaciones Involucra las manifestaciones matemáticas del cambio. Este contenido se relaciona con el Álgebra
Probabilidad
Dimensiones de competencia Dimensiones de competencia matemáticamatemáticaDIMENSIONES ASPECTOS
Contexto o situación
Son los ámbitos en que se sitúan los problemas de matemáticas.
Las situaciones incluyen la vida personal, la vida escolar, en el trabajo y los deportes, en la comunidad local y en la sociedad.
• Situación personal. Está relacionada con las actividades diarias de los estudiantes.
• Situación educativa o laboral. Referida a la escuela o al entorno de trabajo.
• Situación pública.Se refiere a la comunidad local
• Situación científica.Es más abstracta y puede implicar la comprensión de un proceso tecnológico, una interpretación teórica o un problema específicamente matemático.
Dimensiones de competencia en Dimensiones de competencia en cienciascienciasNivel Tarea
Máximo
Los estudiantes son capaces de crear o utilizar modelos conceptuales sencillos para realizar predicciones o proporcionar explicaciones; analizar investigaciones científicas relacionadas con, por ejemplo, el diseño experimental o la identificación de una idea puesta a prueba; relacionar los datos como evidencia para evaluar puntos de vista alternativos o perspectivas diferentes; comunicar argumentos o descripciones científicas en detalle y con precisión.
Medio Los estudiantes son capaces de utilizar conceptos científi cos para realizar predicciones o proporcionar explicaciones, reconocer preguntas que pueden ser contestadas mediante la investigación científica o identificar detalles de lo que ocurre en una investigación científi ca y seleccionar información relevante de datos o cadenas de razonamientos al elaborar o evaluar conclusiones.
Mínimo Los estudiantes son capaces de recordar conocimiento factual científico de tipo sencillo (es decir, nombres, hechos, terminología, reglas simples) y de utilizar el conocimiento científico común al elaborar o evaluar conclusiones.
EXCALEEXCALEExámenes de la Calidad y el Logro Educativohttp://enlace.sep.gob.mx
¿Qué son los EXCALE?¿Qué son los EXCALE?
Son pruebas externas, de gran escala y de bajo impacto.
•Externas, porque las diseña, desarrolla y aplica una institución (INEE) cuya misión no es impartir la enseñanza, sino velar por su calidad a través de la evaluación del Sistema Educativo Nacional, acerca de los alumnos, maestros o escuelas
¿Qué son los EXCALE?¿Qué son los EXCALE?De gran escala, porque deben ser
igualmente confiables y válidas para representar los niveles de logro educativo de los estudiantes de toda la nación, de todas sus entidades federativas y de las diversas condiciones educativas, culturales y económicas de los estudiantes
•De bajo impacto, porque los resultados no se utilizan para tomar decisiones
¿Para qué sirven los ¿Para qué sirven los EXCALE?EXCALE?•Conocer los niveles de logro
educativo que alcanzan los estudiantes tanto a nivel nacional como por estrato o modalidad y entidad federativa.
•Establecer las brechas y las diferencias en el aprendizaje que alcanzan lo estudiantes según el estrato o modalidad de escuelas a las que asisten, la entidad federativa en la que estudian, su sexo y edad.
¿Para qué sirven los ¿Para qué sirven los EXCALE?EXCALE?
Conocer los contenidos curriculares a nivel nacional y por entidad federativa que dominan los estudiantes de los grados y asignaturas evaluadas, así como identificar los conocimientos y habilidades que no adquieren. Es por ello que se dice que los EXCALE son pruebas criteriales porque se diseñan para conocer con precisión el grado de dominio que el estudiante tiene sobre un conjunto de contenidos específicos.
ObjetivosObjetivosConocer los niveles de logro
educativo que alcanzan los estudiantes del Sistema Educativo Nacional (SEN).
Establecer las brechas y las diferencias entre distintos grupos de estudiantes según el estrato o modalidad de escuelas a las que asisten, la entidad federativa en la que estudian, su sexo y edad.
ObjetivosObjetivosConocer la distancia entre los
aprendizajes de los estudiantes, en las asignaturas evaluadas.
Proporcionar un conocimiento del rendimiento escolar que logran los estudiantes de cada grado evaluado en las asignaturas básicas del currículum nacional.
ObjetivosObjetivos Identificar los factores de
contexto correspondientes al estudiante y a la escuela que se asocian al aprendizaje y que pueden contribuir a explicar las diferencias en el logro educativo de los distintos centros escolares.
CaracterísticasCaracterísticasProporciona información valida y
confiable del desempeño del sistema educativo nacional en su conjunto
Mide el desempeño de los sistemas y subsistemas educativos
CaracterísticasCaracterísticasInstacia que lo promueven:
Instituto Nacional para la Evaluación de la Educación (INEE).
Aplicación: Considera un esquema de evaluación cíclico de cada cuatro años, sin embargo se ha aplicado anualmente a partir de 2006, en grados terminales: 3º de Preescolar, 3º de Primaria, 6º de Primaria y 3º de Secundaria.
CaracterísticasCaracterísticasPoblación: Estudiantes de los grados
terminales de cada ciclo escolar y que representen momentos de inflexión en el desarrollo del aprendizaje del sistema educativo mexicano: tercer grado de preescolar, tercer grado de primaria, sexto grado de primaria, tercer grado de secundaria y tercer grado de bachillerato.
ENLACEENLACEEvaluación Nacional del Logro Académico en Centros Escolareshttp://enlace.sep.gob.mx
¿Qué es ENLACE?¿Qué es ENLACE?Es una prueba que tiene como
principal objetivo proporcionar información respecto del nivel de dominio de los estudiantes sobre los contenidos de las asignaturas de Español, Matemáticas y Ciencias. Se aplica cada año a todos los alumnos de 3º a 6º grados de primaria, de 3º de secundaria y de 3er año de educación media superior
ENLACEENLACEPermite retroalimentar a padres
de familia, estudiantes, docentes, directivos y autoridades educativas con información para mejorar la calidad de la educación, promoviendo la transparencia y rendición de cuentas
ENLACEENLACEEs un examen que compara a
cada estudiante con la totalidad de los demás estudiantes de su grado sin pretender “aprobar” o “reprobar” a nadie. Por ello, la prueba se diseña para que el promedio de todos los sustentantes de cada grado y asignatura sea de 500 puntos
CaracterísticasCaracterísticas• Es una prueba objetiva y estandarizada, de
aplicación masiva y controlada.• Emplea una metodología de calificación
precisa, que proporciona referencias de comparación nacional.
• Ofrece un diagnóstico de los estudiantes a nivel individual.
• Es una prueba centrada en el conocimiento; evalúa el resultado del trabajo escolar contenido en los planes y programas oficiales.
• Tiene bajo control sobre su administración y eso la hace vulnerable
Propósitos de ENLACE Propósitos de ENLACE Generar una sola escala de carácter nacional que proporcione
información comparable del logro académico de los estudiantes que permita:
• Estimular la participación de los padres de familia en la tarea educativa.
• Proporcionar elementos para facilitar la planeación de la enseñanza en el aula.
• Atender requerimientos específicos de capacitación a docentes y directivos.
• Sustentar procesos efectivos y pertinentes de planeación educativa y política públicas.
• Atender criterios de transparencia y rendición de cuentas.
¿Qué evalúa?¿Qué evalúa?Conocimientos y habilidades
definidos en los planes y programas oficiales de estudio de educación básica, en las asignaturas de Matemáticas y Español .
INSTACIA(S) QUE LO PROMUEVEN:INSTACIA(S) QUE LO PROMUEVEN: Secretaría Secretaría de Educación Pública (SEP), a través de la de Educación Pública (SEP), a través de la Dirección General de Evaluación de Políticas Dirección General de Evaluación de Políticas (DGEP).(DGEP).POBLACIÓN: Alumnos de 3° a 6° grado
de educación primaria y 3° de secundaria en todas las escuelas públicas y privadas, urbanas y rurales del país; incluyendo las que atienden a la población en desventaja: educación comunitaria y cursos comunitarios, en las asignaturas de español y Matemáticas. En 2008 se aplicará también a estudiantes de 3º de bachillerato.
Rasgo ENLACE EXANI
Propósito general Evaluar sujetos Evaluar sujetos
Propósito especifico Diagnóstico Admisión
Dominio explorado Competencias disciplinares Habilidades genéricas
Cobertura del dominio Restringido Restringido
Referencia para reportar los resultados
Criterial Normativa
Tipos de población Cada uno de los grados de primaria y secundaria y a quienes cursan el último grado de EMS
Aspirantes
Cobertura de la población Censo De acuerdo a la demanda
Tipos de reactivos Opción múltiple Opción múltiple
Control de la aplicación Bajo Alto
Impacto sobre los sustentantes Bajo Alto
Periodicidad Anual Cada admisión a una IEM
Observaciones • Único instrumento nacional que ofreceun diagnóstico de todos los estudiantes• Tiene cobertura del dominio restringido.No se debe utilizar para evaluar al sistema educativo• Su aplicación masiva y su bajo control lo hacen vulnerable• No es una herramienta para certificarsujetos ni planteles
• Instrumento predictivo de uso libre• Tiene un alto control de sus aplicaciones• Posee un dominio homogéneo lo cualgarantiza equidad• Es de tipo normativo, no tiene calificación de corte• No es una muestra propiamente dicha
Rasgo EXCALE PISA
Propósito general Evaluar al sistema educativo Evaluar al sistema educativo
Propósito especifico Diagnóstico Diagnóstico
Dominio explorado Alineada al currículo Habilidades para la vida
Cobertura del dominio Amplio Amplio
Referencia para reportar los resultados
Criterial Criterial
Tipos de población Ciertos grados escolares Sujetos de 15 años
Cobertura de la población Muestra Muestra
Tipos de reactivos Respuesta construida Respuesta construida
Control de la aplicación Alto Alto
Impacto sobre los sustentantes Bajo Bajo
Periodicidad Cada cuatro años Cada tres años
Observaciones • Es el instrumento por excelencia para evaluar al sistema educativo
• Tiene gran cobertura del dominio
• Evalúa niveles cognitivos más elevados• No da información de los sujetos
• Es un buen resumen de cómo el país educa a sus ciudadanos
• Permite comparaciones nacionales e internacionales
• No es currículo
Proceso de construcción de Proceso de construcción de una prueba objetivauna prueba objetiva
Metodología CENEVAL
¿Por qué CENEVAL?¿Por qué CENEVAL?Proceso de construcción de la prueba ENLACE 2010 1) diseño 2) construcción3) verificación4) ensamble 5) aplicación6) calificación7) reportes. Las cuatro primeras siguieron la metodología del
Ceneval y cumplen con estándares de calidad internacionales;
las tres últimas estuvieron a cargo de la DGEP-SEP.
¿Por qué CENEVAL?¿Por qué CENEVAL?Proceso de diseño, construcción, aplicación
y validación de los EXCALEI. Planeación generalII. Estructuración de los ExcaleIII. Construcción de reactivos de los ExcaleIV. Conformación de los Excale V. Aplicación de los Excale VI. Análisis e interpretación de resultados de
los ExcaleVII. Validación de los Excale
¿Por qué CENEVAL?¿Por qué CENEVAL?El proyecto PISA esta basado en: International Association for the
Evaluation of Educational Achievement (IEA, Asociación Internacional para la Evaluación del Rendimiento Académico)
Education Testing Service’s International Assessment of Educational Progress (IAEP, Asociación Internacional para la Evaluación del Progreso Educativo del ETS, Servicio de Evaluación Educativa)
Metodología a CENEVALMetodología a CENEVAL
Apegado a estándares de calidad internacional
International Association for the Evaluation of Educational Achievement.
American Psychological Association Educational Testing Service The Joint Comitte on Standars for
Educational Evaluation
Metodología a CENEVALMetodología a CENEVAL
1. Diseño2. Construcción3. Verificación4. Ensamble5. Aplicación6. Calificaciones7. Reportes8. Mantenimiento
DiseñoDiseño
Se definen los elementos que constituyen el marco de referencia en los que se fundamentará todo el proceso, como el perfil referencial y la estructura del instrumento de evaluación1. Proyecto de evaluación2. Diseño de la evaluación3. Delimitación del contenido
ConstrucciónConstrucción
En esta fase se lleva a cabo la materialización del objeto de medición –definido en el perfil referencial y en la estructura del examen– en los reactivos que conformarán el instrumento de evaluación.4. Especificaciones de reactivos5. Elaboración de reactivos
VerificaciónVerificaciónEl objetivo de esta fase es verificar la calidad de los reactivos que se elaboran para los exámenes.
Revisión cualitativa6. Revisión técnica de los reactivos7. Validación externa de reactivos8. Revisión de estilo
Revisión cuantitativa9. Piloteo de reactivos10. Calibración de reactivos
EnsambleEnsamble
En esta fase se integran las versiones operativas del examen y se supervisa la calidad de los cuadernillos de examen.
11. Integración de versiones operativas12. Revisión editorial13. Impresión del instrumento
AplicaciónAplicaciónEsta fase tiene como objetivo disponer de los procedimientos adecuados para que los sustentantes respondan el instrumento de evaluación bajo condiciones controladas, estandarizadas, óptimas y equitativas.14. Plan de aplicación15. Registro de sustentantes16. Capacitación17. Almacenamiento y distribución18. Aplicación del instrumento impreso (opcional)19. Aplicación en línea (opcional)20. Recepción y clasificación
CalificaciónCalificación
Se procesa la información
21. Lectura y corrección22. Calificación de sustentantes23. Definición de niveles de desempeño y puntos de corte (exámenes criteriales)
ReportesReportes
Se comunica los resultados de la evaluación
24. Reportes a sustentantes
25. Reportes institucionales
MantenimientoMantenimiento
El objetivo de esta fase es mantener actualizado el contenido del instrumento y de todos losinsumos relacionados, como el perfil referencial, la estructura del examen, los reactivos y susparámetros estadísticos.26. Consolidación de la información27. Actualización de contenidos28. Actualización de parámetros