Administración de Pruebas

14,736 views

Published on

Conferencia del Grupo Educandos

Published in: Education
0 Comments
0 Likes
Statistics
Notes
  • Be the first to comment

  • Be the first to like this

No Downloads
Views
Total views
14,736
On SlideShare
0
From Embeds
0
Number of Embeds
7,066
Actions
Shares
0
Downloads
35
Comments
0
Likes
0
Embeds 0
No embeds

No notes for slide

Administración de Pruebas

  1. 1. Proyecto de Mejoramiento de la Evaluación en las Academias ADUNI – CESAR VALLEJO TALLER DE CAPACITACION Set - Oct – Nov Módulo IV Tema: Administración de Pruebas Responsable : Mario Ríos Quispe
  2. 2. LA EVALUACION NACIO EL 7MO DIA, “ES BUENO” EL DIABLO DIJO: ¿COMO LO MIDIO? QUE INSTRUMENTO APLICO? ¿CON QUE LO COMPARO?
  3. 3. Pruebas Nacionales* Anotamos que e n 119 países del mundo se administran pruebas par el International Baccalaureate que es un ciclo previo a los estudios en las Universidades de los países signatarios de IBO.
  4. 4. Instituto Colombiano para el Fomento de la Educación Superior – ICFES PROPÓSITOS DEL EXAMEN DE ESTADO <ul><ul><li>Servir como un criterio para el Ingreso a la Educación Superior.  </li></ul></ul><ul><ul><li>Informar a los estudiantes acerca de sus competencias en cada una de las áreas evaluadas, con el ánimo de aportar elementos para la orientación de su opción profesional.  </li></ul></ul><ul><ul><li>Apoyar los procesos de autoevaluación y mejoramiento permanente de las instituciones escolares.  </li></ul></ul><ul><ul><li>Constituirse en base e instrumento para el desarrollo de investigaciones y estudios de carácter cultural, social y educativo.  </li></ul></ul><ul><ul><li>Servir de criterio para otorgar beneficios educativos. </li></ul></ul>
  5. 5.   Componentes del Examen ICFES
  6. 6. Pruebas LLECE 1998 – 2000 UNESCO
  7. 7. Pruebas LLECE 1998 – 2000 UNESCO
  8. 10. Ranking Universitario 2007
  9. 11. Mediciones realizadas en el Perú <ul><li>Instituto Pedagógico Nacional de Varones 1941 (Cipriano Angles) </li></ul><ul><li>Década del 70, pruebas metrizadas </li></ul><ul><li>Década del 90, pruebas pilotos estandarizadas </li></ul><ul><li>2002, Pruebas Magisterio Nacional, (Piscoya Hermoza) </li></ul><ul><li>Ranking Universitario (Ranking of world) </li></ul>
  10. 12. A manera de Diagnóstico <ul><li>Nula Experiencia en Administración de pruebas </li></ul><ul><li>Se puede medir indiciariamente bajo pruebas de opción múltiple. </li></ul><ul><li>El que siga siendo lo principal (POM) en la medida que el estudiante debe disponer para seguir con éxito su vida universitaria. </li></ul><ul><li>Características formales de la prueba como motivo de información, siempre hay detalles </li></ul>
  11. 13. Crítica entendible a las pruebas de selección múltiple <ul><li>“… .. De lo que se trata en este caso no es decidir en general cual es el mejor procedimiento de evaluación posible sino de decidir cual es el procedimiento mas adecuado y de ejecución realizable que posibilite que se evalúe con la mayor eficiencia y equidad posible a un universo de aproximadamente …… personas en las mismas condiciones, con iguales criterios y en la misma unidad de tiempo” </li></ul><ul><li>Luis Adolfo Piscoya Hermoza </li></ul>
  12. 14. Capacidades o Competencias Mentales <ul><li>Identificar información pertinente </li></ul><ul><li>Analizarla lógicamente </li></ul><ul><li>Construir inferencias </li></ul><ul><li>Ejemplificar </li></ul><ul><li>Contraejemplificar </li></ul><ul><li>Establecer generalizaciones </li></ul><ul><li>Conexiones significativas </li></ul>
  13. 15. Acerca del Marco Conceptual a trabajar en las pruebas tipo admisión y en general en pruebas estandarizadas <ul><li>Contraposición de capacidades con competencias </li></ul><ul><li>Directiva: desarrollar y flexibilizar las capacidades con independencia de si se es consciente o no. </li></ul><ul><li>Lo logrado en el campo de las neurociencias es débil </li></ul><ul><li>El trabajo en el aula con las capacidades como se presentan puede ser muy recargado </li></ul>
  14. 16. <ul><li>No hay registro en la historia de la ciencia de planificar que habilidades desarrollar. </li></ul><ul><li>Lo que es factible es que a través de los procesos de E-A se pueda identificar y distinguir que capacidades ha adquirido. </li></ul><ul><li>Cuando se asume un desdoblamiento de capacidades, habilidades y destrezas bien “precisas” estamos en un problema de acomodo de terminología y administración de procesos </li></ul>
  15. 17. EJEMPLOS: PENSAMIENTO CAPACIDAD PARA SOLUCIONAR PROBLEMAS CRITICO CREATIVO PENSAMIENTO CIENTIFICO
  16. 18. CAPACIDAD ANALIZAR INFERIR INTERPRETAR CAPACIDAD GENERAL (HIPOTETICO DEDUCTIVA)
  17. 19. RAZON VACANTE (V) POSTULANTE (P) V/P REGIÓN PLAZAS INSCRITOS I/P LORETO 4385 7377 1.68 UCAYALI 1463 3807 2.60 MADRE DE DIOS 295 956 3.24 SAN MARTÍN 1036 5055 4.88 APURÍMAC 943 5173 5.49 AYACUCHO 1396 7677 5.50 PASCO 412 2374 5.76 CALLAO 791 4617 5.84 AMAZONAS 433 2630 6.07 HUANCAVELICA 913 5658 6.20 LIMA PROVINCIAS 1076 7109 6.61 HUÁNUCO 807 5919 7.33 JUNÍN 1017 9483 9.32 PI0..A 900 8746 9.72 LIMA METROPOLITANA 2787 28139 10.10 ANCHASH 1049 10629 10.13 CUSCO 1069 12718 11.90 MOQUEGUA 98 1192 12.16 TUMBES 105 1348 12.84 CAJAMARCA 822 13130 15.97 AREQUIPA 481 9477 19.70 PUNO 725 14287 19.71 LA LIBERTAD 537 11140 20.74 TACNA 78 1662 21.31 LAMBAYEQUE 179 4483 25.04 ICA 173 4807 27.79   TOTALES 23970 189593 7.91
  18. 20. Reseña Histórica de la PUCP en relación a pruebas de admisión <ul><li>Mitad del siglo pasado, solo conocimientos ó acumulación de conocimientos “de universa” </li></ul><ul><li>Estudios orales de varios días (jurados mixtos) (UE) </li></ul><ul><li>Estudios de psicólogos y pedagogos (1950) </li></ul><ul><li>“ para acceder a los estudios superiores era necesario que los estudiantes tuvieran aptitudes y capacidades intelectuales” </li></ul>
  19. 21. Factores a considerar <ul><li>Masificación y acceso a la universidad </li></ul><ul><li>Condición de competitividad: 60% de la población en estudios superiores </li></ul><ul><li>Experiencia de las test vocacionales aptitudinales en los reclutas (II guerra mundial) elevó el sistema de evaluación </li></ul><ul><li>Pruebas objetivas (década del 70) </li></ul>
  20. 22. Carecían de validez y confiabilidad <ul><li>Validez </li></ul><ul><li>Confiabilidad </li></ul><ul><li>Problemas que se traducía en problemas de costos en el sentido que se tenía que tomar un tercer evaluador para atenuar el error </li></ul>
  21. 23. Conocimiento Aptitud Entendemos que las aptitudes de alguna manera se van desarrollando en la secundaria, pues ella es algo que se va construyendo Por ejemplo: Tener aptitud para aprender implica se un buen universitario Situación que debemos considerar ¿Qué es conocimiento? ¿Qué es aptitud?
  22. 24. Desventajas de pruebas objetivas <ul><li>Se suele dar importancia al instrumento </li></ul><ul><li>Tiende a mecanizarse </li></ul><ul><li>Se vuelven técnicos en den descartar opciones falsas </li></ul>Aspectos que no evalúan las pruebas <ul><li>Fluidez verbal </li></ul><ul><li>Capacidad práctica para aplicar conocimientos </li></ul><ul><li>Equilibrio emocional </li></ul><ul><li>Sensibilidad social, honradez, creatividad, sinergia, iniciativa, fuerza de voluntad, constancia </li></ul>
  23. 25. Aspectos que tendrían que trabajar los que administran pruebas <ul><li>Preguntas con nexos verbales que midan la fluidez verbal </li></ul><ul><li>Plan de redacción que midan la capacidad de ordenar ideas </li></ul><ul><li>Juegos lógicos, que midan la capacidad de conjugar condiciones dadas para llegar a resultados correctos </li></ul><ul><li>Implicación exclusión que mida la capacidad de distinguir lo general de lo específico </li></ul>
  24. 26. “ La calidad de los estudiantes que ingresan a la universidad depende de tener un adecuado sistema de selección, pero también de la calidad y cantidad de individuos que postulan. Cuando solo ingresa uno de cada diez postulantes, se puede esperar que los ingresados sean mejores que si ingresan uno de cada dos”.
  25. 27. Diversificación de las modalidades de ingreso <ul><li>Prueba objetiva a los egresados de secundaria (aptitud) </li></ul><ul><li>Pruebas mixtas (ejm. UNMSM) </li></ul><ul><li>Notas de secundaria </li></ul><ul><li>La ACADEMIA puede irse perfilando así, como una interfase formativa para asegurar el éxito en su vida universitaria. </li></ul><ul><li>Se presenta ante la gran brecha que hay entre la secundaria y la universidad y es una opción a considerar. </li></ul>
  26. 28. Número de preguntas por materia en examen de admisión
  27. 29. Pruebas Futuras <ul><li>Pruebas dirigidas a toda la región que tengan rasgos comunes de la educación secundaria. </li></ul><ul><ul><li>Lenguaje social </li></ul></ul><ul><ul><li>Lenguaje de ciencias básicas </li></ul></ul><ul><ul><li>Lenguaje Matemático </li></ul></ul><ul><li>Se construyen tres tipos de prueba que se desenvuelven de forma aleatoria </li></ul><ul><li>La construcción de preguntas no asume la hipótesis tradicional que afirma que existe una frontera clara entre habilidades, capacidades y conocimientos </li></ul>
  28. 30. Establecimiento de grados de dificultad
  29. 31. Validez del constructo <ul><li>Aporte Educational testing services (preguntas de opción múltiple de calificación automática. </li></ul><ul><li>No se puede medir una habilidad cognoscitiva sin recurrir a un conjunto de conocimientos. </li></ul><ul><li>Aporte PISA, nueva definición de alfabetización </li></ul><ul><ul><li>Lenguaje social </li></ul></ul><ul><ul><li>Lenguaje matemático </li></ul></ul><ul><ul><li>Lenguaje de las ciencias básicas </li></ul></ul>
  30. 32. <ul><li>PISA, no es posible medir a través de una prueba escrita alguna habilidad o aptitud con independencia de algún tipo de conocimiento manifestado en un sistema de concepto. </li></ul><ul><li>Aporte epistemológico, diferencia entre lenguajes social, lenguaje matemático y conceptos científicos </li></ul><ul><li>Establece la limitación de las preguntas de opción múltiple y de ensayo ambas constituyen interpretaciones relativas o parciales de la habilidad capacidad, aptitud o competencia que se pretende medir. </li></ul><ul><li>Característica de las pruebas </li></ul><ul><ul><li>Preguntas de lenguaje social </li></ul></ul><ul><ul><li>Preguntas de lenguaje científico (prioridad) </li></ul></ul><ul><ul><li>Otros: lenguaje icónico, gráfico, visual </li></ul></ul><ul><li>Prueba de matemática, que salga de lo algorítmico en estricto hacia un nivel de pensamiento complejo que se expresa en razonamiento intuitivo operacional que en apariencia no tiene orden lógico. </li></ul><ul><li>Prueba de ciencias básicas, </li></ul><ul><ul><li>Manejo de símbolos generalmente matematizados </li></ul></ul><ul><ul><li>Capacidad para observar modelar diseños experimentales </li></ul></ul><ul><ul><li>Comprender mecanismos y relaciones de causalidad </li></ul></ul><ul><ul><li>Conceptualizar procesos naturales </li></ul></ul>
  31. 33. Prueba Nacional de Medicina (ENAM) <ul><li>La evaluación de un principio replantea la forma y los contenidos de un currículo </li></ul><ul><li>Destaca la función pedagógica de la evaluación del aprendizaje, </li></ul><ul><li>Características: </li></ul><ul><ul><li>No es una evaluación por competencias sino cognitiva </li></ul></ul><ul><ul><li>En dos años de trabajo no se ha plasmado la taxonomía de Bloom, empero las que diseñan las pruebas y los items quienes han definido apriori sus grados de dificultad. </li></ul></ul>
  32. 35. Control de Calidad de la Prueba <ul><li>Grado de dificultad </li></ul><ul><li>Indice de discriminación </li></ul>
  33. 36. UNALM <ul><li>Principio de selección </li></ul><ul><ul><li>Derecho al acceso a todos los niveles de educación pero con una alta selección que esté en función a sus capacidades y no a su posición social </li></ul></ul><ul><ul><li>Abugattas: “el carácter democrático de la educación superior deberá estar garantizado por las modalidades de selección que no debe permitir forma alguna de discriminación por razón de clase, origen étnico, condición económica” </li></ul></ul>
  34. 37. Estructura del examen <ul><li>Razonamiento verbal matemático </li></ul><ul><ul><li>40% de la prueba (140 --- 100 pgtas) </li></ul></ul><ul><li>Dos conceptos a trabajar </li></ul><ul><ul><li>Aptitud académica </li></ul></ul><ul><ul><ul><li>Lógico matemática </li></ul></ul></ul><ul><ul><ul><li>Lógico lingüística </li></ul></ul></ul><ul><ul><li>Nivel de conocimiento </li></ul></ul><ul><ul><ul><li>Está asociado a la educación básica </li></ul></ul></ul>
  35. 38. Banco de preguntas <ul><li>Se incrementa cada 06 meses </li></ul><ul><li>Profesores formuladores (3 docentes por materia) y otro de profesores revisores </li></ul><ul><li>El comité asesor de admisión entrega a los profesores seleccionados las pautas requiriendóseles determinadas cantidad de preguntas en razón de su experiencia. </li></ul><ul><li>Los formuladores añaden su percepción de grado de dificultad de las preguntas y los revisores valoran la calidad de las preguntas y valida el grado de dificultad </li></ul>
  36. 39. Comisión de Prueba estandarizada <ul><li>06 personas quien nombra a 14 profesores, quienes conseguirán 140 preguntas </li></ul><ul><li>El haber tomado pruebas sin banco de preguntas hacía crecer el grado de dificultad de una prueba. </li></ul><ul><li>El conformarlo de manera eventual, dificulta la estabilidad en la construcción de pruebas </li></ul>
  37. 42. Resultados de Mejora
  38. 43. Opciones de ingreso (03 factores) <ul><li>Aptitudes para el trabajo universitario (prueba de aptitudes) </li></ul><ul><li>Conocimientos suficientes (prueba de conocimientos) </li></ul><ul><li>Querer estudiar!!!!!!! </li></ul><ul><li>“ Las teorías conductuales recalcan que la motivación ayuda a dirigir al atención e influye en la forma de procesar información” </li></ul>
  39. 44. Criterios a tener en claro en la elaboración de preguntas? <ul><li>Estructura de las preguntas </li></ul><ul><li>Ponderación </li></ul><ul><li>Grados de dificultad </li></ul><ul><li>Banco de preguntas renovables </li></ul><ul><li>Conocimientos que resulten integradores de saberes aislados </li></ul>
  40. 45. La prueba es insuficiente <ul><li>Control emocional </li></ul><ul><li>Vocación </li></ul><ul><li>Inteligencia emocional </li></ul><ul><li>Habilidad psicomotriz </li></ul><ul><li>Desempeño ético </li></ul>
  41. 46. Problemas que puede caer una prueba estandarizada <ul><li>Elaboración rutinaria </li></ul><ul><li>Uso no ético de los recursos tecnológicos </li></ul><ul><li>Falta de conocimientos y quizá difusión de las investigaciones realizadasa aspectos de confiabilidad, validez predictiva, capacidad discriminatoria. </li></ul>

×