La evaluación de la competencia léxica : test de vocabulario : su fiabilidad y validez.

Investigación original con el mismo título. Convocatoria de Premios Nacionales de Investigación Educativa 2005, primer premio, modalidad de tesis doctorales

Condicionantes y capacidad predictiva de la selectividad universitaria.

Se presenta una síntesis de dos estudios: el primero, realizado en 1977, se centra en el análisis de la fiabilidad de la prueba de acceso a la universidad y en sus relaciones con variables de personalidad y de rendimiento previo de los alumnos; y el segundo se centra en el seguimiento y el análisis de la capacidad predictiva del procedimiento de selección universitarios, donde además se estudia la incidencia de variables sociofamiliares, actitudes de elección de carrera, juicios sobre la enseñanza, satisfacción, autoconcepto, expectativas, etc. sobre el rendimiento académico universitario y sobre el mismo proceso de selección. Se desarrollan algunos de los principales resultados y conclusiones más importantes con relación al acceso universitario.

Consideraciones de validez prioritaria para la evaluaci??n formativa y de rendici??n de cuentas

Monogr??fico con el t??tulo: El valor a??adido de la educaci??n.Resumen tomado de la publicaci??n

Validez y fiabilidad de las pruebas de promoción.

Se analizan algunos de los criterios utilizados para determinar la calidad de las pruebas de instrucción, es decir su validez y fiabilidad. Pues, estos criterios sirven para examinar críticamente el contenido de los ítems o preguntas de cada prueba como para analizar estadísticamente los datos obtenidos de su aplicación. Por otra parte, observada la complejidad de las operaciones y controles implicados en la elaboración de una buena prueba de promoción, se dan algunos consejos a los maestros para su confección y preparación.

Aplicación, corrección y validez de una prueba de rendimiento.

Se explican las condiciones fundamentales que deben exigirse en una correcta aplicación de las pruebas de rendimiento, así como las formas más comunes que se emplean en la corrección o puntuación de éstas. También, se expone el análisis e interpretación de los resultados logrados en la prueba, que incluyen su ordenación, clasificación y organización, el tratamiento estadístico y la aplicación de criterios, para que una vez convencidos de su validez, se puedan formular las conclusiones y recomendaciones que se desprendan real y objetivamente de las mediciones efectuadas.

Un modelo para el análisis del clima motivacional de clase : validez transcultural e implicaciones educativas

Resumen basado en el de la publicación

Relación predictiva entre la percepción del alumnado de las estrategias de disciplina del profesor y la percepción del trato de igualdad-discriminación en las clases de Educación Física.

Resumen basado en el de la publicación

Mapas conceptuales en Humanidades y Ciencias Sociales : eficacia en el aprendizaje : validez en la evaluación.

Determinar la eficacia de los mapas conceptuales (MC) en la consecución del aprendizaje significativo (se entiende la eficacia de tres modos: absoluta, comparada con otras actividades de estudio y como herramienta para la exposición de contenidos). Estudiar la eficacia de los MC en condiciones incidentales de aprendizaje. Comprobar la resistencia al olvido del material aprendido mediante MC. Estudiar la validez de los MC en la evaluación. Observar la interacción entre el sexo y la capacidad para el aprendizaje significativo. 46 alumnos-as de dos grupos de acceso a la FP-II del Instituto de Formación Profesional de Utiel, 80 alumnos-as de tres grupos de tercero de BUP del Instituto de Bachillerato de Quintanar del Rey, 120 alumnos-as de cuatro grupos de tercero de ESO y segundo de BUP del Instituto de Bachillerato de Motilla del Palancar. Se describe el marco teórico que sustenta la eficacia y validez de los mapas conceptuales como herramientas de aprendizaje significativo en el área de Humanidades y Ciencias Sociales. Se utiliza un diseño cuasi-experimental, con cinco variantes experimentales según los cinco objetivos y diferentes contrastes en cada variante. Los grupos se alternan en las diferentes condiciones experimentales. Los instrumentos empleados son: tests objetivos, mapas conceptuales diseñados por los alumnos-as y evaluados de dos formas, mapas conceptuales 'degradados' (completar los mapas conceptuales diseñados por el profesor a los que se ha suprimido la mayor parte de los conceptos), post-tests de aprendizaje significativo. Se analizan los datos mediante análisis de covarianza y MANOVA. Se presentan los resultados para cada objetivo propuesto. En cuanto a la eficacia de los MC se observa que: existe un moderado efecto positivo del tratamiento MC frente a la instrucción estándar en lo que se refiere a la eficacia absoluta, en la eficacia comparada no se cumple la hipótesis de que los MC tienen una eficacia superior que otras actividades de estudio, y la enseñanza expositiva auxiliada por los MC no parece tener ventajas apreciables a la hora de la resolución de actividades. No hay diferencias estadísticamente significativas entre una fase intencional de estudio y una tarea de orientación consistente en diseñar y completar MC. Diseñar y completar MC parece ser útil para la integración permanente de conceptos, pero no más de lo que lo sería el estudio. Es posible evaluar con validez el aprendizaje significativo usando dos medidas derivadas de los MC: una escala de valoración y las puntuaciones de los MC degradados. Por último, se observa que chicos y chicas de igual rendimiento académico no difieren en varias estimaciones diferentes de aprendizaje significativo. Se concluye con la necesidad de continuar con estudios acerca de la eficacia de los MC en entornos culturales similares y con muestras más grandes.

La evaluación de la competencia léxica : tests de vocabulario : su fiabilidad y validez.

El objetivo principal es el de analizar los tests de vocabulario en lengua inglesa como instrumentos para conocer los niveles de competencia léxica del alumnado. Esta información debe ser el punto de partida para detectar carencias, realizar diagnósticos y sugerir contenidos léxicos que tiendan a mejorar los vocabularios de los alumnos. La investigación se estructura en tres líneas. La primera de ellas consiste en la elaboración de un listado de frecuencias con las palabras más usuales en inglés, esto es, una muestra representativa de lo que los alumnos deben conocer y de los que los materiales para la enseñanza del vocabulario deberían tener en cuenta. La segunda consiste en el diseño y construcción de tests de vocabulario con cinco opciones de respuesta, aplicables a nivel universitario, primero y segundo de Bachillerato y cuarto de ESO, realizados a partir del listado de frecuencias. La tercera se centra en la virtualización de los tests, es decir, en la adaptación de los tests de vocabulario a un formato susceptible de ser administrado informáticamente. Además del listado de frecuencias, se utilizaron como tests de vocabulario adaptados, un Test Adaptativo Informatizado (TAI) en el nivel universitario y un test multietápico para el nivel de Secundaria. Tras la aplicación de los tests de vocabulario a una muestra de alumnos, los resultados por niveles fueron los siguientes: en cuarto de ESO el tamaño medio del léxico fue de 941 palabras, siendo el léxico deseable 1600 palabras; en el caso de primero de Bachillerato el resultado fue de 1582 palabras, contra un tamaño de léxico deseable de 2000 palabras; en segundo de Bachillerato la media fue de 1582, siendo el tamaño léxico deseable de 2500 palabras; en el primer ciclo universitario los resultados fueron de 3174, contra las 4000-5000 palabras deseables. Existe una deficitaria situación léxica del alumnado. Según los resultados de los tests, el nivel de vocabulario no alcanza lo considerado necesario en ninguno de los niveles estudiados.

Validez concurrente de las calificaciones otorgadas en el COU.

Existe la opinión de que determinados sectores sociales ejercen una fuerte presión para que sus hijos logren acceder a estudios superiores. Esta presión se plasmaría en que los centros privados, sostenidos económicamente por estos sectores, sobrevalorarían los expedientes académicos de sus alumnos. Este estudio pretende dilucidar si estas prácticas fraudulentas existen y determinar los centros que posiblemente las realizan. La muestra está formada por el 83 por ciento de los alumnos que se presentaron a los exámenes de Selectividad en la Universidad Autónoma de Madrid, en las convocatorias de junio y septiembre del curso 1982-1983. Se definen las siguientes variables: tipo de centro (privado o público), calificaciones obtenidas en cada asignatura en COU, notas obtenidas en los ejercicios correspondientes de las pruebas de Selectividad. Expediente académico de los alumnos. Notas en pruebas de selectividad. Índices de tendencia central y de variabilidad para calcular las diferencias entre las calificaciones otorgadas por los centros. Prueba de razón crítica para averiguar las diferencias de puntuación entre la calificación en el examen de Selectividad y la calificación de COU, para cada asignatura y centro. Prueba Chi cuadrado para ver si existe una relación significativa entre tipo de centro y la existencia de calificaciones anómalas. Contraste 't de Student', dentro de los centros que otorgan calificaciones anómalas, si hay diferencias entre públicos y privados. No existen diferencias significativas entre los centros públicos y privados en las calificaciones otorgadas en las distintas asignaturas de COU, salvo en Biología, Filosofía y Dibujo Técnico. Que el centro sea privado o público no parece determinar que las calificaciones sean rigurosas o no. Los datos procedentes de este estudio no parecen justificar la opinión de que los colegios privados (en conjunto) sobrevaloren las calificaciones otorgadas en COU.

Entrenamiento de habilidades cognitivas y enriquecimiento motivacional : nuevas tecnologías para la Educación Compensatoria.

Elaborar y analizar cuestionarios con bases teóricas y empíricas que evalúen motivación, estilo atributivo y expectativas de control. Examinar el efecto diferencial entre un entrenamiento atribucional y otro en autoinstrucciones como forma de superar una situación de fracaso. Construcción y validación de cuestionarios: 1202 sujetos de segundo ciclo de EGB, divididos en muestras, una de Madrid y otra de Bilbao. Para la eficacia de los programas de entrenamiento atribucional: 90 sujetos de sexto y séptimo de EGB. Construcción y validación de cuestionarios: tras la selección de la muestra, controlando las variables sexo, curso y nivel socioeconómico, los sujetos rellenan los cuestionarios elaborados más uno de inteligencia (factor G). Se recogen las calificaciones de los alumnos. Validez de constructo: correlaciones teóricas y reales entre cuestionarios. Entrenamiento motivacional: diseño intergrupo, pretest posttest. Variable independiente: tipo de programa (atribucional vs. autoinstrucciones)/, nivel de dificultad de la tarea y trabajar con la misma o diferente tarea. Variables dependientes: conductas instrumentales y atribucionales. Cuestionarios: se obtienen estructuras factoriales parecidas en las dos submuestras. Las pruebas presentan fiabilidad y validez adecuadas. Los cuestionarios tienen capacidad predictiva alta, si se asocian con el test de factor G de Cattell. Estructuras factoriales: MAPE: incluye 3 factores de segundo orden (motivación de evitación de juicios negativos de competencia y consecución de juicios positivos vs. motivación por el aprendizaje o incremento de competencia, vagancia vs. disposición al esfuerzo y motivación de lucimiento; estos factores integran 8 de primer orden). ETA: 2 escalas, una referida a aspectos académicos y otra a aspectos interpersonales, el ETA académico incluye tres factores de segundo orden (indefensión, internalización del éxito académico e internalización y controlabilidad vs. externalización e incontrolabilidad; ambas escalas poseen cierta independencia). Y ECO, que aisla dos factores de segundo orden (expectativas de controlabilidad vs. expectativas de no controlabilidad en los resultados académicos futuros y otro factor con igual nombre pero con estructura factorial distinta). Respecto a los programas de enriquecimiento motivacional las respuestas instrumentales pueden aprenderse con facilidad. Así mismo, los efectos de la internalización dependen de la experiencia previa de éxito o fracaso. Se presentan 3 instrumentos de evaluación que pueden ser muy valiosos a la hora de pronosticar el rendimiento, especialmente si se asocian a pruebas de inteligencia. Los resultados indican cualidades psicométricas satisfactorias. Por otro lado, se enfatiza la necesidad de un entrenamiento instrumental para afrontar situaciones de fracaso en cualquier programa de enriquecimiento motivacional. Reseñas de aspectos y cuestiones que necesitan más investigación.

Alteraciones perceptivas y dificultades en el aprendizaje : alcance, validez y eficacia de un modelo de intervención psicopedagógica rehabilitadora mediante el empleo de feedback informativo.

Se intenta aislar algún componente diagnóstico de la dislexia y poner a prueba las hipótesis explicativas más actuales. A) 12 sujetos con trastornos de lectura, 12 con trastornos conductuales y 12 normales (9-13 años). Sexo balanceado. B) 20 sujetos disléxicos, 20 deficientes y 20 normales. Se consideró la inteligencia y se descartaron aquellos que en la exploración neurológica mostraron algún tipo de trastorno. A) Diseño mixto con medidas repetidas. VI.: 1) Tiempo de exposición de los estímulos, 2) Grupo experimental. VD.: 1) Tiempo de lectura, 2) Errores, 3) Ausencia de respuesta. Procedimiento: leer estímulos visuales presentados en un taquistoscopio. B) Diseño mixto. VI.: 1) Grupo experimental, 2) Tiempo de exposición del estímulo, 3) Orden de presentación de las listas de palabras, 4) Tipo de listas de palabras. VD.: 1) Errores de lectura, 2) Palabras leídas y palabras leídas correctamente, 3) Errores en la reproducción de estímulos visuales. Variables controladas: ajuste social y status social. Procedimiento: prueba de lectura de textos y de lectura de listas de palabras presentadas en un taquistoscopio. Cada lista era presentada, en orden balanceado, para cada tiempo de exposición. Después, se presentaron estímulos visuales procedentes del test de Retención Visual de Benton, pidiéndose al sujeto que los reproduzca. A) Tarjetas. B) Pruebas de lectura y de comprensión lectora. Para controlar factores individuales se aplicó la Escala de Adaptación de Achenbach. A) Kruskall-Wallis y 'U' de Mann-Withney. B) Anova y Ancova. Análisis de correlación. Intercomparaciones (Scheffe). A) Se observan diferencias significativas en el 'N' de errores cometidos por el grupo de disléxicos frente al de control, en especial a partir de palabras bisilábicas y trisilábicas. La variable 'N' de fracasos es la más discriminativa. B) Comparando sujetos disléxicos y normales se observan diferencias significativas en el 'N' de errores en las pruebas de lectura (además, los tipos de errores muestran configuraciones diferenciales significativas) y en las pruebas de comprensión lectora. En las pruebas de taquistoscopio hay diferencias debidas al grupo pero no al tiempo de exposición, aunque esta variable tiene efecto en otras medidas dependientes. Estímulos visuales: no hay diferencias significativas globales, aunque determinados ítems resultan discriminativos. Grupo de deficientes: se observa clara influencia del tiempo de exposición en determinados errores de lectura. No hay diferencias en la ejecución lectora ni en la reproducción de dibujos. Los resultados indican un patrón diferencial claro entre disléxicos y normales. El rendimiento de los primeros en tareas verbales es inferior. Sin embargo, no se confirma la hipótesis de igual rendimiento en las tareas gráficas no lingüísticas. En los sujetos deficientes, las diferencias más notables radican en que no usan estrategias mnemotécnicas, aunque son susceptibles de entrenamiento.

Estrategias de estudio en alumnos de BUP y universidad : elaboración de un instrumento de evaluación.

Elaborar un cuestionario para la evaluación de las estrategias de aprendizaje (EA) que represente adecuadamente los procesos que la Psicología Cognitiva ha puesto de relieve en las actividades de aprendizaje. 876 alumnos, de los cuales 486 son de EEMM y 390 de universidad. El objeto del trabajo es elaborar un cuestionario (IDEA) específicamente diseñado para nuestro contexto educativo. La investigación consta de 4 partes. La primera aporta el marco teórico del estudio. La segunda expone el procedimiento de desarrollo del inventario de estrategias de aprendizaje: idea, donde abordan la revisión y el análisis de los cuestionarios tanto de nuestro país como del extranjero. Los ítems que contienen dichos cuestionarios se utilizan para crear un fondo de ítems. La 3 desarrolla el procedimiento de depuración de la idea: método y resultados, donde se ha llevado a cabo un análisis de las tareas de aprendizaje que típicamente realizan los alumnos de BUP y universidad, aislándose 17 dimensiones que se utilizan como categorías para clasificar los ítems contenidos en el fondo original. Este conjunto de ítems se somete a un análisis de componentes principales, dando como resultado 14 componentes que denominan: dificultades de concentración, establecer conexiones, identificar la información principal, expresión, asertividad con profesor, falta de control, aprendizaje repetitivo, presentación de exámenes, trabajo continuado, utilización de información adicional, organización, motivación-esfuerzo, metacognición-solución de problemas y aprendizaje reflexivo. Finalmente, la 4 enumera las conclusiones a las que se han llegado. Validez de criterio, análisis de regresión, primer y tercer cuartil, media, desviación típica, consistencia interna de las escalas, índice de Cronbach, análisis factoriales parciales, análisis de componentes principales, BMDP. La consistencia interna de las escalas es adecuada, y su relación con una escala de sinceridad nula, excepto para dificultades de concentración, falta de control y aprendizaje repetitivo. El análisis de las correlaciones pone de relieve 3 grupos de escalas: en primer lugar, dificultades de concentración, falta de control y aprendizaje repetitivo. En segundo lugar, establecer conexiones, identificar información principal, asertividad con profesor, metacognición-solución de problemas, utilización de información adicional y aprendizaje reflexivo. En tercer lugar, trabajo continuado, motivación-esfuerzo y presentación de exámenes. Todas las escalas, excepto expresión discriminan rendimiento y nivel académico. El análisis de regresión de las escalas con respecto al rendimiento académico pone de relieve la capacidad predictiva de algunos componentes. Se discuten las implicaciones de los resultados, así como su alcance, y se sugieren nuevos estudios.

Validez de la teorías implícitas de personalidad de los profesores de enseñanza primaria.

Comprobar la validez de las inferencias y juicios sociales que los profesores realizan acerca de los rasgos de personalidad y conducta de sus alumnos. Averiguar si las tareas impícitas de personalidad de los profesores de enseñanza primaria condicionan las conductas y los aprendizajes de sus alumnos. Adicionalmente, comprobar la existencia de diferencias individuales en cuanto a la sagacidad perceptiva, a la fiabilidad estructural de las teorías implícitas de personalidad, a su utilización en la emisión de juicios sociales y a la incidencia de la semántica en ellas y en los juicios retrospectivos. En el primer estudio enpírico se utilizaron 30 profesores de enseñanza primaria de centros públicos y privados de la ciudad de Salamanca. En el segundo estudio empírico se empleó una muestra no probabilística de 67 estudiantes de Pedagogía pertenecientes a los cursos de adaptación, cuarto y quinto de facultad. Todos ellos habían tenido alguna experiencia directa como profesores de EGB. El primer estudio empírico recogió el enjuiciamiento de los alumnos por parte de los profesores en su lenguaje natural, sin recurrir a ningún tipo de categoría linguística. Las respuestas dadas por los profesores fueron codificadas atendiendo a los criterios establecidos como categorización primaria y como categorización secundaria. En el primer estudio empírico se utilizó un cuestionario que contenía una sola cuestión central de respuesta libre. Análisis de 3 tablas de contingencia: Tipo de categoría descriptiva por sexo, tipo de categoría descriptiva por ciclo de enseñanza y tipo de categoría descriptiva por experiencia docente. Análisis de la varianza de medidas repetidas. El primer estudio empírico revela que las categorías usuales de los profesores de enseñanza primaria son los rasgos, las conductas y las relaciones, con lo que queda mostrado que los componentes básicos de las teorías impícitas de personalidad -Rasgos y Conductas- constituyen categorías naturales y disponibles en la percepción docente. Además, el sexo, la experiencia del profesor y el ciclo de enseñanza son variables asociadas a diferencias interindividuales en los tipos de categorías más disponibles, por otra parte, existen ámplias diferencias interindividuales en los componentes básicos de las teorías implícitas de personalidad de los profesores, lo cual no permite realizar ninguna inferencia sobre la validez de las teorías impícitas. El segundo estudio empírico pone de manifiesto que las teorías emplícitas de personalidad, la semántica, la estructura de los juicios retrospectivos y las covariaciones reales entre las categorís se encuentran relacionadas entre sí, lo que demuestra que dichas teorías poseen una moderada-notable fidelidad estructural e influyen en los juicios retrospectivos, sin menoscabo de que al mismo tiempo se caractericen por un componente semántico muy fuerte. La percepción de covariación de categorías por parte de los profesores de enseñanza primaria para describir la personalidad de sus alumnos ha reflejado la covariación real presente en las conductas, además, las teorías implícitas de personalidad se han mostrado como un factor que contribuye a la validez de los juicios interpersonales en el aula, al menos en lo que respecta a su precisión estereotípica. Sabiendo que la percepción da forma al desarrollo y aprendizajes de los niños, es posible afirmar que diversas variables infantiles podrían verse favorecidas por el hecho de la validez de las teorías implícitas de personalidad, aparte de la propia eficacia didáctica del profesor. Se apunta, para el futuro, un conjunto de investigaciones que mejoren la metodología y repliquen los hallazgos descritos.

Validity of a reading comprehension test for Portuguese students

Resumen tomado de la publicaci??n