Importancia de algunos supuestos 'psicométricos' en la calibración y equiparación de las pruebas usadas en la evaluación de los sistemas educativos : estudio del caso de los 'Estándares Nacionales' de México.

Resumen tomado de la publicación. Monográfico con el título: La enseñanza-aprendizaje del español como segunda lengua (L2) en contextos educativos multilingües

La evaluación del profesor : perspectivas y resultados.

Existen dos tendencias de investigación en cuanto a la finalidad de la evaluación del profesor. La primera es la investigación sobre la efectividad docente, su medida y la elaboración de modelos de evaluación del profesor. La segunda es la investigación organizativa y de aplicación. La evaluación del profesor y del rol que desempeña deben evaluarse teniendo en cuenta su encuadre dentro del sistema. Es necesario comprender la enseñanza desde una perspectiva bidireccional, es decir, existe la influencia del profesor sobre los alumnos y viceversa. Se destaca que la evaluación del profesor se tiene que realizar a través de un seguimiento de su labor, y valorando los roles y funciones que desempeña. La evaluación es un proceso que ayuda a la formación y perfeccionamiento del profesorado, donde el profesor debe ser parte activa en este proceso.

Evaluación de programas sociales : de la eficacia a la democracia.

Se analiza la evaluación del desarrollo de programas sociales con el fin de demostrar su eficacia. Se desarrollan dos perspectivas: la perspectiva experimental, donde se piensa que es posible sustentar racionalmente las decisiones en política social, y la perspectiva transaccional, que no cree en la capacidad demostrativa de la evaluación, al contrario, afirma que una evaluación debe ser antes que nada una plataforma para la argumentación, la crítica y la participación ciudadana en su propio progreso y desarrollo. Se realiza una clasificación metodológica que permite abordar directamente su problemática y entender el sistema valorativo de cada perspectiva.

El desarrollo de la escuela media comprensiva en Suecia : investigación y evaluación.

En Suecia, existen dos concepciones tradicionales de la escuela, y para comprenderse se describen y explican la evolución de la escuela media y su evaluación. Se entiende por escuela media los cursos 7 a 9 de la escuela comprensiva (de 13 a 16 años). Se hace un repaso por la historia de la educación en Suecia, con el fin de entender las reformas que experimenta su sistema educativo. Se considera un sistema de escuela tradicional remodelado por nuevas motivaciones y situado en otro contexto económico, social y cultural.

La evaluación y la descentralización de los conocimientos.

Se examina la descentralización del sistema educativo en Noruega en relación con sus consecuencias para la evaluación de los conocimientos. En la primera parte, se analiza la evaluación educativa como ejercicio de poder. Se contrastan dos concepciones de lo que se define como evaluación: los alumnos individuales frente a los conocimientos comunes. Se esboza una concepción de la evaluación como creación de conocimientos y censura de significados. En la segunda parte, se examina el papel de la evaluación en un sistema educativo de poder descentralizado. Se plantea la cuestión de si la descentralización del poder administrativo implica una descentralización del poder para determinar la calidad, el valor y la validez de los conocimientos transmitidos por el sistema educativo. La tendencia hacia la descentralización está relacionada con la moderna crisis de legitimidad y con la cuestión de los conocimientos objetivos frente a los conocimientos relativos.

El ajuste de la evaluación en el marco de la dirección de la educación.

Se pretende combatir los problemas con los que se enfrentan los responsables de la formulación de las políticas en Noruega, debido al paso de un sistema centralizado, dirigido por reglas, a otro en el que la descentralización se convierte en norma operativa. Se propone cómo se puede ajustar la evaluación a las funciones de la escuela, la autoridad local y el Ministerio, y se señalan los conocimientos necesarios para realizarla, las fuentes de evaluación y la utilización que se hace de los conocimientos y la evaluación en este proceso. Por último, se destaca cómo la evaluación puede y debe ajustarse a otros aspectos de una planificación educativa y de un sistema distributivo.

La organización escolar y la inspección educativa : una inspección educativa como factor de evaluación sistemática.

Se estudia la incorporación de la cultura evaluativa en la comunicación ordinaria de la escuela y de ésta con la sociedad, para la comprensión de la escuela como organización. Para ello, se propone la inspección educativa ligado al fenómeno de la calidad. Se ofrece una aproximación a los elementos básicos que configuran la organización escolar desde un doble plano analítico: el interior, donde el conjunto de factores normales y funcionales permiten alcanzar una comprensión de la escuela como realidad organizada; y el exterior, formado por las complejas relaciones entre los factores socioeconómicos y la institución escolar.

Óptima-Eiónico, un sistema para la enseñanza del Equilibrio Iónico de la asignatura Química.

Resumen basado en el del autor

El contenido del discurso como variable de proceso en la evaluación de programas de formación de profesores.

El análisis del discurso en la enseñanza ha venido siendo una preocupación constante de los investigadores didácticos. Se ha tratado de aplicar el análisis del discurso de profesores en contextos muy diferentes a los de la enseñanza interactiva: seminarios de información y debate, discusión, reflexión y aprendizaje entre iguales. Este discurso se desarrolla en un contexto diferente al que habitualmente se desarrolla la actividad docente: fuera del horario escolar, en ambientes no problemáticos, sin evaluación, con un contenido negociado por los profesores, y con la intención y motivación por el aprendizaje y desarrollo personal. En este contexto, el discurso alcanza unas dimensiones diferentes a las que habitualmente ha indagado la investigación , lo que ha supuesto para el equipo de investigación una exigencia, pero a la vez un reto de cara a analizar una situación novedosa. Es necesario ahondar en el conocimiento y experiencias de evaluación de la formación de profesores. Se constata la necesidad de ampliar los horizontes y las perspectivas, de manera que ofrezcamos más información que el simple nivel de satisfacción medido a través de cuestionarios al finalizar la actividad formativa. La investigación realizada consiste en el desarrollo de un programa de formación para profesores principiantes. Este programa se ha aplicado a dos grupos de profesores correspondientes a los niveles de educación infantil y secundaria. El caso que describimos no es el de profesores principiantes tomados como individuos, sino el análisis de las interacciones que se producen en el grupo a lo largo de las sesiones del programa formativo. En definitiva, la principal diferencia entre el estudio de caso y otros modelos de investigación consiste en que el énfasis es el caso, no la totalidad de individuos que componen el caso. Lo que se estudia es el caso, que posee carácter, totalidad, tiene sus fronteras. Es un sistema complejo y dinámico. Por último, después de analizar el contenido del discurso de los profesores y coordinadores éste, se ha centrado en el nivel de aula o didáctico y llama la atención que otros temas no aparezcan. Por ejemplo: la repercusión personal que tenía en los profesores algunos de los problemas que percibían como problemas de angustia, inquietud, agresividad con los alumnos o simplemente insatisfacciones y desencantos con la enseñanza. Puede argumentarse que no han llegado a desarrollar en el grupo tal grado de confianza como para que este tipo de problemas afloren y otros.

Algunos factores que inciden en el rendimiento y la evaluación en los alumnos de las pruebas de aptitud de acceso a la universidad (PAAU).

Destacamos a continuación las principales conclusiones que se derivan de la aplicación de modelos de regresión con coeficientes aleatorios para el estudio de la asociación entre la nota de COU y la nota de las PAAU de cada estudiante: existe una variación significativa de la nota PAAU entre centros escolares; la influencia del centro escolar en la predicción de la nota PAAU individual se concreta en un término aditivo, común a todos los estudiantes del mismo centro; las distribuciones de la nota COU, a diferencia de la nota PAU, varían muy poco de un centro a otro. Los centros están usando están utilizando escalas de puntuación propias, diferentes de un centro a otro; el modelo de regresión de coeficientes aleatorios de la nota PAAU frente a la nota COU que contempla género, posible repetición de COU, opción de COU y tipo de centro, nos lleva a una serie de conclusiones en cuanto al valor predictivo de estas variables coincidentes con anteriores estudios realizados en el ámbito estatal La novedad de este enfoque estriba en la determinación del papel predictivo de cada centro en la nota individual de PAAU de manera conjunta con el resto de variables citadas.. Por otra parte, el análisis de corrección de las pruebas PAAU pone de manifiesto: la baja calidad de la corrección en las dos asignaturas estudiadas, incluso en Matemáticas. Son importantes las consecuencias que para algunos estudiantes se pueden derivar de esta imperfección del sistema. Los estudiantes más afectados por la baja fiabilidad son los que se encuentran cerca de la frontera del aprobado. El valor que tiene el monitorizar una investigación conectada a la ejecución, tanto por la información que suministra como por la información de intervenir para realizar un ajuste a tiempo. Existen diferentes fuentes de variación en la corrección. En la actualidad, el hecho de utilizar una puntuación que es una media de medias diluye, en gran parte, los efectos de un sistema imperfecto. Los modelos de descomposición de la varianza han demostrado ser de utilidad en la investigación realizada hasta el momento. Por último, entre las consideraciones pedagógicas que se desprenden destaca. La relevancia que adquiere para todo sistema educativo el hecho de disponer de datos fiables. En este sentido las pruebas PAAU, como examen externo a los centros y estandar, se revelan como un instrumento de gran utilidad. la necesidad de comparar resultados con rigor y teniendo en cuenta el contexto. Se debería avanzar en la cultura de realizar estudios que sean útiles para la Administración y que sirvan de referencia y contrasta para los centros. La necesidad de proporcionar exámenes que contengan preguntas lo más cerradas posibles que se pueda plantea un cambio en la pedagogía. Las pruebas PAAU no debe ser el primer examen global de la materia al que se enfrentan los estudiantes. Por ello, es importante que en la enseñanza secundaria los alumnos preparen y realicen exámenes que abarquen una parte importante de la programación , y a ser posible, todos los contenidos del temario, etcétera.

El proceso de evaluación institucional.

En cinco años se ha recorrido un largo camino en el desarrollo del modelo de evaluación institucional de la calidad de las universidades españolas. El Plan Experimental de 1992 apostó por un enfoque de nula tradición y experiencia, pero que estaba siendo desarrollado en los países de la UE. La participación en el Proyecto piloto europeo confirmó que no se había elegido una ruta equivocada. El contenido del Informe Anual del Plan de Evaluación ratifica la idoneidad del proceso adoptado. La UE confirma la bondad del planteamiento. Pero nuestra impaciencia por saber lo que deberíamos saber por otros medios o porque no sale o resulta aquello que cada uno de los diferentes actores del sistema cree que debe salir de un proceso de evaluación institucional puede crear incertidumbres. Hemos de asumir que hay que tener paciencia y que todo está saliendo bien.

Indicadores bibliométricos en la evaluación de la investigación.

Instrumento útil para la evaluación institucional de la investigación. Pero máximo cuidado en que se utilicen correctamente evitando simplificaciones excesivas como inútiles refinamientos metodológicos que hacen impracticable su utilización por los comités de autoevaluación. Es solo una referencia para la investigación interna de la propia institución. La lista debe actualizarse periódicamente. Un caso especial es el amplio grupo de Ciencias Sociales y las Humanidades que en conjuntos suponen más de la mitad del sistema universitario los intentos realizados para construir un sistema de referencia para la evaluación de la calidad en este campo hay que considerar a los fracasados porque la clasificación obtenida no tenía las garantías necesarias o suficientes para ser utilizada dentro del Plan Nacional de Evaluación de la calidad de las universidades al no haberse podido separar la información por campos científicos y el disponer de una sola convocatoria.

La evaluación de la investigación : la experiencia de la Universidad de Salamanca.

El procedimiento de autoevaluación y evaluación externa se considera el adecuado, ya que obliga a las unidades evaluadas a analizar su situación y a proponer mejoras realistas y prácticas a distintos niveles y, por otra, la validación del grupo de expertos externos añade una visión más amplia que el propio contexto de la unidad. En segundo lugar, para la institución supone un análisis detallado y conjunto de los departamentos/unidades con el que se detectan tanto problemas concretos como generales a todos ellos. En tercer lugar, a nivel metodológico los criterios seguidos, han permitido que la fase de auto-evaluación se llevara a cabo de una forma flexible y rápida. Pero, el principal problema detectado en el proceso de evaluación ha sido la maja participación de la comunidad universitaria porque existió una cierta reticencia a someterse a un proceso de evaluación de este tipo. Desconfianza que ha ido desapareciendo cuando el proceso de evaluación se ha afianzado. Aunque, se obtuvo la mayor parte de la información requerida, el trabajo que supuso su recogida y tratamiento fue enorme. Este tipo de información debería ser fácilmente accesible no sólo para proceso de evaluación, sino para su utilización en la toma de decisiones que puedan afectar al futuro de las universidades. Por ello, es necesario la estructuración de un sistema de información que permita disponer de una información actualizada periódicamente sobre el funcionamiento de las distintas unidades de la universidad.

La adaptación del Plan Nacional de Evaluación de la Calidad de las Universidades al contexto de una universidad con estructura matricial de centros y departamentos : el caso de la Universidad Politécnica de Cataluña.

En estos últimos años la universidad española está sometida a profundos cambios, debidos básicamente a la gran masificación que ha soportado y a la mayor exigencia de la sociedad hacia esta institución. Así, la universidad debe dar respuesta a los problemas planteados por la universalización del servicio y por la mayor trascendencia de su impacto social. Para ello, desde diferentes instancias se han desarrollado iniciativas dirigidas a incrementar el nivel de excelencia a fin de equipararse a los estándares de las grandes universidades europeas. Dentro de esta línea debe inscribirse la cultura de la evaluación como uno de los pensamientos básicos que ayudan a la mejora continua de la calidad en nuestro sistema universitario. Un claro resultado lo encontramos en la respuesta con que las universidades españolas han contestado a la convocatoria del Plan Nacional de Evaluación de la Calidad de las Universidades. La universidad de Cataluña ha participado en los distintos proyectos en el ámbito europeo, estatal y de la Comunidad Autónoma y en todos con una implicación en su participación al máximo nivel. La evaluación sólo pretende ser una mejora. Los resultados no son fáciles de obtener, pero si sus fallos para no volverlos a cometer en el próximo plan de evaluación.

Experiencias de evaluación de instituciones universitarias : el caso de Argentina.

Se intenta reflejar el procedimiento que llevan a cabo las distintas instituciones universitarias argentinas a la hora de implementar procesos de evaluación institucional. Se enmarca dentro de un nivel del sistema de educación muy particular y se expresan sus carencias. Argentina lleva varios años inmersa en estas tareas de evaluación institucional universitaria y como una imposición legal, presentarlo ahora como una novedad es incorrecto. Lo que si resulta novedoso es el carácter con que se dota actualmente a la evaluación institucional en la Ley de Educación Superior, un perfil tecnicista e instrumental que se realiza cada seis años y que se vincula a la competencia entre las instituciones para conseguir fondos públicos. Es común para la mejora continúa de la calidad de la enseñanza universitaria.