Assessment and curriculum reform in China : the college English test and tertiary English as a foreign language education.

Educational assessment was a worldwide commonplace practice in the last century. With the theoretical underpinnings of education shifting from behaviourism and social efficiency to constructivism and cognitive theories in the past two decades, the assessment theories and practices show a widespread changing movement. The emergent assessment paradigm, with a futurist perspective, indicates a deviation away from the prevailing large scale high-stakes standardised testing and an inclination towards classroom-based formative assessment. Innovations and reforms initiated in attempts to achieve better education outcomes for a sustainable future via more developed learning and assessment theories have included the 2007 College English Reform Program (CERP) in Chinese higher education context. This paper focuses on the College English Test (CET) - the national English as a Foreign Language (EFL) testing system for non-English majors at tertiary level in China. It seeks to explore the roles that the CET played in the past two College English curriculum reforms, and the new role that testing and assessment assumed in the newly launched reform. The paper holds that the CET was operationalised to uplift the standards. However, the extended use of this standardised testing system brings constraints as well as negative washback effects on the tertiary EFL education. Therefore in the newly launched reform -CERP, a new assessment model which combines summative and formative assessment approaches is proposed. The testing and assessment, assumed a new role - to engender desirable education outcomes. The question asked is: will the mixed approach to formative and summative assessment provide the intended cure to the agony that tertiary EFL education in China has long been suffering - spending much time, yet achieving little effects? The paper reports the progresses and challenges as informed by the available research literature, yet asserts a lot needs to be explored on the potential of the assessment mix in this examination tradition deep-rooted and examination-obsessed society.

Manual for the USES basic occupational literacy test.

Mode of access: Internet.

UNDERSTANDING ESSAY RATING AS A SOCIALLY MEDIATED ACTIVITY: THE CASE OF A HIGH-STAKES ENGLISH TEST IN CHINA

Most essay rating research in language assessment has examined human raters’ essay rating as a cognitive process, thus overlooking or oversimplifying the interaction between raters and sociocultural contexts. Given that raters are social beings, their practices have social meanings and consequences. Hence it is important to situate essay rating within its sociocultural context for a more meaningful understanding. Drawing on Engeström’s (1987, 2001) cultural-historical activity theory (CHAT) framework with a sociocultural perspective, this study reconceptualized essay rating as a socially mediated activity with both cognitive (individual raters’ goal-directed decision-making actions) and social layers (raters’ collective object-oriented essay rating activity at related settings). In particular, this study explored raters’ essay rating at one provincial rating centre in China within the context of a high-stakes university entrance examination, the National Matriculation English Test (NMET). This study adopted a multiple-method multiple-perspective qualitative case study design. Think-aloud protocols, stimulated recalls, interviews, and documents served as the data sources. This investigation involved 25 participants at two settings (rating centre and high schools), including rating centre directors, team leaders, NMET essay raters who were high school teachers, and school principals and teaching colleagues of these essay raters. Data were analyzed using Strauss and Corbin’s (1990) open and axial coding techniques, and CHAT for data integration. The findings revealed the interaction between raters and the NMET sociocultural context. Such interaction can be understood through a surface structure (cognitive layer) and a deep structure (social layer) concerning how raters assessed NMET essays, where the surface structure reflected the “what” and the deep structure explained the “how” and “why” in raters’ decision-making. This study highlighted the roles of goals and rules in rater decision-making, rating tensions and raters’ solutions, and the relationship between essay rating and teaching. This study highlights the value of a sociocultural view to essay rating research, demonstrates CHAT as a sociocultural approach to investigate essay rating, and proposes a direction for future washback research on the effect of essay rating. This study also provides support for NMET rating practices that can potentially bring positive washback to English teaching in Chinese high schools.

UNDERSTANDING ESSAY RATING AS A SOCIALLY MEDIATED ACTIVITY: THE CASE OF A HIGH-STAKES ENGLISH TEST IN CHINA

Thesis (Ph.D, Education) -- Queen's University, 2016-09-22 22:05:24.246

Standard setting in specific-purpose language testing: what can a qualitative study add?

This paper explores the views of nursing and medical domain experts in considering the standards for a specific-purpose English language screening test, the Occupational English Test (OET), for professional registration for immigrant health professionals. Since individuals who score performances in the test setting are often language experts rather than domain experts, there are possible tensions between what is being measured by a language test and what is deemed important by domain experts. Another concern is a lack of qualitative research on the process of the standard setting. To date, no published qualitative work has been identified about the contributions of domain experts in the standard setting for healthcare communication. In this study, a standard-setting exercise was conducted for the speaking component of the OET, using judgements of nursing and medical clinical educators and supervisors. In all, 13 medical and 18 nursing clinical educators and supervisors rated medical and nursing candidate performances respectively. These performances were audio-recorded OET role-plays that were selected across a range of proficiency levels. Domain experts were invited to comment on the basis of their decisions and the extent of alignment between these decisions and the criteria used to assess performance on the OET. Nursing and medical domain experts showed that they attended to all of the OET criteria in making their decisions about standards. However, clinical scenario simulation also invited judgements of clinical competence from participants, even where they knew that clinical competence should be excluded from their decision-making. Another concern related to the authenticity limitations of the role-play tasks as evidence of readiness to handle communication in the workplace. Overall, findings support the value of qualitative evidence from the standard setting in providing insight into the factors informing and impeding decision-making.

Assessment policy change in relation to English language teaching and learning in China : a study of perspectives from two universities

In response to concerns about the quality of English Language Learning (ELL) education at tertiary level, the Chinese Ministry of Education (CMoE) launched the College English Reform Program (CERP) in 2004. By means of a press release (CMoE, 2005) and a guideline document titled College English Curriculum Requirements (CECR) (CMoE, 2007), the CERP proposed two major changes to the College English assessment policy, which were: (1) the shift to optional status for the compulsory external test, the College English Test Band 4 (CET4); and (2) the incorporation of formative assessment into the existing summative assessment framework. This study investigated the interactions between the College English assessment policy change, the theoretical underpinnings, and the assessment practices within two Chinese universities (one Key University and one Non-Key University). It adopted a sociocultural theoretical perspective to examine the implementation process as experienced by local actors of institutional and classroom levels. Systematic data analysis using a constant comparative method (Merriam, 1998) revealed that contextual factors and implementation issues did not lead to significant differences in the two cases. Lack of training in assessment and the sociocultural factors such as the traditional emphasis on the product of learning and hierarchical teacher/students relationship are decisive and responsible for the limited effect of the reform.

Development of a New Assessment System to Evaluate Students' English Communicative Capacities in China

The purpose of this study was to develop a new English assessment system to evaluate Chinese students' English communicative capacities. Since there is more interaction with people from English-speaking countries, Chinese people attach more importance to English oral skills, and a lot of Western English teaching methods were introduced into China to improve students' English communicative capacities. However, traditional paper-written examinations, like the English test of higher education entry examination, cannot evaluate it effectively. This study explored the perceptions of two Chinese English-language teachers and two Chinese students about English assessment system. A qualitative research method using telephone interviews was conducted in this study. The findings showed that the most possible ways to assess Chinese students' English communicative capacities were paper-written examination and person-machine conversations, although measures should be taken to improve these two models. On the other hand, the model of person-person conversation was the ideal assessment tool but was hard to achieve at the current stage.

Recycling elementary English : with key.

Ofrece a los estudiantes de nivel elemental los recursos para aprender y practicar el inglés y preparar el certificado Cambridge Key English Test (KET). Abarca cuatro áreas principales: situaciones, para el uso del idioma en la vida cotidiana; vocabulario; gramática; y escritura, que incluye consejos para estudiar, ayuda con la ortografía, corrección de errores y expresiones útiles.

Originals : classic and modern fiction and non-fiction in English with key.

Libro para estudiantes de inglés como lengua extranjera de nivel intermedio que quieran mejorar mediante la lectura, y para la preparación del examen Cambridge Preliminary English Test (PET). Contiene 28 fragmentos de obras clásicas y modernas de ficción o basadas en hechos reales, escritas en inglés por autores de distintos países, en orden ascendente de dificultad. Incluye una breve biografía de cada autor, preguntas previas a la lectura para estimular el interés, ejercicios de compresión y debate para trabajar con el texto, y ejercicios de vocabulario y gramática. Hay una sección con todas las soluciones al final del libro.

Listen here! : intermediate listening activities with key.

Libro dirigido a estudiantes de inglés como lengua extranjera de nivel intermedio-bajo o intermedio, que quieran mejorar sus habilidades de compresión auditiva. Adecuado para su uso en clase como complemento de cualquier libro de texto, por cuenta propia o para preparar el examen Cambridge PET (Preliminary English Test). Está estructurado en 28 lecciones con temas y situaciones variadas, con diferentes pronunciaciones y acentos (inglés normativo y regional, americano y australiano), y ejercicios adicionales de pronunciación y expresión oral. Contiene las soluciones al final del libro.

Instant PET : ready-to-use tasks and activities.

Libro para la preparación del examen Cambridge PET (Preliminary English Test), para alumnos de nivel intermedio bajo. Está divido en cuatro secciones (lectura, redacción, comprensión auditiva y expresión oral) que se corresponden con los ejercicios de la prueba oficial, y que a su vez se organizan en una serie de sesenta actividades diseñadas en formato de páginas enfrentadas, con una hoja para el profesor con las indicaciones paso a paso, notas explicativas y las soluciones de los ejercicios, y otra que se puede fotocopiar con las tareas para los alumnos.

Estudio de los efectos de un tratamiento alternativo del componente fonológico en el currículum de lengua inglesa para segundo de Bachillerato.

Conocer los posibles efectos que puede tener en la competencia comunicativa en lengua inglesa un tratamiento consistente en un currículo de inglés de nivel pre-intermedio que integre el componente fonológico. Dos grupos de segundo de Bachillerato del IES Aljada (Puente Tocinos- Murcia) Tipo de muestreo: aleatorio por conglomerados realizado sobre grupos de individuos afines. Total: 50 estudiantes. Revisión de las principales teorías lingüísticas y su relación con el aprendizaje y la enseñanza del componente fonológico de una segunda lengua. Características generales del sistema educativo español en ESO y Bachillerato. Estos dos aspectos han constituido la investigación secundaria, adquiriendo una visión de conjunto sobre el estado de la cuestión. La investigación primaria ha consistido en un estudio experimental sobre el grado de competencia global en lengua inglesa de dos grupos de alumnos bajo condiciones controladas. Examen estandarizado, Preliminary English Test y una prueba ad hoc que evalúa el dominio del componente fonológico. Diseño cuasi-experimental con grupo de control y grupo experimental con pre y postest y tratamiento al grupo experimental (actividades novedosas de aprendizaje del componente fonológico que incluyen el ritmo y la entonación). Entre los resultados se encuentra que los resultados de las pruebas estadísticas aplicadas a las variables incluídas en la prueba diseñadas ad hoc para evaluar el componente fonológico son dispares. Si bien se puede afirmar que el componente de la pronunciación en su conjunto resulta influído por el tratamiento, éste afecta a las difrentes áreas señaladas de forma diferente. Para el componente fonológico se partía de una desventaja inicial del grupo experimental estadísticamente significativa, situación que se invierte en la prueba final, mientras que para el grupo de control se mantiene dentro del mismo porcentaje. Los resultados de la investigación hacen recomendable el uso de materiales adicionales de práctica del componente fonológico puesto que, a mayor práctica con actividades y contenidos de pronunciación, mayor adquisición.

Estudio de una intervención pedagógica para la enseñanza de la pronunciación inglesa en cuarto curso de ESO.

Determinar los posibles efectos de la enseñanza que un tratamiento novedoso del componente de la pronunciación inglesa tendría en la mejora de la competencia lingüística global en lengua inglesa y en la mejora de su rendimiento en este área.. Investigación aplicada de naturaleza experimental. Se ha utilizado un tipo de muestreo aleatorio por conglomerados seleccionando una agrupación natural (todos los alumnos de cuarto de ESO de dos grupos-clase ya formados en un centro educativo, como grupos experimental y de control). El grupo experimental formado por 32 estudiantes y 30 el de control. Diseño cuasiexperimental con pre y postest. Para comprobar la similitud de los grupos se diseñó un cuestionario de variables que todos los alumnos bajo estudio tuvieron que completar y que proporcionó información adicional sobre los grupos. Cuestionario de elaboración propia sobre las variables intervinientes en el estudio. Los diarios de clase de los profesores, una prueba de evaluación inicial y final (The Key English Test KET, de la Universidad de Cambridge). Prueba de pronunciación específica de elaboración propia que mide la competencia de los candidatos en cinco bloques principales del componente de pronunciación: fonemas, acento léxico, acento rítmico, tonicidad y tonemicidad. Instrumento para la recogida de muestras orales: Total Recorder I y Dart Pro 98. Programa de curvas entonativas Spech File System (FS) de la University College London. Se aplicó el tratamiento de pronunciación en el grupo experimental dejando al grupo de control con el correspondiente a los contenidos de manual del curso: The Burlington Course for 4 ESO. Student's Book (Burlington Books).. Mayor avance, aunque no estadísticamente significativo, del grupo experimental sobre el de control con relación al rendimiento global en lengua inglesa y a las destrezas lingüísticas de expresión y comprensión oral de la lengua inglesa y en las de expresión y comunicación escrita. .

Estudio sobre los efectos de un tratamiento multimodal (audio-vídeo-texto) sobre la competencia de la comprensión oral de los alumnos de ESO y Bachillerato.

Estudiar y analizar los resultados obtenidos con dos grupos de trabajo utilizando metodologías diferentes para la comprensión oral de la lengua inglesa en alumnos de enseñanza secundaria y Bachillerato. La investigación se ha realizado con dos grupos de tercero de enseñanza secundaria obligatoria del Instituto Infanta Elena de Jumilla (Murcia). Estudio semi experimental de análisis tomando un grupo de control y otro experimental que incluye la aplicación de un tratamiento continuado de exposición al componente oral de la lengua inglesa utilizando materiales audiovisuales. Las variables utilizadas han sido la comprensión oral antes y después del tratamiento y la nota global de inglés del curso anterior. El grupo de control está formado por los alumnos que realizan las pruebas de compresión oral tradicionales y el grupo experimental el sometido a pruebas utilizando medios audiovisuales. El estudio duró un trimestre. Se realizaron cuestionarios KET (Key English Test) a ambos grupos para determinar su nivel inicial en cuanto a aprendizaje en comprensión oral. Se realizó tambien un segundo tipo de cuestionario para conocer la homogeneidad en cuanto a sus conocimientos previos, variables de carácter afectivo y socioeconómico. Estos datos, así como sus calificaciones y expediente académico fueron tratadas con el programa SPSS. También se empleó SACODEYL como interfaz para profesores y alumnos en cuanto al acceso de recursos digitales. Los alumnos que forman parte del grupo experimental obtienen mejores resultados que los del grupo de control. La utilización de material audiovisual mejora la compresión oral de la lengua inglesa .