Assessment of the EEE-4 oral test: a discourse analysis based on complex networks.


Autoria(s): Lǐ 李戈, Gē; Universidad de Estudios Internacionales de Shanghai
Data(s)

26/09/2016

Resumo

With the development of information technology, the theory and methodology of complex network has been introduced to the language research, which transforms the system of language in a complex networks composed of nodes and edges for the quantitative analysis about the language structure. The development of dependency grammar provides theoretical support for the construction of a treebank corpus, making possible a statistic analysis of complex networks. This paper introduces the theory and methodology of the complex network and builds dependency syntactic networks based on the treebank of speeches from the EEE-4 oral test. According to the analysis of the overall characteristics of the networks, including the number of edges, the number of the nodes, the average degree, the average path length, the network centrality and the degree distribution, it aims to find in the networks potential difference and similarity between various grades of speaking performance. Through clustering analysis, this research intends to prove the network parameters’ discriminating feature and provide potential reference for scoring speaking performance.

Con el desarrollo de la informática, en la investigación del lenguaje se introdujo la teoría y metodología de redes complejas, que transforma el sistema de la lengua en las redes complejas compuestas de nodos y enlaces para hacer un análisis cuantitativo de la estructura de la lengua. El desarrollo de la gramática de dependencias proporciona un apoyo teórico a la construcción del corpus anotado (treebank), por lo que el análisis estadístico con las redes complejas se hace posible. Este artículo presenta la teoría y metodología de las redes complejas y construye las redes sintácticas de dependencia a base del corpus anotado (treebank) de las expresiones orales del examen EEE-4 (Examen del Español como Especialidad - Nivel 4). Mediante el análisis de las características generales de las redes, incluyendo el número de nodos, los enlaces, el grado medio, la longitud media de los caminos, la distribución de grados y la centralización, tiene como objetivo descubrir la diferencia y similitud potencial entre las expresiones orales de distintos niveles. Además, con el análisis de conglomerados, esta investigación pretende demostrar la capacidad discriminatoria de las variables de las redes complejas y proporcionar una referencia potencial para el trabajo de calificación.

Formato

application/pdf

Identificador

http://revistas.ucm.es/index.php/CLAC/article/view/53483

10.5209/CLAC.53483

Publicador

Ediciones Complutense

Relação

http://revistas.ucm.es/index.php/CLAC/article/view/53483/49040

/*ref*/Barabási, Albert-László, y Bonabeau, Eric (2003). Scale-free networks. Scientific American, 288(5), 50-59, http://barabasi.com/f/124.pdf.

/*ref*/Chen, Xinying 陈芯莹, y Liu, Haitao 刘海涛 (2011). 汉语句法网络的中心节点研究 [Central nodes of the Chinese syntactic networks]. 科学通报 [Chinese Science Bulletin], 56, 10, 735-740. http://engine.scichina.com/publisher/scp/journal/CSB/56/10/10.1360/972010-2369

/*ref*/Chen, Xinying 陈芯莹, y Liu, Haitao 刘海涛 (2013). 句法复杂网络作为语体分类 的知识源研究 [Using syntactic network characteristics to do text clustering]. 计算机工程与应用 [Computer engineering and applications], 49(8), 32-36.

/*ref*/Ferrer i Cancho R. (2005). The structure of syntactic dependency networks: Insights from recent advances in network theory. En G. Altmann, V. Levickij y V. Prebyinis (coord.), The Problems of Quantitative Linguistics. Chernivtsi, 60-75. Chernivtsi: Ruta.

/*ref*/He, D. 何大韧, Z. Liu 刘宗华, y B. Wang 汪秉宏 (2009). 复杂系统与复杂网络 [Complex sistem and complex network]. 北京 [Beijing]: 高等教育出版社 [Editorial Educación Superior].

/*ref*/Kim, Youn-Hee (2009). An investigation into native and non-native teachers’ judgments of oral English performance: A mixed methods approach. Language Testing, 26(2),187–217.

/*ref*/Liu, Haitao 刘海涛 (2008). The complexity of Chinese dependency syntactic networks. Physica A, 387, 3048-3058.

/*ref*/Liu, Haitao 刘海涛 (2009). 依存句法的理论与实践 [Dependency grammar: from theory to practice]. 北京 [Beijing]: 科学出版社 [Editorial de Ciencia].

/*ref*/Liu, Haitao 刘海涛 y Cong J. (2013). Language clustering with word co-occurrence networks based on parallel texts. Chinese Science Bulletin, 58(10),1139-1144.

/*ref*/Luoma, Sari (2004). Assessing Speaking. Cambridge, Cambridge University Press; Beijing 2010, Foreign Language Teaching and Research Press.

/*ref*/Robinson J. (1970). Dependency structures and transformational rules. Language 46, 259–285.

/*ref*/Schubert K. (1987). Metataxis: contrastive dependency syntax for machine translation. Dordrecht: Foris.

/*ref*/Tesnière, Lucien (1959). Éléments de syntaxe structurale. París: Klincksieck.

/*ref*/Báez, Valerio. (1988). Fundamentos críticos de la gramática de dependencias. Madrid, Síntesis.

/*ref*/Yan, Xun (2014). An examination of rater performance on a local oral English proficiency test: A mixed-methods approach. Language Testing, 31(4), 501-527.

/*ref*/Yu, Man 于漫. (2014). 西班牙语专业四级水平测试总结与分析 [Summary and analysis of EEE-4]. 外语测试与教学 [Language testing and teaching], 10(2), 18-31.

/*ref*/Yu, Man 于漫 (2015). EEE-4 como herramienta de efecto colateral: ¿es beneficioso o dañino? [Actas del VIII Congreso Internacional de la Asociación Asiática de Hispanistas], http://es.shisu.edu.cn/resources/news/content2517.

/*ref*/Zou, Shen. 邹申. (2012). 语言测试 [Language testing]. 上海 [Shanghai]: 上海外语教育出版社 [Editorial Educativa de Lenguas Extranjeras de Shanghai].

Direitos

LICENCE OF USE: The full text articles included on the Scientific Journals of the Complutense website are open access and the property of their authors and/or publishers. Therefore, any reproduction, distribution, public communication and/or total or partial transformation requires their express and written consent. Links to the full text of the articles on the Scientific Journals of the Complutense website should be to the official URL of the Complutense University of Madrid.

LICENCIA DE USO: Los artículos a texto completo incluidos en el Portal de Revistas Científicas Complutenses son de acceso libre y propiedad de sus autores y/o editores. Por tanto, cualquier acto de reproducción, distribución, comunicación pública y/o transformación total o parcial requiere el consentimiento expreso y escrito de aquéllos. Cualquier enlace al texto completo de los artículos del Portal de Revistas Científicas Complutenses debe efectuarse a la URL oficial de la Universidad Complutense de Madrid

Fonte

Círculo de Lingüística Aplicada a la Comunicación; Vol 67 (2016); 212-226

Palavras-Chave #Complex network; EEE-4; oral test; rating #Red compleja; EEE-4; test oral; calificación
Tipo

info:eu-repo/semantics/article

Artículo revisado por pares

info:eu-repo/semantics/publishedVersion