Developing an information system for deaf

This paper presents the SAILSE Project (Sistema Avanzado de Información en Lengua de Signos Española ? Spanish Sign Language Advanced Information System). This project aims to develop an interactive system for facilitating the communication between a hearing and a deaf person. The first step has been the linguistic study, including a sentence collection, its translation into LSE (Lengua de Signos Española - Spanish Sign Language), and sign generation. After this analysis, the paper describes the interactive system that integrates an avatar to represent the signs, a text to speech converter and several translation technologies. Finally, this paper presents the set up carried out with deaf people and the main conclusions extracted from it.

Diseño, desarrollo y evaluación de sistemas de traducción automática para reducir las barreras de comunicación de las personas sordas

La principal aportación de esta tesis doctoral ha sido la propuesta y evaluación de un sistema de traducción automática que permite la comunicación entre personas oyentes y sordas. Este sistema está formado a su vez por dos sistemas: un traductor de habla en español a Lengua de Signos Española (LSE) escrita y que posteriormente se representa mediante un agente animado; y un generador de habla en español a partir de una secuencia de signos escritos mediante glosas. El primero de ellos consta de un reconocedor de habla, un módulo de traducción entre lenguas y un agente animado que representa los signos en LSE. El segundo sistema está formado por una interfaz gráfica donde se puede especificar una secuencia de signos mediante glosas (palabras en mayúscula que representan los signos), un módulo de traducción entre lenguas y un conversor texto-habla. Para el desarrollo del sistema de traducción, en primer lugar se ha generado un corpus paralelo de 7696 frases en español con sus correspondientes traducciones a LSE. Estas frases pertenecen a cuatro dominios de aplicación distintos: la renovación del Documento Nacional de Identidad, la renovación del permiso de conducir, un servicio de información de autobuses urbanos y la recepción de un hotel. Además, se ha generado una base de datos con más de 1000 signos almacenados en cuatro sistemas distintos de signo-escritura. En segundo lugar, se ha desarrollado un módulo de traducción automática que integra dos técnicas de traducción con una estructura jerárquica: la primera basada en memoria y la segunda estadística. Además, se ha implementado un módulo de pre-procesamiento de las frases en español que, mediante su incorporación al módulo de traducción estadística, permite mejorar significativamente la tasa de traducción. En esta tesis también se ha mejorado la versión de la interfaz de traducción de LSE a habla. Por un lado, se han incorporado nuevas características que mejoran su usabilidad y, por otro, se ha integrado un traductor de lenguaje SMS (Short Message Service – Servicio de Mensajes Cortos) a español, que permite especificar la secuencia a traducir en lenguaje SMS, además de mediante una secuencia de glosas. El sistema de traducción propuesto se ha evaluado con usuarios reales en dos dominios de aplicación: un servicio de información de autobuses de la Empresa Municipal de Transportes de Madrid y la recepción del Hotel Intur Palacio San Martín de Madrid. En la evaluación estuvieron implicadas personas sordas y empleados de los dos servicios. Se extrajeron medidas objetivas (obtenidas por el sistema automáticamente) y subjetivas (mediante cuestionarios a los usuarios). Los resultados fueron muy positivos gracias a la opinión de los usuarios de la evaluación, que validaron el funcionamiento del sistema de traducción y dieron información valiosa para futuras líneas de trabajo. Por otro lado, tras la integración de cada uno de los módulos de los dos sistemas de traducción (habla-LSE y LSE-habla), los resultados de la evaluación y la experiencia adquirida en todo el proceso, una aportación importante de esta tesis doctoral es la propuesta de metodología de desarrollo de sistemas de traducción de habla a lengua de signos en los dos sentidos de la comunicación. En esta metodología se detallan los pasos a seguir para desarrollar el sistema de traducción para un nuevo dominio de aplicación. Además, la metodología describe cómo diseñar cada uno de los módulos del sistema para mejorar su flexibilidad, de manera que resulte más sencillo adaptar el sistema desarrollado a un nuevo dominio de aplicación. Finalmente, en esta tesis se analizan algunas técnicas para seleccionar las frases de un corpus paralelo fuera de dominio para entrenar el modelo de traducción cuando se quieren traducir frases de un nuevo dominio de aplicación; así como técnicas para seleccionar qué frases del nuevo dominio resultan más interesantes que traduzcan los expertos en LSE para entrenar el modelo de traducción. El objetivo es conseguir una buena tasa de traducción con la menor cantidad posible de frases. ABSTRACT The main contribution of this thesis has been the proposal and evaluation of an automatic translation system for improving the communication between hearing and deaf people. This system is made up of two systems: a Spanish into Spanish Sign Language (LSE – Lengua de Signos Española) translator and a Spanish generator from LSE sign sequences. The first one consists of a speech recognizer, a language translation module and an avatar that represents the sign sequence. The second one is made up an interface for specifying the sign sequence, a language translation module and a text-to-speech conversor. For the translation system development, firstly, a parallel corpus has been generated with 7,696 Spanish sentences and their LSE translations. These sentences are related to four different application domains: the renewal of the Identity Document, the renewal of the driver license, a bus information service and a hotel reception. Moreover, a sign database has been generated with more than 1,000 signs described in four different signwriting systems. Secondly, it has been developed an automatic translation module that integrates two translation techniques in a hierarchical structure: the first one is a memory-based technique and the second one is statistical. Furthermore, a pre processing module for the Spanish sentences has been implemented. By incorporating this pre processing module into the statistical translation module, the accuracy of the translation module improves significantly. In this thesis, the LSE into speech translation interface has been improved. On the one hand, new characteristics that improve its usability have been incorporated and, on the other hand, a SMS language into Spanish translator has been integrated, that lets specifying in SMS language the sequence to translate, besides by specifying a sign sequence. The proposed translation system has been evaluated in two application domains: a bus information service of the Empresa Municipal de Transportes of Madrid and the Hotel Intur Palacio San Martín reception. This evaluation has involved both deaf people and services employees. Objective measurements (given automatically by the system) and subjective measurements (given by user questionnaires) were extracted during the evaluation. Results have been very positive, thanks to the user opinions during the evaluation that validated the system performance and gave important information for future work. Finally, after the integration of each module of the two translation systems (speech- LSE and LSE-speech), obtaining the evaluation results and considering the experience throughout the process, a methodology for developing speech into sign language (and vice versa) into a new domain has been proposed in this thesis. This methodology includes the steps to follow for developing the translation system in a new application domain. Moreover, this methodology proposes the way to improve the flexibility of each system module, so that the adaptation of the system to a new application domain can be easier. On the other hand, some techniques are analyzed for selecting the out-of-domain parallel corpus sentences in order to train the translation module in a new domain; as well as techniques for selecting which in-domain sentences are more interesting for translating them (by LSE experts) in order to train the translation model.

Methodology for developing an advanced communications system for the Deaf in a new domain

A methodology for developing an advanced communications system for the Deaf in a new domain is presented in this paper. This methodology is a user-centred design approach consisting of four main steps: requirement analysis, parallel corpus generation, technology adaptation to the new domain, and finally, system evaluation. During the requirement analysis, both the user and technical requirements are evaluated and defined. For generating the parallel corpus, it is necessary to collect Spanish sentences in the new domain and translate them into LSE (Lengua de Signos Española: Spanish Sign Language). LSE is represented by glosses and using video recordings. This corpus is used for training the two main modules of the advanced communications system to the new domain: the spoken Spanish into the LSE translation module and the Spanish generation from the LSE module. The main aspects to be generated are the vocabularies for both languages (Spanish words and signs), and the knowledge for translating in both directions. Finally, the field evaluation is carried out with deaf people using the advanced communications system to interact with hearing people in several scenarios. In this evaluation, the paper proposes several objective and subjective measurements for evaluating the performance. In this paper, the new considered domain is about dialogues in a hotel reception. Using this methodology, the system was developed in several months, obtaining very good performance: good translation rates (10% Sign Error Rate) with small processing times, allowing face-to-face dialogues.

PERCEPÇÃO DE AUTO-ESTIMA E QUALIDADE DE VIDA DO JOVEM-ADULTO SURDO UNIVERSITÁRIO

O presente trabalho tem como tema central a opinião do surdo universitário sobre sua auto- estima e qualidade vida. Os objetivos foram conhecer o joven-adulto surdo universitário, segundo sua opinião, buscando especificamente identificar os fatores que contribuíram para o seu desenvolvimento psicológico e sua auto-estima; e identificar as características da qualidade de vida, considerando os aspectos físico, psicológico, relações sociais e meio ambiente. Participaram desta pesquisa 3 jovens-adultos surdos, universitários. O método utilizado foi o descritivo qualitativo, usando-se como fonte de coleta de dados a entrevista livre e o WHOQOL-bref. O método qualitativo na área da saúde visa investigar o significado que os fenômenos sentimentos, idéias, vivências, manifestações, dentre outros, tem para as pessoas e que dão molde às suas vidas incluindo os cuidados com a saúde. Percebemos que ao atingirem a fase adulta, os sujeitos pesquisados conseguem tomar decisões e escolher seus caminhos com maior liberdade em função das experiências e condições que lhes foram apresentadas. Verificamos que as situações vividas no ambiente escolar e o aprendizado da língua de sinais contribuíram para sua constituição como sujeito não limitado à condição da surdez. Foi possível identificar que possuem expectativas profissionais futuras e expressaram suas dificuldades, desejos, frustrações diante do mercado de trabalho, relações sociais e familiares como qualquer outro individuo, encontrando recursos internos para o enfrentamento das circunstâncias cotidianas. Os resultados da pesquisa também permitiram observar que os surdos reconhecem o grau de satisfação que têm com a vida, seu estado de saúde e cuidados com seu bem-estar físico, psicológico e social. Concluímos que ao recontar sua história de vida os surdos têm a possibilidade de se reconhecer como sujeitos e a oportunidade de dar continuidade às próprias vivências que contribuíram para seu bem-estar

PERCEPÇÃO DE AUTO-ESTIMA E QUALIDADE DE VIDA DO JOVEM-ADULTO SURDO UNIVERSITÁRIO

O presente trabalho tem como tema central a opinião do surdo universitário sobre sua auto- estima e qualidade vida. Os objetivos foram conhecer o joven-adulto surdo universitário, segundo sua opinião, buscando especificamente identificar os fatores que contribuíram para o seu desenvolvimento psicológico e sua auto-estima; e identificar as características da qualidade de vida, considerando os aspectos físico, psicológico, relações sociais e meio ambiente. Participaram desta pesquisa 3 jovens-adultos surdos, universitários. O método utilizado foi o descritivo qualitativo, usando-se como fonte de coleta de dados a entrevista livre e o WHOQOL-bref. O método qualitativo na área da saúde visa investigar o significado que os fenômenos sentimentos, idéias, vivências, manifestações, dentre outros, tem para as pessoas e que dão molde às suas vidas incluindo os cuidados com a saúde. Percebemos que ao atingirem a fase adulta, os sujeitos pesquisados conseguem tomar decisões e escolher seus caminhos com maior liberdade em função das experiências e condições que lhes foram apresentadas. Verificamos que as situações vividas no ambiente escolar e o aprendizado da língua de sinais contribuíram para sua constituição como sujeito não limitado à condição da surdez. Foi possível identificar que possuem expectativas profissionais futuras e expressaram suas dificuldades, desejos, frustrações diante do mercado de trabalho, relações sociais e familiares como qualquer outro individuo, encontrando recursos internos para o enfrentamento das circunstâncias cotidianas. Os resultados da pesquisa também permitiram observar que os surdos reconhecem o grau de satisfação que têm com a vida, seu estado de saúde e cuidados com seu bem-estar físico, psicológico e social. Concluímos que ao recontar sua história de vida os surdos têm a possibilidade de se reconhecer como sujeitos e a oportunidade de dar continuidade às próprias vivências que contribuíram para seu bem-estar

Looking inside for good practice in Deaf bilingual education: a participatory SWOT analysis

Presentation to the Disability Studies Conference, Lancaster University, September 7-9, 2010.

Educación bilingüe del alumnado sordo: pilares para un cambio estratégico

Pese a los progresos logrados en la protección de los derechos fundamentales de salud y educación de las personas sordas usuarias de las lenguas de signos, a menudo se sigue negando a niños sordos su derecho a aprender y usar las lenguas de signos en su educación y en entornos físicos y psicosociales accesibles de conformidad con la Convención de los Derechos de las Personas con Discapacidad (CDPD) y con las recientes leyes 27/2007 y 17/2007. El objetivo principal de este estudio fue obtener información sobre los factores estratégicos que favorecen una escuela saludable e inclusiva, mediante programas de educación bilingüe sostenibles y de calidad para escolares sordos en España. La metodología utilizada consistió en un estudio descriptivo con componentes de investigación-acción participativa y un enfoque de análisis estratégico. Como resultados, cabe destacar que las principales macrotendencias que, en el ámbito internacional, han promovido el cambio hacia prácticas bilingües son dos: en primer lugar, los cambios sociales y políticos que tienden a una creciente aceptación de la diversidad y los temas relacionados con las personas sordas; y en segundo lugar, una tendencia a un activismo, una autoconciencia y un apoderamiento crecientes por parte de las personas sordas. Como contrapartida, las que lo han obstaculizado son, por un lado, la visión de la sordera como una condición médica, que puede solucionarse mediante la tecnología; y por otro lado, el fonocentrismo, unido a una cierta resistencia social a lo desconocido. Aunque en España algunas de las escuelas que han iniciado el cambio cumplen las recomendaciones de la CDPD, la mayoría están todavía en una fase preliminar de formulación o puesta en práctica de este nuevo modelo y distan mucho de encontrarse distribuidas de manera igualitaria en las diferentes comunidades autónomas. Como conclusión podemos decir que conseguir una educación más saludable e inclusiva para los escolares sordos implica poner en marcha una estrategia de actuación planificada en la que participen activamente todos los sectores y organismos relevantes implicados y, en particular, las comunidades sordas a través de las organizaciones que las representan. Sin un cambio radical de perspectiva, la salud y la educación no serán accesibles a todos y las desigualdades sociales se verán acentuadas.

Lettre sur les sourds et muets : á l'usage de ceux qui entendent [et] qui parlent, avec des additions ..

Mode of access: Internet.

Institutions des sourds et muets, ou Recueil des exercices foutenus par les sourds [et] muets pendant les années 1771, 1772, 1773 [et] 1774 : avec las lettres qui on accompagné les programmes de chacun de ces exercices.

Mode of access: Internet.

The Directory of interpreters for the deaf.

Title from cover.

Theory-of-mind development in oral deaf children with cochlear implants or conventional hearing aids

Background: In the context of the established finding that theory-of-mind (ToM) growth is seriously delayed in late-signing deaf children, and some evidence of equivalent delays in those learning speech with conventional hearing aids, this study's novel contribution was to explore ToM development in deaf children with cochlear implants. Implants can substantially boost auditory acuity and rates of language growth. Despite the implant, there are often problems socialising with hearing peers and some language difficulties, lending special theoretical interest to the present comparative design. Methods: A total of 52 children aged 4 to 12 years took a battery of false belief tests of ToM. There were 26 oral deaf children, half with implants and half with hearing aids, evenly divided between oral-only versus sign-plus-oral schools. Comparison groups of age-matched high-functioning children with autism and younger hearing children were also included. Results: No significant ToM differences emerged between deaf children with implants and those with hearing aids, nor between those in oral-only versus sign-plus-oral schools. Nor did the deaf children perform any better on the ToM tasks than their age peers with autism. Hearing preschoolers scored significantly higher than all other groups. For the deaf and the autistic children, as well as the preschoolers, rate of language development and verbal maturity significantly predicted variability in ToM, over and above chronological age. Conclusions: The finding that deaf children with cochlear implants are as delayed in ToM development as children with autism and their deaf peers with hearing aids or late sign language highlights the likely significance of peer interaction and early fluent communication with peers and family, whether in sign or in speech, in order to optimally facilitate the growth of social cognition and language.

CONQUISTAS EDUCACIONAIS DOS SURDOS NO CONTEXTO BRASILEIRO A COMPREENSÃO DE AUTORES SURDOS E NÃO SURDOS SOBRE ESTE EVENTO

Esta pesquisa se propõe a investigar qual a compreensão que autores Surdos e não surdos tem diante das conquistas dos Surdos, apontadas no contexto educacional, de forma a examinar os diferentes elementos e aspectos envolvidos indicando quais os principais atores e autores deste cenário. A Pesquisa Bibliográfica foi o procedimento metodológico adotado, com análise dos conteúdos coletados em livros de autoria de Surdos ou não surdos. O parâmetro cronológico para esta pesquisa está localizado nos últimos quinze anos, período em que as novas determinações da Lei de Diretrizes e Bases da Educação Nacional LDB / 96 tem desacomodado questões relacionadas à educação de pessoas com deficiências. Aparentemente por conta de determinações e regulamentações do Decreto nº 5.626 de DEZEMBRO / 2005, as discussões a respeito dos Surdos e da Língua de Sinais tem ocupado um espaço diferenciado na sociedade, em especial nas escolas regulares e na formação de professores. Num primeiro momento, parece tratar-se de reflexos das discussões postas pelas Políticas de Educação Inclusiva, no entanto, a questão relacionada aos Surdos tem para muitos se destacado quanto à dimensão de suas conquistas e, por vezes parece se referir a uma invenção da atualidade: o Surdo e a Língua de Sinais.

NASCIDOS NO SILÊNCIO: AS RELAÇÕES ENTRE FILHOS OUVINTES E PAIS SURDOS NA EDUCAÇÃO

Este trabalho busca apresentar as vivências de três pessoas ouvintes, além do próprio autor, filhas de pais surdos, discutindo as relações familiares entre pais e filhos, mostrando as diferenças em relação às famílias que não possuem pessoas surdas no seu âmago, desmistificando preconceitos e pré-conceitos. Devido as barreiras comunicacionais e pelo preconceito, muitos surdos acabavam sendo privados do direto de serem pais. Nos relatos apresentados nesta dissertação, houve momentos em que isso quase aconteceu na vida dos sujeitos entrevistados para esta pesquisa. Porém, com força e consciência dos direitos adquiridos, esses pais surdos não permitiram que tal coisa acontecesse. O texto inicia com a trajetória formativa e profissional do autor para, em seguida, trazer os autores que abordam temas como surdez (Wrigley, 1996; Lacerda, 1998; Perlin, 1998; Moura, 2000; Sá, 2002; Quadros, 2004; Sacks, 2007), antropologia (Hall, 1992; Gomes, 2008), relações familiares (Lacan, 1987) e autobiografia (Ferraroti, 1991; Pineau, 2006; demartini, 2008). A língua de sinais e a história educacional dos surdos também são discutidas neste trabalho. Por último, são apresentados os relatos de história de vida feitos na pesquisa de campo de forma literária, com as análises dos depoimentos colhidos pelos sujeitos entrevistados (filhos ouvintes e pais surdos) os quais evidenciam que ser filho de pais surdos pode ser tão normal quanto ser filho de pais ouvintes.

PERCEPÇÃO DE AUTO-ESTIMA E QUALIDADE DE VIDA DO JOVEM-ADULTO SURDO UNIVERSITÁRIO

O presente trabalho tem como tema central a opinião do surdo universitário sobre sua auto- estima e qualidade vida. Os objetivos foram conhecer o joven-adulto surdo universitário, segundo sua opinião, buscando especificamente identificar os fatores que contribuíram para o seu desenvolvimento psicológico e sua auto-estima; e identificar as características da qualidade de vida, considerando os aspectos físico, psicológico, relações sociais e meio ambiente. Participaram desta pesquisa 3 jovens-adultos surdos, universitários. O método utilizado foi o descritivo qualitativo, usando-se como fonte de coleta de dados a entrevista livre e o WHOQOL-bref. O método qualitativo na área da saúde visa investigar o significado que os fenômenos sentimentos, idéias, vivências, manifestações, dentre outros, tem para as pessoas e que dão molde às suas vidas incluindo os cuidados com a saúde. Percebemos que ao atingirem a fase adulta, os sujeitos pesquisados conseguem tomar decisões e escolher seus caminhos com maior liberdade em função das experiências e condições que lhes foram apresentadas. Verificamos que as situações vividas no ambiente escolar e o aprendizado da língua de sinais contribuíram para sua constituição como sujeito não limitado à condição da surdez. Foi possível identificar que possuem expectativas profissionais futuras e expressaram suas dificuldades, desejos, frustrações diante do mercado de trabalho, relações sociais e familiares como qualquer outro individuo, encontrando recursos internos para o enfrentamento das circunstâncias cotidianas. Os resultados da pesquisa também permitiram observar que os surdos reconhecem o grau de satisfação que têm com a vida, seu estado de saúde e cuidados com seu bem-estar físico, psicológico e social. Concluímos que ao recontar sua história de vida os surdos têm a possibilidade de se reconhecer como sujeitos e a oportunidade de dar continuidade às próprias vivências que contribuíram para seu bem-estar

A Comunicação Não-Verbal: especial relevância à função espaço-território da (comunicação) proxémica"

Aristotle said "Man is a social animal," that does not know how to live isolated and need interaction with their peers. Over several millenniums the man was found many ways to communicate – from smoke signals to sign language or even writing – and this need not slowed down over the years, instead of this, became increasingly glaring. Communication has become increasingly imperative in our lives. But the communication has long ceased to be seen merely as a transmission of words. Nowadays, in the today's society, the man relates to others through two levels: verbal and non-verbal. These two dimensions of communication arise often together, completing or in opposition to, even if the human being does not realize it. Proxemics, as one of the areas covered in Non-Verbal Communication is responsible for studying the distances and proximities that are between people and spaces and how each of us do to protect and defend their personal territory. Will be the Gender, Age, Profession or the Barriers to Communication able to significantly influence the proxemic? The present study will answer to these questions.