Reconeixement de veu mitjançant xarxes neuronals

La interacció home-màquina per mitjà de la veu cobreix moltes àrees d’investigació. Es destaquen entre altres, el reconeixement de la parla, la síntesis i identificació de discurs, la verificació i identificació de locutor i l’activació per veu (ordres) de sistemes robòtics. Reconèixer la parla és natural i simple per a les persones, però és un treball complex per a les màquines, pel qual existeixen diverses metodologies i tècniques, entre elles les Xarxes Neuronals. L’objectiu d’aquest treball és desenvolupar una eina en Matlab per al reconeixement i identificació de paraules pronunciades per un locutor, entre un conjunt de paraules possibles, i amb una bona fiabilitat dins d’uns marges preestablerts. El sistema és independent del locutor que pronuncia la paraula, és a dir, aquest locutor no haurà intervingut en el procés d’entrenament del sistema. S’ha dissenyat una interfície que permet l’adquisició del senyal de veu i el seu processament mitjançant xarxes neuronals i altres tècniques. Adaptant una part de control al sistema, es podria utilitzar per donar ordres a un robot com l’Alfa6Uvic o qualsevol altre dispositiu.

Reconeixement de gestos de la mà amb el sensor Kinect

El reconeixement dels gestos de la mà (HGR, Hand Gesture Recognition) és actualment un camp important de recerca degut a la varietat de situacions en les quals és necessari comunicar-se mitjançant signes, com pot ser la comunicació entre persones que utilitzen la llengua de signes i les que no. En aquest projecte es presenta un mètode de reconeixement de gestos de la mà a temps real utilitzant el sensor Kinect per Microsoft Xbox, implementat en un entorn Linux (Ubuntu) amb llenguatge de programació Python i utilitzant la llibreria de visió artifical OpenCV per a processar les dades sobre un ordinador portàtil convencional. Gràcies a la capacitat del sensor Kinect de capturar dades de profunditat d’una escena es poden determinar les posicions i trajectòries dels objectes en 3 dimensions, el que implica poder realitzar una anàlisi complerta a temps real d’una imatge o d’una seqüencia d’imatges. El procediment de reconeixement que es planteja es basa en la segmentació de la imatge per poder treballar únicament amb la mà, en la detecció dels contorns, per després obtenir l’envolupant convexa i els defectes convexos, que finalment han de servir per determinar el nombre de dits i concloure en la interpretació del gest; el resultat final és la transcripció del seu significat en una finestra que serveix d’interfície amb l’interlocutor. L’aplicació permet reconèixer els números del 0 al 5, ja que s’analitza únicament una mà, alguns gestos populars i algunes de les lletres de l’alfabet dactilològic de la llengua de signes catalana. El projecte és doncs, la porta d’entrada al camp del reconeixement de gestos i la base d’un futur sistema de reconeixement de la llengua de signes capaç de transcriure tant els signes dinàmics com l’alfabet dactilològic.

Marcia J. Bates: El context i la interacció han de ser elements bàsics en els sistemes de recuperació de la informació

Entrevista a Marcia J. Bates a la University od California at Los Angeles i experta en sistemes de recuperació de la Informació orientats a l'usuari i en representació del contingut i accés per matèries. Es parla de l'evolució de les tecnologies i l'automatització de tasques que requereixen la capacitat de raonament de la persona, del comportament de l'usuari quan cerca per matèries, de la formació en competències en el maneig de la informació, de la necessitat del context en la indexació i la recuperació per matèries, i l'empatia en les relacions entre bibliotecaris i usuaris.

Evolución y tendencias en la interacción persona-ordenador

La autora resume en este artículo los diversos hitos en la historia de la interacción persona-ordenador, desde sus inicios a la etapa actual, en base a tres factores: la creatividad humana, la evolución de a tecnología y el uso de los ordenadores. En la etapa actual (a partir de 1989) el artículo analiza la influencia del entorno www y de la computación ubicua, nuevo paradigma computacional de gran impacto en la interacción persona¿ordenador. Finalmente presenta algunas tendencias que empiezan a configurar la interfaz post¿WIMP

Accessibilitat web : un estudi sobre el Repositori O2 de la UOC

Són objectius d'aquest Treball Final de Carrera, en primer lloc, avaluar l'accessibilitat del programari de codi lliure Dspace que utilitza la UOC per gestionar les seves publicacions digitals. En segon lloc, avaluar l'accessibilitat de cinc planes web del Repositori Institucional O2 de la UOC, a les quals s'aplicaran les directrius WCAG 1.0 i WCAG 2.0, amb l'ajut de cinc eines d'avaluació automàtica.

Experiències amb interacció de cos sencer generades en temps real amb entorns d’aigua virtual

L’objectiu d’aquest projecte ha estat la realització de dues aplicacions independents entre elles la interacció de les quals és a temps real i a cos sencer. En una aplicació l’usuari se li dona la possibilitat de, mitjançant el seu propi cos, transformar gotes que cauen en forma de plujavirtual en diferents flocs de neu. En la segona aplicació l’usuari pot generar onades en una superfície “aquosa”.Les dues aplicacions s’han creat amb la finalitat que puguin ser instal·lades i exposades en el centre de visitants de l’Expo2008 a Saragossa. Aquest fet ha estat fonamental per la tria de la temàtica de les aplicacions.Per assolir aquest objectiu, des del punt de vista del projectista, diferents estudis s’han hagut de portar terme. S’han realitzat estudis per tal de saber el funcionament del sistema de càmeres i del seu calibratge i de com es capta la informació referent a l’usuari. Aquestes parts són fonamentals per tal de poder gestionar bé la interacció i, sense les quals, no seria possible eldesenvolupament de les experiències. Un altre tipus d’estudi és el de la interacció, que és el que condueix l’eix principal del projecte, i el de la generació d’efectes visuals gràfics.

Incorporació del català en agent conversacional animat per computador

Dins del marc del projecte europeu HERMES, al Centre de Visió per Computador de la Universitat Autònoma de Barcelona s'està desenvolupant un agent conversacional animat per ordinador el qual haurà de ser capaç d'interactuar amb l'usuari a través de diferents canals de forma simultània, o, el que és el mateix, parlar, gesticular, expressar emocions... Partint, doncs, d'un software capaç de fer que un model 3D d'un cap humà expressi emocions i parli en anglès, donat un arxiu d'àudio prèviament generat, en el treball que aquí es presenta es duu a terme la recerca d'una eina sintetitzadora de parla a partir de text que permeti fer això mateix en català. En aquest document s'explica el procés seguit per a trobar aquesta eina, la investigació realitzada sobre el funcionament d'ambdues per tal d'entendre-les i poder-hi treballar, així com, finalment, les modificacions realitzades per a fer que aquestes puguin interactuar i generar parla inteligible en català a partir de textos escrits en aquest idioma.

Dance movement patterns recognition

"Es tracta d'un projecte dividit en dues parts independents però complementàries, realitzades per autors diferents. Aquest document conté originàriament altre material i/o programari només consultable a la Biblioteca de Ciència i Tecnologia"

Interfície de control de dades en una fàbrica

Aquest treball tracta de l'estudi i creació de la interfície d'una aplicació que reculli les dades de control generades en un procés productiu real en una petita planta de fabricació amb cinc treballadors.

Trabajo final de carrera : accesibilidad web

Evaluación manual de 10 páginas web siguiendo la pautas WCAG 1.0 y WCAG 2.0.

Evaluación de accesibilidad web en upc.edu

Evaluación de la accesibilidad Web de 10 páginas del sitio www.upc.edu siguiendo las pautas para niveles de conformidad en WCAG 1.0 y WCAG 2.0 de acuerdo a la Metodología Unificada de Evaluación Web (UWEM 1.0).

Accessibilitat web : cas d'anàlisi a partir de les WCAG 1.0 i WCAG 2.0

El document analitza, de forma manual i detallada, l'accessibilitat de 10 pàgines web del portal de la UOC en base a les 14 pautes i 65 punts de validació de les WCAG 1.0 i en base als quatre principis de les WCAG 2.0 que a la vegada s'organitzen en 12 directius i 61 criteris de conformitat.

Desenvolupament d'un videojoc 3D basat en OpenGL

En aquest treball es presenta una aplicació gràfica per a desenvolupar un videojoc de tema lliure, amb premisses senzilles però fermes i amb la utilització d'unes eines el funcionament de les qual s'ha assolit durant la carrera i s?ha aprofundit durant el temps que ha durat la confecció d'aquest projecte.

Gestió de projectes àgils distribuïts

Gestió de projectes àgils quan es disposa d'equips distribuïts fisicament.

Desenvolupament d'un sistema adaptador d'interfícies d'usuari per a diferents discapacitats i dispositius

En aquest treball es proposa implementar una solució genèrica, capaç de satisfer les necessitats de diferents perfils i de funcionar sota diferents dispositius, basada en modificar la interfície d'usuari de les aplicacions per tal de facilitar la interacció de l'usuari amb aquestes.