Extensão do SDK do Kinect: criação de uma biblioteca de gestos

As interfaces naturais têm ganho atenção crescente por parte da comunidade científica. Esta interação, nomeadamente baseada em gestos e voz, tem sido progressivamente mais usada para estabelecer a comunicação entre o homem e a máquina de forma natural. Em paralelo, têm surgido no marcado alguns novos dispositivos com o objetivo de suportar estas formas naturais de interface, entre eles, sensores de movimento. Esta dissertação tem como objetivo a proposta de algoritmos projetados para auxiliar o programador no reconhecimento de gestos, especificamente em dispositivos conhecidos como sensores de movimentos. Atualmente o programador tem o trabalho de desenvolver todo o código para adicionar reconhecimento de gestos à sua aplicação. A solução apresentada neste documento propõe um novo conjunto de métodos que visam a criação de uma biblioteca de gestos e a consequente capacidade de reconhecimento de gestos anteriormente armazenados. A validação deste trabalho consistiu na extensão do Software Development Kit (SDK) do dispositivo Kinect, de forma a adicionar ferramentas complementares, que permitam simplificar a definição e reconhecimento de gestos. A primeira parte consiste na captação e armazenamento de gestos, através do mapeamento de pontos, modelando os gestos e armazenando tal modelo. Esta primeira fase permite no desenvolvimento de um sistema a criação de uma biblioteca de gestos pré-definidos, como por exemplo os gestos da Língua Gestual Portuguesa. Numa segunda fase, a extensão do SDK auxilia também as tarefas de reconhecimento de gestos em tempo real, isto é, deteção do gesto que o utilizador de uma aplicação esteja a fazer e procura desse gesto na biblioteca.

Gestos nos cantos da Lagoa Azul : crianças brincantes produtoras de cultura

Universidade Estadual de Campinas . Faculdade de Educação Física

Comparação entre os questionários IT-MAIS e MUSS com vídeo-gravação para avaliação de crianças candidatas ao implante coclear

Existe uma grande dificuldade para determinar precocemente crianças que se beneficiariam ou não com o implante coclear, até porque devido à pouca idade são muito sutis as respostas apresentadas. OBJETIVO: Comparar os resultados obtidos através da vídeo-gravação de situações de interação de crianças candidatas ao implante coclear com os resultados obtidos através de protocolos de avaliação. MÉTODO: Fizeram parte da amostra 7 crianças com idade média de 39,7 meses, portadores de perda auditiva neurossensorial profunda. Foram aplicados os questionários IT-MAIS e MUSS aos pais e os resultados foram comparados com a observação da vídeo-gravação destas crianças. RESULTADOS: Foi possível observar que os dados são compatíveis no que se refere às etapas auditivas. No entanto, no que se refere ao questionário MUSS, os dados obtidos na observação lúdica são bastante diferentes. O questionário leva em consideração apenas a uso da linguagem oral e, portanto, a maioria das crianças apresentou um escore muito baixo. CONCLUSÃO: A observação lúdica permitiu traçar um perfil mais amplo do comportamento lingüístico e de aspectos relativos à linguagem apresentando diferenças do questionário.

Aplicação de gravação e edição de áudio multi-faixa colaborativa

Os programas de gravação e edição de áudio em ambientes multi-faixa são populares entre os músicos, para desenvolverem o seu trabalho. Estes programas apresentam funcionalidades de gravação e edição, mas não promovem o trabalho colaborativo entre músicos. De forma a colaborar, os vários elementos de uma banda musical têm de se reunir no mesmo local físico. Com este trabalho pretende-se criar uma solução para a colaboração no contexto da gravação e edição de áudio. Tem-se como objectivo o desenvolvimento de uma aplicação distribuída que facilite a gravação e edição de áudio, estando os elementos de cada banda musical em localizações físicas distintas. A aplicação desenvolvida tem funcionalidades de manipulação de áudio, bem como mecanismos para a sincronização do trabalho entre os vários elementos da banda. A manipulação de áudio consiste em reprodução, gravação, codificação e edição de áudio. O áudio é manipulado no formato Microsoft WAV, resultante da digitalização do áudio em Pulse Code Modulation (PCM) e posteriormente codificado em FLAC (Free Lossless Audio Codec) ou MP3 (Mpeg-1 Layer 3) de forma a minimizar a dimensão do ficheiro, diminuindo assim o espaço que ocupa em disco e a largura de banda necessária à sua transmissão pela internet. A edição consiste na aplicação de operações como amplificação, ecos, entre outros. Os elementos da banda instalam no seu computador a aplicação cliente, com interface gráfica onde desenvolvem o seu trabalho. Esta aplicação cliente mantém a lógica de sincronização do trabalho colaborativo, inserindo-se como um dos peers da arquitectura peer-to-peer híbrida da aplicação distribuída. Estes peers comunicam entre si, enviando informação acerca das operações aplicadas e áudio gravado pelos membros da banda.

A utilização da plataforma Educast@fccn, como ferramenta de gravação de aulas no ambiente de e-learning português

Dissertação apresentada à Escola Superior de Comunicação Social como parte dos requisitos para obtenção de grau de mestre em Audiovisual e Multimédia.

Interfaces baseadas em gestos e movimento

Dissertação de Mestrado em Engenharia Informática

O Peso da gravidade: corpos e gestos na poesia galego-portuguesa

This article studies how galician-portuguese medieval poetry deals with the human body and the human gestures, taking in account the three major poetical genres, the love song, the "amiga" song (feminine voices) and the satyrical song.

Gestos, memórias e formas materiais legadas pelo barro: a produção olárica no Ribatejo da colecção de olaria tradicional do Museu Nacional de Etnologia

Dissertação apresentada para cumprimento dos requisitos necessários à obtenção do grau de Mestre em Museologia

Rostos, gestos e palavras: produção e consumo de doces conventuais em Beja

Trabalho de Projecto apresentado para cumprimento dos requisitos necessários à obtenção do grau de Mestre em Antropologia – Culturas Visuais

Efeito de memória na gravação de informação em PDLCs

Neste trabalho, para a preparação de filmes de PDLC, utilizou-se o cristal líquido E7 comercializado pela Merck, dois oligómeros e um monómero, comercializados pela Sigma-Aldrich (PPGA, PPGMA e DTMP4A) e um monómero sintetizado (PE4MA). Os PDLCs foram obtidos através do método de separação de fases induzida por polimerização utilizando o AIBN como iniciador térmico de polimerização. Foram estudados dois tipos de copolimerização utilizando diferentes proporções em peso de DTMP4A com PPGA e PE4MA com PPGMA. Para caracterizar os PDLCs, utilizaram-se várias técnicas: estudos eletro-óticos (EO) de modo a determinar a resposta de transmitância com a aplicação do campo elétrico, Microscopia de Luz Polarizada (POM) que permitiu observar a distribuição do cristal líquido na rede polimérica antes e depois da aplicação de um campo elétrico, Microscopia Eletrónica de Varrimento (SEM) com o objetivo de estudar a morfologia da rede polimérica e Calorimetria Diferencial de Varrimento (DSC) para a caraterização térmica dos monómeros/oligómeros e dos polímeros. Para testar o aquecimento por efeito de Joule através de uma fonte elétrica, produziram-se células em maior escala. Para tal, foram utilizados dois vidros condutores com uma camada de alinhamento de poli-imida. Estes foram sobrepostos com um espaçamento de 23 μm. As células foram preenchidas com uma amostra que obteve 100% de efeito de memória permanente nas células comerciais (30% (25%PE4MA + 75%PPGMA) /70%E7).

Desenvolvimento de uma interface de visualização de conectividade cerebral usando realidade virtual e controlo por gestos

A presente dissertação foi desenvolvida em colaboração com o Instituto de Biofísica e Engenharia Biomédica(IBEB/FCUL)

Máquina-ferramenta CNC para gravação: desenvolvimento de protótipo de baixo-custo

Dissertação de mestrado em Engenharia Mecatrónica

La formació dels docents de llengües per a l'ajustament dels gestos professionals als contextos plurilingües

L’escola catalana té plantejats un seguit de reptes pel que fa a l’educació lingüística de tots els infants, siguin nascuts a Catalunya, siguin vinguts d’altres regions, és a dir, la tasca d’augmentar i millorar tant els seus repertoris lingüístics com els usos socials de les llengües que els componen, molt especialment el català, la llengua de l’escola i del país. Calen canvis substancials en els plantejaments didàctics per ensenyar- aprendre les llengües de l’escola. Els docents tenen, en aquest sentit, un paper crucial. Han de disposar de nous repertoris didàctics adequats als nous contextos i, per introduir progressivament innovacions més profundes, han de poder construir representacions renovades de la llengua i la comunicació, del plurilingüisme i de l’esdevenir plurilingüe, de l’ensenyament a grups d’aprenents tan diversos. Les experiències viscudes com aprenents i, més tard, com a professors, les històries de vida lingüística i educativa, tenen sovint més pes en les decisons i actuacions dels docents que la formació que han rebut o reben. En alguns aspectes les seves pràctiques són resistents al canvi i poc poroses front a les accions de formació clàssiques, basades en models transmissors, gens favorables a la desestabilització de les velles creences. El projecte presentat pel grup PLURAL s'ha centrat en l'estudi dels processos de formació de professors de llengües de diferents nivells del sistema educatiu, per tal de trobar vies de canvi i innovació del seu pensament i de les seves actuacions a fi de ajustar els seus gestos professionals als nous contextos plurilingües escolars a Catalunya.

Gestos e posturas do enfermeiro durante a orientação a familiares de paciente s internados em Unidade de Terapia Intensiva (UTI)

Trata-se de um estudo como caracterização dos gestos e posturas utilizados pelo enfermeiro durante a orientação sistematizada de familiares dos pacientes internados em UTI. Os dados foram coletados através de filmagem das interações entre a enfermeira e o familiar. Na análise foram identificadas as diversas categorias dos gestos propostos por Ekman e Friesen. Entre os resultados destacou-se com maior frequência a presença dos gestos ilustrativos, o que foi positivo, pois eles contribuiram para enfatizar a fala da enfermeira e facilitar a compreensão do familiar.

Reconeixement de gestos de la mà amb el sensor Kinect

El reconeixement dels gestos de la mà (HGR, Hand Gesture Recognition) és actualment un camp important de recerca degut a la varietat de situacions en les quals és necessari comunicar-se mitjançant signes, com pot ser la comunicació entre persones que utilitzen la llengua de signes i les que no. En aquest projecte es presenta un mètode de reconeixement de gestos de la mà a temps real utilitzant el sensor Kinect per Microsoft Xbox, implementat en un entorn Linux (Ubuntu) amb llenguatge de programació Python i utilitzant la llibreria de visió artifical OpenCV per a processar les dades sobre un ordinador portàtil convencional. Gràcies a la capacitat del sensor Kinect de capturar dades de profunditat d’una escena es poden determinar les posicions i trajectòries dels objectes en 3 dimensions, el que implica poder realitzar una anàlisi complerta a temps real d’una imatge o d’una seqüencia d’imatges. El procediment de reconeixement que es planteja es basa en la segmentació de la imatge per poder treballar únicament amb la mà, en la detecció dels contorns, per després obtenir l’envolupant convexa i els defectes convexos, que finalment han de servir per determinar el nombre de dits i concloure en la interpretació del gest; el resultat final és la transcripció del seu significat en una finestra que serveix d’interfície amb l’interlocutor. L’aplicació permet reconèixer els números del 0 al 5, ja que s’analitza únicament una mà, alguns gestos populars i algunes de les lletres de l’alfabet dactilològic de la llengua de signes catalana. El projecte és doncs, la porta d’entrada al camp del reconeixement de gestos i la base d’un futur sistema de reconeixement de la llengua de signes capaç de transcriure tant els signes dinàmics com l’alfabet dactilològic.