Human Computer Interaction using gestures for mobile devices and serious games: A review

The Human-Computer Interaction (HCI) with interfaces is an active challenge field in the industry over the past decades and has opened the way to communicate with the means of verbal, hand and body gestures using the latest technologies for a variety of different applications in areas such as video games, training and simulation. However, accurate recognition of gestures is still a challenge. In this paper, we review the basic principles and current methodologies used for collecting the raw gesture data from the user for recognize actions the users perform and the technologies currently used for gesture-HCI in games enterprise. In addition, we present a set of projects from various applications in games industry that are using gestural interaction.

Engaged Disengagement: Reframing as Feminist Critique in Vanessa Place’s Tragodía

This essay positions Vanessa Place’s Tragodía (2011) as an instance of reframing as contemporary feminist cultural critique. An enquiry into allegory, hermeneutics, and the performative use of indifference in Place’s conceptual writing generates insights into new narrative conditions produced by Place’s work. Tragodía does not represent trauma but rather generates trauma through a poetic practice that has a bipartite structure: conceptual writing (allegory) and Place’s performances of the narratives. Place’s performance is read in this analysis as an ancillary act of reframing that raises the question of what might be at stake in the performative use of indifference. Understood as a strategy of failure, Place’s performance parallels the lack of mediation in the conceptual act of reframing. Positioned counter to the linguistic deformation of the subjects' speech acts and the erasure of affect that occurs in the legal narratives through the act of interpretation, the refusal to interpret implicit in the act of reframing in Tragodía is an ethical gesture, a paratextual pathway to metamorphosis. In its refusal to interpret, Tragodía creates a site of contextual resistance to the oppression of the subjects’ organic narratives by the institutional language of the law, and offers a new textual field of meaning-making.

Influência de um programa de exercícios específicos em estudantes de violino

Introdução: A elevada prevalência de problemas musculosqueléticos relacionados com a performance musical (PMRPM) em estudantes universitários de música, sobretudo violinistas, justifica uma abordagem preventiva junto destes, nomeadamente, através do exercício. Este deve ser específico e baseado nos padrões de movimento durante a performance musical do violinista. Objetivos: verificar a influência de um programa de exercícios específicos (PEE) nos sintomas relacionados com a prática musical, na incapacidade funcional e na autoperceção da performance física e musical, em estudantes universitários de violino. Métodos: estudo quase-experimental baseado num estudo piloto com 24 estudantes para pesquisa da sintomatologia, e 4 para análise cinemática e cinética do gesto técnico. No estudo principal participaram 22 violinistas divididos equitativamente, e por disponibilidade, entre grupo experimental (GE) e grupo de controlo (GC). O GE realizou o PEE bissemanalmente, durante 8 semanas. No momento inicial e após 8 semanas, os participantes preencheram: Questionário de Performance (incluiu Escala Visual Analógica), Disabilities of the Arm, Shoulder and Hand, Oswestry Disability Index versão 2.0, Pain Catastrophizing Scale e Escala de Borg Modificada. Resultados: do estudo piloto constatou-se que os sintomas mais frequentes, dor e fadiga, localizavam-se na cintura escapular, ombros e coluna lombar; os ombros aparentavam maior risco de PMRPM; era necessário aumentar a endurance dos mobilizadores dos membros superiores (principalmente deltóide) e relaxar os estabilizadores da coluna cervical (sobretudo trapézio superior). No final do PEE, o GE apresentou significativamente melhores pontuações do que o GC na percentagem de violinistas com “dor na coluna lombar esquerda” (p=0,007), frequência da dor (U=8,5; W=29,5; p=0,016), número de locais com sintomas (U=18; W=84; p=0,003) e amplificação (U=26; W=92; p=0,021). Conclusão: Um PEE pode produzir efeitos positivos na diminuição dos sintomas relacionados com a prática musical e incapacidade funcional, e na melhoria de alguns parâmetros da performance física autoreportada, em estudantes universitários de violino.

Reconhecimento de língua gestual

Trabalho Final de Mestrado para obtenção do grau de Mestre em Engenharia Informática e Computadores

Sistema de seguimento dos movimentos oculares para interface adaptada pessoa-máquina

Trabalho Final de Mestrado para obtenção do grau de Mestre em Engenharia de redes de Comunicação e Multimédia

A atividade dos estabilizadores da omoplata e movimento compensatório do tronco no gesto de alcance em indivíduos pós AVE

Introdução: Lesões como o AVE interferem com a capacidade de recrutar níveis adequados de atividade muscular, podendo levar ao aparecimento de movimentos compensatórios como a excessiva translação anterior do tronco, associada ao gesto de alcance. Objetivos: Descrever a relação entre a atividade dos estabilizadores da omoplata e o movimento compensatório do tronco no gesto de alcance, em 4 indivíduos pós AVE. Pretendeu-se também analisar o papel dos estabilizadores da omoplata na função do membro superior. Métodos: Quatro indivíduos com diagnóstico de AVE, que apresentavam alterações no nível de actividade dos estabilizadores da omoplata contralesional, foram sujeitos a uma avaliação realizada em três momentos, antes (M0), durante (M1) e após (M2) e a um período de intervenção, segundo os princípios do Conceito de Bobath. Recorreu-se à electromiografia de superfície para avaliar a atividade e o timming dos músculos grande dorsal, trapézio superior e trapézio inferior do hemicorpo contralesional e ao software de Avaliação Postural (SAPO) para analisar o deslocamento do tronco no sentido anterior, associados à realização do gesto de alcance. Foram aplicadas as escalas RPS e MESUPES para avaliar as componentes de movimento do gesto de alcance e a função do membro superior, respetivamente. Recorreu-se ao registo fotográfico para análise dos componentes de movimento na posição de sentado e em pé.Resultados: Os dados eletromiográficos registam atividade dos estabilizadores da omoplata unicamente num indivíduo em M2. A análise do deslocamento anterior do tronco revela melhorias em M1 em todos os indivíduos, sendo que em M2 essa evolução positiva não foi observada em três dos participantes. Entre M0 e M2, na escala RPS registam-se melhorias de 7 a 9 pontos no alvo próximo e de 5 a 10 pontos no alvo distante. Na escala MESUPES verificam-se melhorias entre 5 a 18 pontos na sub-escala braço e entre 5 a 8 pontos na sub-escala mão, em M2. A avaliação do registo fotográfico revela modificações nos componentes de movimento dos quatro indivíduos, nomeadamente na integração dos MI na base de suporte, na atividade do tronco inferior e superior e no alinhamento do MS contralesional. Conclusão: A melhoria do nível da atividade dos estabilizadores dinâmicos da omoplata sugere ter influência na diminuição do movimento compensatório do tronco no gesto de alcance e parece ter um papel na melhoria da eficácia distal do MS do mesmo lado.

Benefits & drawbacks of different means of interaction for placing objects above a video footage

Public Display Systems (PDS) increasingly have a greater presence in our cities. These systems provide information and advertising specifically tailored to audiences in spaces such as airports, train stations, and shopping centers. A large number of public displays are also being deployed for entertainment reasons. Sometimes designing and prototyping PDS come to be a laborious, complex and a costly task. This dissertation focuses on the design and evaluation of PDS at early development phases with the aim of facilitating low-effort, rapid design and the evaluation of interactive PDS. This study focuses on the IPED Toolkit. This tool proposes the design, prototype, and evaluation of public display systems, replicating real-world scenes in the lab. This research aims at identifying benefits and drawbacks on the use of different means to place overlays/virtual displays above a panoramic video footage, recorded at real-world locations. The means of interaction studied in this work are on the one hand the keyboard and mouse, and on the other hand the tablet with two different techniques of use. To carry out this study, an android application has been developed whose function is to allow users to interact with the IPED Toolkit using the tablet. Additionally, the toolkit has been modified and adapted to tablets by using different web technologies. Finally the users study makes a comparison about the different means of interaction.

Caregiver's interpret infants' early gestures based on shared knowledge about referents

Gestures are the first forms of conventional communication that young children develop in order to intentionally convey a specific message. However, at first, infants rarely communicate successfully with their gestures, prompting caregivers to interpret them. Although the role of caregivers in early communication development has been examined, little is known about how caregivers attribute a specific communicative function to infants' gestures. In this study, we argue that caregivers rely on the knowledge about the referent that is shared with infants in order to interpret what communicative function infants wish to convey with their gestures. We videotaped interactions from six caregiver-infant dyads playing with toys when infants were 8, 10, 12, 14, and 16 months old. We coded infants' gesture production and we determined whether caregivers interpreted those gestures as conveying a clear communicative function or not; we also coded whether infants used objects according to their conventions of use as a measure of shared knowledge about the referent. Results revealed an association between infants' increasing knowledge of object use and maternal interpretations of infants' gestures as conveying a clear communicative function. Our findings emphasize the importance of shared knowledge in shaping infants' emergent communicative skills.

Letter - Sean O'Sullivan to J. Diefenbaker, November 1969

A letter from Sean O'Sullivan to John Diefenbaker, 29 November 1969. O'Sullivan mentions a confrontation between Diefenbaker and Prime Minister Trudeau, during which Trudeau made an error and apologized to the House. Instead of seizing the moment to ridicule, Diefenbaker crossed the floor to accept the apology. O'Sullivan remarks "The gesture you made brought new honour to Parliament; an honour far too often lacking; and serves to remind all Canadians of the difference between a true leader and a petty political opportunist". He ends his letter by mentioning graffiti on the walls of Brock University that reads: "Mickey Mouse wears a Robert Stanfield watch".

Excommunication : la puissance de la création langagière contemporaine

Cette thèse aborde la question de la valeur de la littérature contemporaine, en posant la question de la puissance de la création langagière. Dans la mesure où l’humanisme tombe en désuétude avec la fin de l’hégémonie médiatique de l’imprimerie, et où le capitalisme contemporain assigne à la culture un rôle économique et récréatif, la « littérature » se retrouve sans « critère final » pour penser sa puissance non économique. En d’autres termes, quels sont les effets intermédiaux de la création langagière livresque qui survivent à l’humanisme tout en résistant à la communication récréative? Il en va bien sûr de la nature même de la « création littéraire ». Le premier chapitre explore les liens entre l’humanisme et l’imprimerie à partir d’un concept de fongibilité, et introduit un ensemble de concepts clé. Le deuxième chapitre présente un autre ensemble de concepts (dont le geste vertical), cette fois pour penser le langage en termes de pouvoir et de puissance. Le troisième chapitre aborde le « capitalisme civilisationnel » en termes intermédiaux. On y réfléchit sur la saturation, la séparation et la fenestration, notamment à partir d’une éthique du jeu. Le quatrième chapitre traite de la question de la plasticité. Enfin, les cinquième et sixième chapitres forment deux exemples – des exemples de puissance – à partir des oeuvres de Valère Novarina (Lumières du corps) et de David Foster Wallace (Infinite Jest). Le corpus théorique se compose d’éléments puisés d’une part dans l’oeuvre de Walter Benjamin et de Giorgio Agamben, selon un matérialisme messianique, et d’autre part dans celle de Gilles Deleuze. Certaines considérations sont également tenues sous l’influence de Michel Foucault et de Ludwig Wittgenstein.

Le rapport geste-son en musique électroacoustique

La version intégrale de ce mémoire est disponible uniquement pour consultation individuelle à la Bibliothèque de musique de l’Université de Montréal (www.bib.umontreal.ca/MU).

Imaginaires de la filiation : la mélancolisation du lien dans la littérature contemporaine des femmes

Cette thèse s’intéresse à un changement de paradigme dans l’imaginaire de la filiation tel qu’il est donné dans la littérature des femmes et les écrits du féminisme. L’hypothèse de travail est la suivante : à l’imaginaire d’une filiation déployée uniquement dans la latéralité des liens sororaux, se substitue au tournant des années 1990 un imaginaire mélancolique de la filiation, corollaire de la posture d’héritière désormais occupées par les auteures et penseures contemporaines. Parallèlement au développement d’une troisième vague du féminisme contemporain, la France et le Québec des années 1990 ont en effet vu naître ce qui est qualifié depuis peu de « nouvelle génération d’écrivaines ». « Premières », à l’échelle de l’histoire de la littérature des femmes, « à bénéficier d’un riche héritage littéraire féminin » (Rye et Worton, 2002 : 5), les auteures appartenant à ces « nouvelles voix » s’avèrent en effet doublement héritières, à la fois d’une tradition littéraire au féminin et de la pensée féministe contemporaine. Alors que la génération des années 1970 et du début des années 1980, se réclamant en un sens des discours d’émancipation des Lumières (liberté, égalité, fraternité), refusait l’héritage des générations antérieures, imaginant une communauté construite dans la sororité et fondée sur le meurtre des figures parentales, la génération actuelle n’est plus, quant à elle, dans la rupture. Située dans l’appropriation du passé et de l’histoire, elle réinvestit l’axe vertical de la généalogie. Or, c’est dans un récit familial mortifère ou encore lacunaire, morcelé, troué par le secret, ruiné par le passage du temps, toujours en partie perdu, qu’avancent les auteures, tout en questionnant le généalogique. Celui-ci ne s’entend pas ici en tant que vecteur d’ordre ou principe d’ordonnancement hiérarchique, mais se pose plutôt comme un mouvement de dislocation critique, « dérouteur des légitimités lorsqu’il retrace l’histoire des refoulements, des exclusions et des taxinomies » (Noudelmann, 2004 : 14) sur lesquels s’est construite l’histoire familiale. En d’autres termes, l’interrogation filiale à l’œuvre chez cette génération héritière participe d’une recherche de l’altérité, voire de l’étrangement, également présente dans les écrits théoriques et critiques du féminisme de la troisième vague. Cette thèse, en s’étayant sur l’analyse des récits de femmes et des écrits féministes publiés depuis les années 1970 – moment qui coïncide avec l’émergence de ce qu’il est désormais convenu d’appeler le féminisme de la deuxième vague –, a ainsi pour objectif de cerner les modifications que connaît l’imaginaire de la filiation à travers ce changement de paradigme. À l’aune de cette analyse menée dans la première partie, « De la sororité aux liens f(am)iliaux. Imaginaires de la filiation et représentations du corps », il s’agit, dans les deux parties suivantes intitulées « Des fantômes et des anges. La filiation en régime spectrale » et « Filles et mères, filles (a)mères. La filiation en régime de deuil » et consacrées plus précisément à l’étude des récits sélectionnés, de dégager les modalités filiales explorées par les auteures depuis le tournant des années 1990.

Geste, forme, couleur

La version intégrale de cette thèse est disponible uniquement pour consultation individuelle à la Bibliothèque de musique de l’Université de Montréal (www.bib.umontreal.ca/MU).

L'éthique dans la philosophie politique de Georges Sorel

La philosophie politique contemporaine est chargée d’une histoire qu’il reste encore à déblayer, tant la « guerre civile européenne » du siècle dernier a forcé son autodafé. Dans ce mémoire, nous prenons Georges Sorel, figure de proue du syndicalisme révolutionnaire des années 1900, comme figure archétypique de ce qui demeure en reste de cette histoire. Archétype non seulement de la manière dont des théoriciens de premier plan peuvent tomber, par la force de l’histoire, dans l’oubli le plus absolu, mais aussi archétype de ces forces mêmes, alors que Sorel est considéré par l’histoire intellectuelle comme le penseur ayant dressé le pont entre l’extrême-gauche et l’extrême-droite. Ce mémoire ne s’affaire pas directement à lui attribuer la « paternité du fascisme » ni à l’en disculper. Il s’agit bien plutôt de procéder à une déconstruction de ses principales idées à partir d’un angle essentiellement philosophique, procédé connaissant peu d’antécédents. Plus précisément, notre travail consiste à en dégager une définition de l’éthique, alors que le geste théorique principal de Sorel apparaît bien être une réduction du politique à l’éthique. Pour ce faire, nous mobilisons la philosophie contemporaine, notamment Gilles Deleuze et Giorgio Agamben, en raison de la forte affinité théorique qu’ils ont avec Sorel, particulièrement dans la définition de l’éthique.

Tracés de Proust, itinéraires maternels : la grand-mère dans « À la recherche du temps perdu ».

Le seul vrai livre, pour Proust, est la traduction des impressions perdues dont la trace subsiste dans notre mémoire sensible. Les personnages entrent dans le texte de la Recherche en frappant la sensibilité du héros. Or, « toujours déjà là, » la grand-mère, comme la mère, relève d'une réalité qui ne s'est jamais imprimée, une réalité antérieure à la conscience du narrateur et de ce fait, antérieure au texte. Néanmoins, la grand-mère est une mère qui vieillit et qui meurt. Alors, elle apparaît au narrateur, suivant ainsi le chemin inverse de l'altérité. De présence immédiate pour le héros, il lui faudra devenir autre, une vieille femme étrangère, indéfinie dans son geste vers la mort, afin que le texte lui restitue une première impression. C'est précisément dans cette distance à parcourir, cet itinéraire entre l'immédiateté du départ et la première impression, que la spécificité du personnage de la grand-mère touche à ce que Proust qualifierait lui-même de « névralgie » de son texte. La réalité maternelle, pour devenir objet du style littéraire, doit se plier au trait de l'écrivain. Or, le personnage de mère, telle qu'il est élaboré dans la Recherche, résiste à ce « fléchissement ». Le personnage de grand-mère permet à Proust d'exprimer la réalité de la mère qui se dégrade et qui meurt, une mère que la main du fils devenant écrivain rend malléable.