Statistical modeling of violin bowing parameter contours

We present a framework for modeling right-hand gestures in bowed-string instrument playing, applied to violin. Nearly non-intrusive sensing techniques allow for accurate acquisition of relevant timbre-related bowing gesture parameter cues. We model the temporal contour of bow transversal velocity, bow pressing force, and bow-bridge distance as sequences of short segments, in particular B´ezier cubic curve segments. Considering different articulations, dynamics, andcontexts, a number of note classes is defined. Gesture parameter contours of a performance database are analyzed at note-level by following a predefined grammar that dictatescharacteristics of curve segment sequences for each of the classes into consideration. Based on dynamic programming, gesture parameter contour analysis provides an optimal curve parameter vector for each note. The informationpresent in such parameter vector is enough for reconstructing original gesture parameter contours with significant fidelity. From the resulting representation vectors, weconstruct a statistical model based on Gaussian mixtures, suitable for both analysis and synthesis of bowing gesture parameter contours. We show the potential of the modelby synthesizing bowing gesture parameter contours from an annotated input score. Finally, we point out promising applicationsand developments.

Poètiques del desig. Alteritat i escriptura a l’obra de Gabriel Ferrater, Maria-Mercè Marçal i Enric Casasses

[cat] La present investigació parteix de la urgència de revisar la poesia catalana contemporània des dels paràmetres de la teoria literària que abracen la representació del desig. Partint de l’estreta vinculació entre aquest marc teòric i les noves formulacions del subjecte líric postmodern, hem proposat l’estudi de tres grans poètiques que han marcat, cada una d’elles en el seu context socioliterari, un punt d’inflexió a la poesia catalana des d’aquest quadre teòric: Gabriel Ferrater, Maria-Mercè Marçal i Enric Casasses. Per aquest motiu, l’objectiu central de la tesi és demostrar, a través de la categoria del desig, com l’alteritat eroticoamorosa és un dels centres de representació i experimentació dels límits del subjecte poètic i quins efectes té en la construcció de la identitat textual i en el que hem anomenat matèria-emoció. La tesi no pretén ser un estudi comparatiu dels tres autors, sinó que, capturant les tres trajectòries en paral•lel, situa cada poètica en un punt de no retorn respecte al desig i la seva representació. Atès això, és, metafòricament, el signe desig, en els seus tres plans, el que unifica els tres paradigmes que hem sotmès a anàlisi: Gabriel Ferrater com a referent, Maria-Mercè Marçal en qualitat de significat i Enric Casasses, portador del significant. El primer capítol va més enllà de la ruptura moderna entre escriptura i exaltació d’una subjectivitat única i monolítica, per comprendre en què consisteix la dissolució del jo líric en tant que fonament de l’enunciació del subjecte en el vers. És una proposta metodològica que, prenent com a centre l’intent de construcció d’una teoria del poema basada en l’expansió del jo cap a l’Altre, analitza algunes de les variables retòriques i ontològiques que coparticipen en la formulació teòrica de subjecte líric incomplet o fragmentat en el moment d’enunciar-se. D’aquesta manera, amb una voluntat de teixir uns ítems teòrics per on circuli el concepte de jo líric versus l’Altre (poesia de l’alteritat, “llei de l’assentiment”, “apropiació” de l’enunciat o, sobretot, matèria-emoció), l’escriptura poètica es concep com un joc de forces entre la performativitat del subjecte líric i la recerca de la seva pròpia subjectivitat. Aquesta crisi del subjecte i la impossibilitat de restituir una relació unilateral respecte a l’Altre, cobren una especial rellevància quan el motor o força que activa la relació d’alteritat és el moviment que impulsa el jo fora de les seves pròpies estructures per atènyer l’altre/a (subjecte desitjat) o absorbir-lo: el desig. La segona part del primer capítol està destinada a definir les aproximacions teòriques sobre la representació del desig —encercades en un posicionament postestructuralista conjuminat amb la crítica literària feminista—, que ens permeten assentar les coordenades interpretatives per portar a terme l’estudi de la formalització de tres subjectes lírics que cerquen en l’escriptura el seu propi esdevenir com a subjectes desitjants. Així és que al llarg del segon capítol hem interrogat les tres poètiques resseguint els espais comuns erigits en la nostra proposta de marc interpretatiu. Per fer-ho, ens hem centrat en Les dones i els dies de Gabriel Ferrater, amb especial èmfasi a “Teoria dels cossos”. En el cas de Maria-Mercè Marçal, hem estudiat exhaustivament el primer poemari que inaugura l’escriptura del desig lèsbic, Terra de Mai, tot establint una contigüitat temàtica amb “Sang presa” (dins de La germana, l’estrangera). I, finalment, hem resseguit la poesia d’Enric Casasses d’una forma transversal, a partir de les obres més significatives entorn al subjecte de recerca, com ara La cosa aquella, “Alquímia d’amor” (dins de Començament dels començaments i ocasió de les ocasions), D’equivocar-se així, Calç i, sobretot, Do’m. Drama en tres actes. Primer de tot, hem definit les coordenades del subjecte desitjant en relació amb el subjecte del desig, la qual cosa ens ha exigit l’anàlisi de l’enunciació del jo líric, respectivament. La recerca de les directrius fundacionals de les subjectivitats líriques —actives des del moment en què sorgeix la demanda del desig (implícita o explícita)―, han fet palesa, progressivament, la problemàtica suficiència ontològica del subjecte que deriva, al seu torn, de l’encontre amb l’altre/a. Així hem arribat a mesurar la distància inexorable que separa el jo del tu, amb resultats ben diferents. Ferrater, que anihila sorprenentment el subjecte líric, ha estat el primer port d’una singladura que, en arribar a Marçal, ens ha permès conèixer la continuïtat del ser: el despertar del desig és l’origen de la individuació dels subjectes agents del plaer en detriment de la compleció identitària. I hem navegat, finalment, fins a Casasses, qui defensa al llarg de la seva obra una individuació com a centre ètic de l’acte amorós. En una segona part, hem estudiat la representació de l’altre/a en cada corpus poètic. En el cas de Ferrater, les dones no només activen l’alteritat eroticoamorosa concreta en cada poema, sinó que, des d’un punt de vista metapoètic, esdevenen constitutives de la subjectivitat lírica en la recerca de la identitat que té lloc al llarg de Les dones i els dies. Partint de la figura de “Teseu”, poema que emmiralla i significa el procés d’escriptura poètica, hem explorat la formalització del desig en funció de les diferents representacions de la dona en paral•lel amb les posicions enunciatives del jo líric. Al llarg d’aquest recorregut, la representació del cos del desig (la fragmentació, la carícia, la mirada, etc.) i l’espai on aquest cos s’esdevé (la cambra), han estat els dos epicentres mitjançant els quals hem conclòs que la dona es presenta com un cos resistent que guia el jo líric a negar, paradoxalment, el mateix desig. La impossibilitat de satisfer el desig es manifesta, així, amb una reformulada pèrdua dels límits del subjecte desitjant. En els versos marçalians el desig emergeix com un gran torrent que arrossega al jo líric a mesurar-se en la distància que la separa de l’altra. A partir de l’altra especular, les primeres sextines de Terra de mai obren un nou ordre del jo i del tu en el discurs amorós: l’equivalència física dels cossos amants/amats extrema la fusió tant física com amorosa que es convertirà en l’acció transformadora i afirmativa de la identitat. Amb això, Marçal desarticula la gestió fal•logocèntrica del desig i l’ubica com una categoria des de la qual emprèn la construcció d’una subjectivitat lírica femenina i lèsbica. En aquest sentit, mitjançant la presència nítida d’una exploració i reconstrucció del cos de dona albirat des del desig homoeròtic, la poeta desplega la renovació d’una simbologia eròtica que configura un cosmos corporal totalment nou: cossos d’aigua i sang. Marçal busca en els fluids corporals femenins (l’aigua, la sang menstrual, la sang del trau o, fins i tot, el vòmit), la transposició dels marges corporals als textuals, convertint el poema no en un paral•lel verbal de l’experiència del desig sinó en un paral•lel corporal. En un primer moment, la representació de l’altra és indissociable de les imatges especulars (aigua o mirall). Aquesta és la fase de continuïtat, de la compleció identitària a través de l’experiència de la jouissance, i està constituïda per tres eixos: la confusió dels límits entre el jo i la seva altra, la fusió de les dues subjectivitats i l’afirmació de la unicitat amb el verb “som”. A continuació, hem resseguit com aquest “ser u” es trenca a mesura que el jo poètic es va singularitzant. Aquest segon moment és on el desig irromp al llenguatge del plaer i es converteix en una passió altament destructiva. La dissimilació amb el tu i la nostàlgia de la “fal•laç utopia d’una fusió absoluta” bolquen el poema cap a un jo poètic mutilat, que cerca un cos absent i l’espai de plenitud d’un subjecte líric que es troba irreparablement ferit (“Sang presa”). La poesia de Casasses trava la representació de l’altre amorós en la modalitat dialògica dels versos (el parlar). El fenomen de l’enunciació poètica casassiana s’emmarca en unes estructures poemàtiques que invoquen, des de l’origen, el Tu, apel•lant, així, al problema estrictament postmodern de la unicitat del jo líric i de la identitat en el procés d’escriptura. Atès això, el poema es convertirà en un dir ofert a l’Altre com a demanda del llenguatge, motiu pel qual el desig emergeix com a motor de l’escriptura poètica. Abans d’endinsar-nos específicament a l’eclosió del Tu en tant que altre amorós, ha calgut esclarir les coordenades generals del Tu en majúscules per esbossar els trets fonamentals de la significació poètica. Així, doncs, hem analitzat com es despleguen els diferents tu en l’enunciació, ja sigui quan aquest refereix al lector o a la poesia (recursos metapoètics), quan correspon a l’amor/desig (governador del subjecte de l’escriptura) i, finalment, quan el tu condensa l’altre amorós (amor particular). En aquest darrer cas, hem proposat una possible escala de transcendència del tu respecte al jo líric: d’un tu amorós totalitzador (la lluna) fins al subjecte del desig, la dona. Paral•lelament, la representació de l’amada és indissociable del concepte d’emoció lírica creada a través de la modelització del dir del jo poètic. Per aquest fet, hem classificat la irrupció del subjecte desitjat en diferents graus de referencialitat: el “tu” present, el “tu” absent i el “tu” de destinació. En un tercer apartat, hem intentat respondre a una de les grans problemàtiques que giren entorn a les escriptures del desig: és possible la seva representació? Ferrater ens enfronta davant de l’indicible. La poètica ferrateriana se situa en un distanciament deliberat de les emocions, la qual cosa circumscriu l’expressió del desig en el marc d’allò incomunicable de l’experiència. Consegüentment, hem abordat la formalització del desig a través del concepte d’imaginació tot analitzant com el poeta aconsegueix elevar l’energia emotiva del llenguatge a partir de les relacions entre la paraula i els seus absents, i com això ens permet parlar del poema en tant que matèria-emoció. Així mateix, hem conclòs que Ferrater captura l’indicible en el text jugant amb els límits representatius del llenguatge. Per abordar les escriptures del desig marçaliana i casassiana hem recorregut als plecs de la matèria-emoció encarats a l’écart: la fractura de l’epidermis del poema causada per l’erupció de la vida corporal, pulsional i afectiva del subjecte de l’escriptura. El ritme pulsional del desig (escena d’escriptura i escena amorosa) i la veu (poiesis) es converteixen en els fonaments de la construcció d’unes subjectivitats líriques que s’inscriuen en una posició femenina, allà on el cos amb estat d’apetència cerca la continuïtat en l’escriptura. Concretament, hem resseguit la formalització de l’absència de l’altra en els versos de Marçal, la qual recorre a figuracions com l’espera, el buit, la desfeta del mirall, l’assassinat dels cossos en plenitud, entre altres imatges que activen el salt de l’eros al thanatos; així com, també, les estructures interrogatives que signifiquen la impossibilitat d’experimentar el desig del desig de l’altra. Respecte a l’obra de Casasses, el poeta troba en la forma dramàtica el mitjà idoni per experimentar les possibilitats de la representació del desig: Do’m. Mitjançant una exegesi detallada del drama, hem pogut concloure que, tal com postula Barthes, l’única construcció textual possible d’allò amorós es troba en formular el que té d’intractable, i això només es pot representar a partir de l’acció mateixa. Talment, Casasses porta a l’extrem la modalitat dialògica pròpia de la seva poesia per escenificar l’encontre amorós i la construcció in progress del subjecte desitjant a través del dir-se l’amor. Finalment, la investigació intenta oferir una resposta al voltant de la conjunció desig, subjectivitat lírica i identitat. Aquestes tres coordenades ens permeten elevar les diferents representacions del desig a l’alçada de les millors poètiques contemporànies. L’ètica i l’estètica ferrateriana es congreguen en l’espai de l’erotisme moral. Ferrater concep el vers com un mètode fenomenològic a través del qual inscriu una actitud poètica que no es pot pensar sense la formalització del subjecte desitjant. Atès això, amb Les dones i els dies s’inaugura la categoria del desig en relació amb els límits d’expressió del subjecte líric. Marçal obre les portes a l’espai literari femení i lèsbic amb una escriptura poètica creadora de nous àmbits per a l’expressió del desig. La cerca d’un nou ordre simbòlic en el llenguatge poètic està estretament vinculada amb la construcció d’una subjectivitat tant política com poètica, un dels trets principals de la qual és la reivindicació i afirmació del plaer sexual femení. D’aquesta manera, el desig a l’obra de la poeta és portador d’una actitud i praxi política que troba la seva màxima expressió en la conquesta d’una llengua abolida. Per acabar, Casasses invoca l’espai de la paraula viva per articular l’acompliment de la funció poètica. A través de la poesia recitada, ja sigui des d’un punt de vista teòric com en la seva performance escènica, construeix una nova i fundacional experiència poètica que troba el seu paral•lel amb l’experiència amorosa. En aquest nou espai de circulació de la paraula poètica hi situa una subjectivitat lírica fundada en el moviment ètic cap a l’altre encarnat en el cos, la veu i el ritme.

Multimodal Strategies in Development.Predictive Value of early simultaneosgesture-speech comination

The present study investigates the predictive value of the early appearance of simultaneous pointing-speech combinations. An experimental task was used to obtain a communicative productive sample from nineteen children at 1;0 and 1;3. Infant’s communicative productions, in combination with gaze joint engagement patterns, were analyzed in relation to different social conditions. The results show a significant effect of age and social condition on infants’ communicative productions. Gesture-speech combinations seem to work as a strong communicative resource to attract the adult’s attention in social demanding communicative contexts. Gaze joint engagement was used in combination with simultaneous pointing-speech combinations to attract adults’ attention during social demanding conditions. Finally, the use of simultaneous pointing-speech combinations at 1;0 in demanding conditions predicted greater expressive vocabulary acquisition at 1;3 and 1;6. These results indicate that the use of gesture-speech combinations may be considered a significant step towards the early integration of language components.

Acting Rehearsal in Collaborative Multimodal Mixed Reality Environments

This paper presents the use of our multimodal mixed reality telecommunication system to support remote acting rehearsal. The rehearsals involved two actors, located in London and Barcelona, and a director in another location in London. This triadic audiovisual telecommunication was performed in a spatial and multimodal collaborative mixed reality environment based on the 'destination-visitor' paradigm, which we define and put into use. We detail our heterogeneous system architecture, which spans the three distributed and technologically asymmetric sites, and features a range of capture, display, and transmission technologies. The actors' and director's experience of rehearsing a scene via the system are then discussed, exploring successes and failures of this heterogeneous form of telecollaboration. Overall, the common spatial frame of reference presented by the system to all parties was highly conducive to theatrical acting and directing, allowing blocking, gross gesture, and unambiguous instruction to be issued. The relative inexpressivity of the actors' embodiments was identified as the central limitation of the telecommunication, meaning that moments relying on performing and reacting to consequential facial expression and subtle gesture were less successful.

Acting rehearsal in collaborative multimodal mixed reality environments

This paper presents the use of our multimodal mixed reality telecommunication system to support remote acting rehearsal. The rehearsals involved two actors, located in London and Barcelona, and a director in another location in London. This triadic audiovisual telecommunication was performed in a spatial and multimodal collaborative mixed reality environment based on the 'destination-visitor' paradigm, which we define and put into use. We detail our heterogeneous system architecture, which spans the three distributed and technologically asymmetric sites, and features a range of capture, display, and transmission technologies. The actors' and director's experience of rehearsing a scene via the system are then discussed, exploring successes and failures of this heterogeneous form of telecollaboration. Overall, the common spatial frame of reference presented by the system to all parties was highly conducive to theatrical acting and directing, allowing blocking, gross gesture, and unambiguous instruction to be issued. The relative inexpressivity of the actors' embodiments was identified as the central limitation of the telecommunication, meaning that moments relying on performing and reacting to consequential facial expression and subtle gesture were less successful.

Emotion expression in body action and posture

Emotion communication research strongly focuses on the face and voice as expressive modalities, leaving the rest of the body relatively understudied. Contrary to the early assumption that body movement only indicates emotional intensity, recent studies show that body movement and posture also convey emotion specific information. However, a deeper understanding of the underlying mechanisms is hampered by a lack of production studies informed by a theoretical framework. In this research we adopted the Body Action and Posture (BAP) coding system to examine the types and patterns of body movement that are employed by 10 professional actors to portray a set of 12 emotions. We investigated to what extent these expression patterns support explicit or implicit predictions from basic emotion theory, bi-dimensional theory, and componential appraisal theory. The overall results showed partial support for the different theoretical approaches. They revealed that several patterns of body movement systematically occur in portrayals of specific emotions, allowing emotion differentiation. While a few emotions were prototypically encoded by one particular pattern, most emotions were variably expressed by multiple patterns, many of which can be explained as reflecting functional components of emotion such as modes of appraisal and action readiness. It is concluded that further work in this largely underdeveloped area should be guided by an appropriate theoretical framework to allow a more systematic design of experiments and clear hypothesis testing.

Using the optical flow to implement a relative virtual mouse controlled by head movements

The following paper introduces the work conducted to create a relative virtual mouse based on the interpretation of head movements and face gesture through a low cost camera and the optical flow of the images. This virtual device is designed specifically as an alternative non-contact pointer for people with mobility impairments in the upper extremities and reduced head control. The proposed virtual device was compared with a conventional mouse, a touchpad and a digital joystick. Validation results show performances close to a digital joystick but far away from a conventional mouse.

El gest nostre de cada dia. La gestualitat emblemàtica com a patrimoni de la cultura popular

El libro de Lluís Payrató, El gest nostre de cada dia, es un estudio escrito en catalán de los gestos de la categoría de emblemas de la cultura catalana. Los emblemas constituyen un recurso comunicativo autónomo de la palabra, en el sentido de que expresan un mensaje que equivale a una palabra o expresión. El autor incorpora a la investigación el repertorio gestual que elaboró Joan Amades en 1957. La tesis central de la obra es la naturaleza cultural y contextual de los emblemas, de modo que pueden tener un significado mundial en algunos casos y un significado local en otros. La contribución del ensayo es una descripción de los gestos según su función comunicativa y la confección de un repertorio de 108 emblemas catalanes. El gest nostre de cada dia [Our daily gesture] is a study written by Lluís Payrató in Catalan about the Catalan culture. It deals with a type of gestures called emblems. The emblems are gestures that correspond to a word or expression. The author analyzes the gestural repertoire that developed in 1957 Joan Amades. The central thesis of the work is the cultural and contextual nature of the emblems, so that may have global significance in some cases and in other local significance. The contribution of the paper is a description of gestures by communicative function and the production of a repertoire of 108 Catalan emblems.

Apartar y girar los ojos en los textos latinos

This article presents some of the conclusions drawn from our research on eye gestures in Latin texts. This investigation is part of a broader study on gestures in Ancient Rome. We have established a classification of eye gestures that comprises two major categories based on the nature of the gestures: gestures that involve eyelid movements and those that consist of iris movements. This paper focuses on two gestures which belong to this second category: staring and rolling the eyes. We analyse the way these gestures were made, how they were referred to by Roman writers and the meanings that may be inferred from their use in literary texts.

Entrenamiento de la fuerza orientado a la mejora de la velocidad de golpeo en tenis

El golpeo de la bola a velocidades elevadas, es un factor determinante para el rendimiento en el tenis moderno. Durante los últimos 20 años se ha producido una gran evolución del juego y los cambios en el juego moderno se han traducido en el uso de poderosos servicios y golpes de fondo. Aunque la fuerza es una capacidad determinante desde la perspectiva de la condición física, ha habido poca investigación para fundamentar la eficacia de los programas de entrenamiento de fuerza para los jugadores de tenis. El objetivo de este estudio es realizar una revisión sobre los criterios básicos para dirigir correctamente el entrenamiento de la fuerza orientado a la mejora de la de la velocidad de golpeo de la pelota. Aunque las necesidades de fuerza dinámica máxima (FDM) en los golpeos son bajas, la literatura científica parece apuntar que unos adecuados niveles de FDM ejercen efectos positivos sobre el aumento de velocidad de golpeo en el tenis. La mejora y mantenimiento de esta manifestación de fuerza se busca a expensas de factores neurales. Los entrenamientos de fuerza útil deben utilizar medios que permitan ejecutar el gesto técnico, implicar las mismas cadenas musculares, rango de movimiento o velocidades de ejecución. En este sentido, se han propuesto la utilización de pelotas medicinales, mancuernas de peso ligero, gomas elásticas, máquinas multifuncionales de resistencia neumática o poleas.

De More a Moore : de la utopia al cos, i a l’inrevés

Through the graphic novel V for Vendetta by Alan Moore and David Lloyd, I problematize here the act of classification of the subgenres within each genre. This is a literary study that aims to reflect on the utopian genre. It is a genre which requires in order to be understood a consideration of society and its organization. The concept of society cannot be properly discussed without mentioning the surface on which it is based: people with their selves and their bodies. Institutions and conventions act subtly and constantly on us, offering more or less free roles, usually related to a particular physical appearance, as may be the mode of dress, or gesture- and generating a negotiation between our desires and our duties. In other words, they act on us to transform us into people suitable for the smooth running of the community

Reconeixement de gestos de la mà amb el sensor Kinect

El reconeixement dels gestos de la mà (HGR, Hand Gesture Recognition) és actualment un camp important de recerca degut a la varietat de situacions en les quals és necessari comunicar-se mitjançant signes, com pot ser la comunicació entre persones que utilitzen la llengua de signes i les que no. En aquest projecte es presenta un mètode de reconeixement de gestos de la mà a temps real utilitzant el sensor Kinect per Microsoft Xbox, implementat en un entorn Linux (Ubuntu) amb llenguatge de programació Python i utilitzant la llibreria de visió artifical OpenCV per a processar les dades sobre un ordinador portàtil convencional. Gràcies a la capacitat del sensor Kinect de capturar dades de profunditat d’una escena es poden determinar les posicions i trajectòries dels objectes en 3 dimensions, el que implica poder realitzar una anàlisi complerta a temps real d’una imatge o d’una seqüencia d’imatges. El procediment de reconeixement que es planteja es basa en la segmentació de la imatge per poder treballar únicament amb la mà, en la detecció dels contorns, per després obtenir l’envolupant convexa i els defectes convexos, que finalment han de servir per determinar el nombre de dits i concloure en la interpretació del gest; el resultat final és la transcripció del seu significat en una finestra que serveix d’interfície amb l’interlocutor. L’aplicació permet reconèixer els números del 0 al 5, ja que s’analitza únicament una mà, alguns gestos populars i algunes de les lletres de l’alfabet dactilològic de la llengua de signes catalana. El projecte és doncs, la porta d’entrada al camp del reconeixement de gestos i la base d’un futur sistema de reconeixement de la llengua de signes capaç de transcriure tant els signes dinàmics com l’alfabet dactilològic.

Towards an Integrative Information Society: Studies on Individuality in Speech and Sign

The flow of information within modern information society has increased rapidly over the last decade. The major part of this information flow relies on the individual’s abilities to handle text or speech input. For the majority of us it presents no problems, but there are some individuals who would benefit from other means of conveying information, e.g. signed information flow. During the last decades the new results from various disciplines have all suggested towards the common background and processing for sign and speech and this was one of the key issues that I wanted to investigate further in this thesis. The basis of this thesis is firmly within speech research and that is why I wanted to design analogous test batteries for widely used speech perception tests for signers – to find out whether the results for signers would be the same as in speakers’ perception tests. One of the key findings within biology – and more precisely its effects on speech and communication research – is the mirror neuron system. That finding has enabled us to form new theories about evolution of communication, and it all seems to converge on the hypothesis that all communication has a common core within humans. In this thesis speech and sign are discussed as equal and analogical counterparts of communication and all research methods used in speech are modified for sign. Both speech and sign are thus investigated using similar test batteries. Furthermore, both production and perception of speech and sign are studied separately. An additional framework for studying production is given by gesture research using cry sounds. Results of cry sound research are then compared to results from children acquiring sign language. These results show that individuality manifests itself from very early on in human development. Articulation in adults, both in speech and sign, is studied from two perspectives: normal production and re-learning production when the apparatus has been changed. Normal production is studied both in speech and sign and the effects of changed articulation are studied with regards to speech. Both these studies are done by using carrier sentences. Furthermore, sign production is studied giving the informants possibility for spontaneous speech. The production data from the signing informants is also used as the basis for input in the sign synthesis stimuli used in sign perception test battery. Speech and sign perception were studied using the informants’ answers to questions using forced choice in identification and discrimination tasks. These answers were then compared across language modalities. Three different informant groups participated in the sign perception tests: native signers, sign language interpreters and Finnish adults with no knowledge of any signed language. This gave a chance to investigate which of the characteristics found in the results were due to the language per se and which were due to the changes in modality itself. As the analogous test batteries yielded similar results over different informant groups, some common threads of results could be observed. Starting from very early on in acquiring speech and sign the results were highly individual. However, the results were the same within one individual when the same test was repeated. This individuality of results represented along same patterns across different language modalities and - in some occasions - across language groups. As both modalities yield similar answers to analogous study questions, this has lead us to providing methods for basic input for sign language applications, i.e. signing avatars. This has also given us answers to questions on precision of the animation and intelligibility for the users – what are the parameters that govern intelligibility of synthesised speech or sign and how precise must the animation or synthetic speech be in order for it to be intelligible. The results also give additional support to the well-known fact that intelligibility in fact is not the same as naturalness. In some cases, as shown within the sign perception test battery design, naturalness decreases intelligibility. This also has to be taken into consideration when designing applications. All in all, results from each of the test batteries, be they for signers or speakers, yield strikingly similar patterns, which would indicate yet further support for the common core for all human communication. Thus, we can modify and deepen the phonetic framework models for human communication based on the knowledge obtained from the results of the test batteries within this thesis.

Kättelyn merkitykset suomalaisessa tapakulttuurissa 1800-luvulta 2000-luvulle

Tutkimuksen aiheena on kättely suomalaisessa tapakulttuurissa 1800-luvulta 2000-luvulle. Tutkimuksen tarkoituksena on ollut selvittää, mitä kättely on suomalaisille tutkimusajankohtana merkinnyt. Kättelyä suomalaisessa tapakulttuurissa on tarkasteltu muistitietoaineiston avulla.Ensisijainen aineisto sisältää kättelyyn liittyviä ajatuksia ja kokemuksia yli tuhannelta suomalaiselta. Aineiston käsittely ei kuitenkaan perustu niiden määrälliseen tutkimiseen, vaan tutkimusmenetelmänä on käytetty laadullista tutkimusotetta, jonka ytimessä on merkitysten tulkinta. Väitöskirjassa kättelyä lähestytään kulttuurihistoriallisena, monitasoisena ilmiönä, josta on erotettavissa kestoltaan eripituisia historiallisuuden tasoja. Myös väitöskirjan rakenne seuraa tätä historiallisen monikerroksellisuuden ajatusta. Ensiksi kättelystä on erotettavissa biologiaan perustuva niin kutsuttu syvän historian taso, joka tekee kättelystä merkityksellisen luottamuksellisten suhteiden ja yhteistoiminnan alueella. Toiseksi kättelystä voidaan erottaa rakenteiden tasolla ilmenevä ja hitaasti muuttuva tapakulttuurin taso. Mutta vaikka tapakulttuurin säännöt osaltaan vaikuttavat siihen, miten henkilö tietyssä tilanteessa käyttäytyy, on toimija kättelytilanteessa kuitenkin valintoja tekevä yksilö. Kolmas tutkimuksessa erotettu taso onkin tapahtumahetken taso, jolla historiallinen toimija suorittaa valintojaan oman henkilöhistoriansa ja elämänkokemuksensa avulla. Historialliseen monikerroksellisuuteen liittyvän ajattelun kautta tutkimus osoittaa kättelyn monisyiseksi ilmiöksi, joka vaikuttaa inhimilliseen vuorovaikutukseen olennaisella tavalla. Tutkimusote myös nivoo ihmisen kehityshistorian opittuun tapakulttuuriin sekä tapahtumahetken aktiiviseen kättelytoimijuuteen. Tuloksista voidaan päätellä, ettei kättely ole suomalaisille merkityksetön toiminto, vaan tärkeä sosiaalinen väline, jonka syvempi ymmärtäminen vaatii kaikkien historiallisten tasojen tarkastelua. Eri historian kerrokset voivat olla yksittäisessä kättelytapahtumassa kaikki läsnä. Julkisessa keskustelussa kättely on ollut esillä epähygieenisyytensä vuoksi. Väitöskirjatutkimuksessa pohditaan myös kättelyn suhdetta mikrobien leviämiseen. Tutkimus osoittaa, että kättelyllä on kahtalaisia turvallisuuteen liittyviä merkityksiä: toisaalta se on lääketieteellinen riski, mutta toisaalta se saa sellaisia tapoihin ja hyvinvointiin liittyviä merkityksiä kuten yhteisöllisyys ja luottamus. Pohdittaessa kättelyn ja käsihygienian suhdetta tulevaisuudessa nämä seikat tulisi tiedostaa ja tuoda selkeästi esiin.

Sotamuistomerkki Suomessa. Voiton ja tappion modaalista sovittelua

Väitöskirjani tarjoaa laajasti tietoa sotamuistomerkeistä koko Suomen alueelta. Työ purkaa suomalaisten sotamuistomerkkien ilmaisutapoja ja modaalisia keinoja, joilla taideteokset sovittelevat voitetun tai hävityn sodan tarinaa ja kokemuksellisia jännitteitä toisiinsa. Suurin osa analyysin kohteena olevista taideteoksista on pystytetty Suomen itsenäisyyden ajalla vapaudenpatsaiksi tai sankarihautojen, taisteluiden ja vakaumuksensa puolesta kuolleiden muistomerkeiksi. Tutkimus painottuu voiton ideologian vaikutukseen sotakuvaston muotoutumisessa. Avainkysymyksiä ovat, miten sotamuistomerkki viestittää poliittis-ideologisia tavoitteita tai miten muistomerkkien figuurien asennot, eleet ja attribuutit välittävät sotatarinan yhteisöllisiä sisältöjä. Tutkimus tarkentuu teosten modaalisiin piirteisiin ja merkityksenmuodostuksen vuorovaikutteisuuteen. Erikoishuomion kohteena ovat aiheiden sisällölliset ristiriidat ja ilmaisun murtumakohdat. Suurten teosmäärien ja aihetyyppien jaottelussa ja analysoimisessa on hyödynnetty ikonografian, kuvaretoriikan ja eleiden tutkimusta. Suomalaisen aineiston vertailukohtina ovat antiikin sotilasaiheinen taide, keskiaikainen Kristuksen kärsimyskuvasto sekä sotamuistomerkkiperinne Saksassa, Ranskassa, Yhdistyneessä kuningaskunnassa ja Amerikan yhdysvalloissa. Sotien muistokultin merkitysten avaamisessa käytetään diskurssianalyysin välineitä. Tutkimus osoittaa, että sotamuistomerkit rakentavat yhteisön turvallisuudentunnetta ja muokkaavat sotilasimagoa maskuliinisten ideaalien ja implisiittisen vihollis- tai vastakuvan varassa. Kansallisen paatoksen ohessa sotamuistomerkit vahvistavat sotilaiden aseveliaatetta ja luovat kuvaa rikkumattomasta yhteishengestä sekä kotirintamasta. Teokset tulkitsevat valmistumisaikansa usein ristiriitaista tunneilmapiiriä ja tulevaisuuden odotuksia sekä neuvottelevat paikallisesta erityisyydestä ja valtakysymyksistä. Veistosten modaaliset keinot suhteessa toimijarooleihin, kuten autonomisuuden korostus, tunteenomainen toiseen tukeutuminen tai sodan velvoitteisiin suuntautuminen perustuvat yleensä figuurien asentoihin. Sen sijaan figuurien eleet ja attribuutit, tärkeimpinä kypärä, ase, univormu ja lumipuku, tarkentavat suuntautumisen tavoitetta ja ideologista sanomaa. Koska sodassa on kyse vaikeasti käsiteltävistä väkivaltakulttuurin ilmiöistä, muistomerkeillä on hämärretty ja muokattu kuvaa historian tapahtumista. Siten teosten välittämät ideat uhrivalmiudesta ja tunteiden hillinnän velvoitteesta auttavat sotatraumojen ja surun kanavoimisessa sekä purkavat tapahtumiin liittyvää häpeää.