Comunicação humano-robô através de linguagem falada

Nos últimos anos, as tecnologias que dão suporte à robótica avançaram expressivamente. É possível encontrar robôs de serviço nos mais variados campos. O próximo passo é o desenvolvimento de robôs inteligentes, com capacidade de comunicação em linguagem falada e de realizar trabalhos úteis em interação/cooperação com humanos. Torna-se necessário, então, encontrar um modo de interagir eficientemente com esses robôs, e com agentes inteligentes de maneira geral, que permita a transmissão de conhecimento em ambos os sentidos. Partiremos da hipótese de que é possível desenvolver um sistema de diálogo baseado em linguagem natural falada que resolva esse problema. Assim, o objetivo principal deste trabalho é a definição, implementação e avaliação de um sistema de diálogo utilizável na interação baseada em linguagem natural falada entre humanos e agentes inteligentes. Ao longo deste texto, mostraremos os principais aspectos da comunicação por linguagem falada, tanto entre os humanos, como também entre humanos e máquinas. Apresentaremos as principais categorias de sistemas de diálogo, com exemplos de alguns sistemas implementados, assim como ferramentas para desenvolvimento e algumas técnicas de avaliação. A seguir, entre outros aspectos, desenvolveremos os seguintes: a evolução levada a efeito na arquitetura computacional do Carl, robô utilizado neste trabalho; o módulo de aquisição e gestão de conhecimento, desenvolvido para dar suporte à interação; e o novo gestor de diálogo, baseado na abordagem de “Estado da Informação”, também concebido e implementado no âmbito desta tese. Por fim, uma avaliação experimental envolvendo a realização de diversas tarefas de interação com vários participantes voluntários demonstrou ser possível interagir com o robô e realizar as tarefas solicitadas. Este trabalho experimental incluiu avaliação parcial de funcionalidades, avaliação global do sistema de diálogo e avaliação de usabilidade.

Grounding human vocabulary in robot perception through interaction

This thesis addresses the problem of word learning in computational agents. The motivation behind this work lies in the need to support language-based communication between service robots and their human users, as well as grounded reasoning using symbols relevant for the assigned tasks. The research focuses on the problem of grounding human vocabulary in robotic agent’s sensori-motor perception. Words have to be grounded in bodily experiences, which emphasizes the role of appropriate embodiments. On the other hand, language is a cultural product created and acquired through social interactions. This emphasizes the role of society as a source of linguistic input. Taking these aspects into account, an experimental scenario is set up where a human instructor teaches a robotic agent the names of the objects present in a visually shared environment. The agent grounds the names of these objects in visual perception. Word learning is an open-ended problem. Therefore, the learning architecture of the agent will have to be able to acquire words and categories in an openended manner. In this work, four learning architectures were designed that can be used by robotic agents for long-term and open-ended word and category acquisition. The learning methods used in these architectures are designed for incrementally scaling-up to larger sets of words and categories. A novel experimental evaluation methodology, that takes into account the openended nature of word learning, is proposed and applied. This methodology is based on the realization that a robot’s vocabulary will be limited by its discriminatory capacity which, in turn, depends on its sensors and perceptual capabilities. An extensive set of systematic experiments, in multiple experimental settings, was carried out to thoroughly evaluate the described learning approaches. The results indicate that all approaches were able to incrementally acquire new words and categories. Although some of the approaches could not scale-up to larger vocabularies, one approach was shown to learn up to 293 categories, with potential for learning many more.

Do design de interação ao design da experiência tecnologicamente (i)mediata

Partindo da ideia de ʻDesign Globalʼ e tendo como pano de fundo a emergência e consolidação de novos paradigmas de interação baseados numa relação mais direta entre o corpo e os conteúdos digitais, a presente tese aborda a questão da (re)qualificação da experiência humana tecnologicamente mediada do ponto de vista do Design, designadamente do Design de Interação e do Design da Experiência. Neste contexto, a noção de ʻexperiência tecnologicamente (i)mediadaʼ representa uma ação humana que é, simultaneamente, mediada (do ponto de vista técnico) e direta ou imediada (do ponto de vista da percepção) entre o ser e a sua ação no mundo. Dado o objecto de estudo ser a experiência real que os objetos e dispositivos técnicos convocam designadamente na vida quotidiana, o nosso estudo implica toda a dinâmica holística da relação singular – racional, emocional, estética e projetiva – do ser com o seu mundo. Desse modo, defende-se a necessidade de enquadrar a raiz do pensamento e ação em Design numa hermenêutica fenomenológica e ontológica do projeto. Esta tese visa desta forma contribuir para apuramento e consolidação de uma praxis transdisciplinar para os designers e restantes intervenientes do processo do Design, cujo desígnio é a (re)qualificação da experiência que os artefactos e dispositivos técnicos convocam, assim como na apropriação e vínculo que a pessoa estabelece com estes. O resultado deste estudo sintetiza-se nos seguintes objetivos: 1. no desenvolvimento de conceitos operativos que estruturem o pensamento de uma Filosofia da Ação em Design com base numa prática que designamos por “design centrado-no-ser”; 2. na reflexão da experiência tecnológica através do conceito do estado de fluxo de Mihaly Csikszentmihalyi, enquadrando essa tipologia de experiências no contexto de uma vida, ou seja, no projeto de um eu; 3. na problematização da (re)qualificação da experiência técnica numa perspetiva de vida mais alargada que envolve o princípio de simetria entre ação ética e ação estética no pensamento e prática em Design; 4. na definição de um quadro de ações que manifesta a aplicabilidade dos conceitos desenvolvidos no ensino, investigação e prática do Design.

Gameful connectivism: social bookmarking no SAPO Campus

A web moderna, ou web 2.0, assenta nos princípios de abertura e participação dos seus utilizadores. A natureza voluntária do uso de serviços da web 2.0, aliada à dependência da participação por parte dos seus utilizadores, leva a uma forte concorrência entre serviços semelhantes na web. Esta concorrência leva à procura de novas formas de diferenciação entre serviços. Neste contexto surge a indústria de gamification, que procura transferir elementos de videojogos a outros contextos para aumentar o envolvimento dos utilizadores. Contudo, o discurso desta indústria recente é alvo de fortes críticas de profissionais de game design. Neste trabalho de investigação apresenta-se tanto o discurso da indústria de gamification como as suas críticas. Assumindo que a abordagem atual da gamification assenta numa compreensão limitada dos videojogos, parte-se para a elaboração de um novo quadro concetual que possa guiar o desenho da interação em ambientes web. Esta abordagem fundamenta-se num levantamento bibliográfico da teoria do game design. O quadro concetual resultante é usado no desenho e desenvolvimento de um serviço de social bookmarking no Sapo Campus UA, uma plataforma de serviços web 2.0 para contextos educativos, com o objetivo explícito de aumentar a participação dos seus utilizadores na aplicação. A utilidade do quadro concetual é avaliada com sessões de teste com utilizadores do público-alvo do serviço. Os resultados obtidos indicam que o game design pode enriquecer o desenho da interação na web através da criação de ciclos de ação com resultado claro e feedback positivo.

Metodologia híbrida de desenvolvimento centrado no utilizador: aplicada ao software educativo

No panorama atual do desenvolvimento de software educativo é importante que os processos de desenvolvimento sejam adequados e compatíveis com o contexto em que serão utilizados este tipo de recursos. Desta forma, é importante melhorar continuamente os processos de desenvolvimento bem como se proceder à avaliação de forma a garantir a sua qualidade e viabilidade económica. Este estudo propõe uma Metodologia Híbrida de Desenvolvimento Centrado no Utilizador (MHDCU) aplicada ao software educativo. Trata-se de um processo de desenvolvimento simples, iterativo e incremental que tem como “alicerces” princípios do Design Centrado no Utilizador, especificados na International Organization for Standardization - ISO 13407. Na sua base encontra-se a estrutura disciplinada de processos de desenvolvimento, bem como práticas e valores dos métodos ágeis de desenvolvimento de software. O processo é constituído por 4 fases principais: planeamento (guião didático), design (storyboard), implementação e manutenção/operação. A prototipagem e a avaliação são realizadas de modo transversal a todo o processo. A metodologia foi implementada numa Pequena e Média Empresa de desenvolvimento de recursos educacionais, com o objetivo de desenvolver recursos educacionais com qualidade reconhecida e simultaneamente viáveis do ponto de vista económico. O primeiro recurso que teve por base a utilização desta metodologia foi o Courseware Sere – “O Ser Humano e os Recursos Naturais”. O trabalho seguiu uma metodologia de investigação & desenvolvimento, de natureza mista, em que se pretendeu descrever e analisar/avaliar uma metodologia de desenvolvimento de software educativo, i.e., o processo, bem como o produto final. O estudo é fundamentalmente descritivo e exploratório. A metodologia de desenvolvimento do software (primeira questão de investigação) foi proposta, essencialmente, com base na revisão integrativa da literatura da especialidade e com base nos resultados que emergiram das Fases 2 e 3. Do ponto de vista exploratório, foi avaliado, por um lado, o potencial técnico e didático da 1ª versão do software inserido no Courseware Sere (segunda questão de investigação), e, por outro lado, analisar os pontos fortes e as fragilidades da metodologia utilizada para o seu desenvolvimento (terceira questão de investigação). Como técnicas de recolha de dados recorreu-se a dois inquéritos por questionário e à observação direta participante (mediada pela plataforma moodle). Quanto às técnicas de análise de dados optou-se pela análise estatística descritiva e pela análise de conteúdo. Os resultados indicam que o recurso desenvolvido possui qualidade técnica e didática. Relativamente a análise da Metodologia Híbrida de desenvolvimento Centrado no Utilizador foram propostas algumas melhorias relacionadas com o envolvimento do utilizador e introdução de novos métodos. Apesar de identificadas algumas limitações, este projeto permitiu que a empresa melhorasse significativamente os processos de desenvolvimento de recursos (mesmo os que não são informatizados), bem como permitiu o aumento do seu portefólio com o desenvolvimento do Courseware Sere.

Beyond the artefact and techno-centricity: towards process-centric understanding of architecture - alternative facilitation strategies and proposals

The artefact and techno-centricity of the research into the architecture process needs to be counterbalanced by other approaches. An increasing amount of information is collected and used in the process, resulting in challenges related to information and knowledge management, as this research evidences through interviews with practicing architects. However, emerging technologies are expected to resolve many of the traditional challenges, opening up new avenues for research. This research suggests that among them novel techniques addressing how architects interact with project information, especially that indirectly related to the artefacts, and tools which better address the social nature of work, notably communication between participants, become a higher priority. In the fields associated with the Human Computer Interaction generic solutions still frequently prevail, whereas it appears that specific alternative approaches would be particularly in demand for the dynamic and context dependent design process. This research identifies an opportunity for a process-centric and integrative approach for architectural practice and proposes an information management and communication software application, developed for the needs discovered in close collaboration with architects. Departing from the architects’ challenges, an information management software application, Mneme, was designed and developed until a working prototype. It proposes the use of visualizations as an interface to provide an overview of the process, facilitate project information retrieval and access, and visualize relationships between the pieces of information. Challenges with communication about visual content, such as images and 3D files, led to a development of a communication feature allowing discussions attached to any file format and searchable from a database. Based on the architects testing the prototype and literature recognizing the subjective side of usability, this thesis argues that visualizations, even 3D visualizations, present potential as an interface for information management in the architecture process. The architects confirmed that Mneme allowed them to have a better project overview, to easier locate heterogeneous content, and provided context for the project information. Communication feature in Mneme was seen to offer a lot of potential in design projects where diverse file formats are typically used. Through empirical understanding of the challenges in the architecture process, and through testing the resulting software proposal, this thesis suggests promising directions for future research into the architecture and design process.

The player and video game interplay in the gameplay experience construct

Among the many discussions and studies related to video games, one of the most recurrent, widely debated and important relates to the experience of playing video games. The gameplay experience – as appropriated in this study – is the result of the interplay between two essential elements: a video game and a player. Existing studies have explored the resulting experience of video game playing from the perspective of the video game or the player, but none appear to equally balance both of these elements. The study presented here contributes to the ongoing debate with a gameplay experience model. The proposed model, which looks to equally balance the video game and the player elements, considers the gameplay experience to be both an interactive experience (related to the process of playing the video game) and an emotional experience (related to the outcome of playing the video game). The mutual influence of these two experiences during video game play ultimately defines the gameplay experience. To this gameplay experience contributes several dimensions, related to both the video game and player: the video game includes a mechanics, interface and narrative dimension; the player includes a motivations, expectations and background dimension. Also, the gameplay experience is initially defined by a gameplay situation, conditioned by an ambient in which gameplay takes place and a platform on which the video game is played. In order to initially validate the proposed model and attempt to show a relationship among the multiple model dimensions, a multi-case study was carried out using two different video games and player samples. In one study, results show significant correlations between multiple model dimensions, and evidence that video game related changes influence player motivations as well as player visual behavior. In specific player related analysis, results show that while players may be different in terms of background and expectations regarding the game, their motivation to play are not necessarily different, even if their performance in the game is weak. While further validation is necessary, this model not only contributes to the gameplay experience debate, but also demonstrates in a given context how player and video game dimensions evolve during video game play.

ETD’15 - 4º Ergotrip Design, Aveiro: livro de resumos

A edição 2015 da Conferência Internacional Ergotrip Design, com enfoque nas áreas de Design, Ergonomia & Interação Humano- --Computador, atravessa o Atlântico e visita a cidade de Aveiro entre os dias 25 e 28 de novembro. O evento de origem brasileira, que se realiza pela primeiro vez fora do Brasil, tem como intuito promover e alargar a cooperação e aproximar estes dois países que tanto tem de comum. A Universidade de Aveiro acolhe a edição deste ano, com organização a cargo do Departamento de Comunicação e Arte (DeCA) e pela unidade de investigação associada ID+. Instituto de Investigação em Design, Media e Cultura. Com esta iniciativa, pretende-se fundar um espaço aberto à comunidade académica, para discutir, disseminar e incentivar a cultura de projeto, desenvolvimento e investigação. Com a realização do ERGOTRIP DESIGN Aveiro 2015 pretende-se criar um ambiente favorável à partilha, diálogo, cruzamento de ideias e de conceitos, potenciando os trabalhos académicos e fortalecendo as redes de contactos transatlânticos, reunindo diferentes domínios de investigação desde Design, Ergonomia e Interação Humano-Computador.

Um site, um conteúdo e incontáveis dispositivos: as estratégias de design utilizadas para ambientes multiplataformas

Dissertação apresentada à Escola Superior de Comunicação Social como parte dos requisitos para obtenção de grau de mestre em Audiovisual e Multimédia.

Concepção de uma aplicação móvel no âmbito da ecologia e sustentabilidade ambiental

Trabalho de projeto apresentado à Escola Superior de Comunicação Social como parte dos requisitos para obtenção de grau de mestre em Audiovisual e Multimédia.

Avaliação da Usabilidade de um Projeto de eHealth, enquadrado na visão europeia de Health Technology Assessment (HTA)

Trabalho de projeto apresentado à Escola Superior de Comunicação Social como parte dos requisitos para obtenção de grau de mestre em Audiovisual e Multimédia.

Development of advanced human robot interaction systems

O trabalho aqui apresentado é a Dissertação da minha Tese do curso de Mestrado em Engenharia Eletrotécnica e de Computadores do ISEP, realizada em parceria com o INESC TEC. O trabalho consiste no desenvolvimento de um sistema avançado de interação entre homem-robô, usando ferramentas de software livres e de domínio público e hardware pouco dispendioso e facilmente acessível. Pretende-se que o sistema desenvolvido possa ser adotado por pequenas ou micro empresas, daí a restrição monetária. Este tipo de empresas tem, por norma, uma capacidade de investimento pequena, e ficam impossibilitadas de aceder a este tipo de sistemas automatizados se estes forem caros. No entanto, o robô continua a ser um componente fundamental, sendo dispendioso. Os trabalhos realizados pelos sistemas robóticos podem por um lado, ser repetitivos sem necessidade de grandes ajustes; por outro lado, o trabalho a realizar pode ser bastante diverso, sendo necessários bastantes ajustes com (possivelmente) programação do robô. As empresas podem não ter disponível mão-de-obra qualificada para realização da programação do robô. Pretende-se então um sistema de “ensino” que seja simples e rápido. Este trabalho pretende satisfazer as necessidades de um sistema de interação homem-robô intuitivo mesmo para operadores que não estejam familiarizados com a robótica. Para simplificar a transferência de informação da tarefa a desempenhar pelo sistema robótico é usado um sistema de infravermelhos para delinear a operação a desempenhar, neste caso concreto uma operação de soldadura. O operador usa um apontador com marcadores, a posição destes marcadores é detetada usando duas câmaras para permitir o posicionamento tridimensional no espaço. As câmaras possuem filtros infravermelhos para separar o espectro de luz. Para o controlo do sistema e interface com o robô é usado um computador de baixos recursos computacionais e energéticos, e também de baixo custo. O sistema desenvolvido é portanto computacionalmente leve para poder ser executado neste computador.

Queensland floods anniversary : Rob Wilkin

"This week, we have been marking the anniversary of the destructive floods that hit Queensland a year ago this week with a series of interviews from survivors. Today's story comes from Grantham resident Rob Wilkin who helped save 31 people in the flash flood disaster on the 10th of January last year. 23 people in Toowoomba and the Lockyer Valley died and 138 houses in the town were destroyed.. To mark the anniversary of the floods in Queensland, ABC Open has compiled 'Aftermath', an extensive look at the Queensland floods as well as floods in NSW, Victoria and remote Western Australia, Cyclone Yasi and the 2009 Victorian 'Black Saturday' bushfires. Australia certainly has been hit by a few disasters in the past two or so years. The site has a timeline showing content from these six disasters, with links to about 40 people effected by these disasters. If you go to that site you will be able to choose a person to watch videos about them."

A documentação de Paul Otlet : uma proposta para a organização racional da produção intelectual do homem

A pesquisa procura identificar e analisar as circunstâncias e motivações teóricas que levaram ao surgimento, no final do século XIX, da área de estudo denominada Documentação. Apresenta informações biográficas sobre os principais artífices deste projeto, os advogados e bibliógrafos belgas, Paul Otlet e Henri La Fontaine, que visaram ampliar a compreensão sobre o meio social e cultural em que atuaram. Procura ampliar a discussão sobre os fatores que motivaram em 1895 a proposta de organização racional de toda a produção intelectual do homem. Apresenta em linhas gerais a visão abrangente e integradora da Documentação que eliminando barreiras físicas, acessava acervos arquivísticos, bibliográficos e museológicos para o registro integral dos assuntos pesquisados. Discute a utilização da Classificação Decimal de Dewey (CDD) na criação do Repertório Bibliográfico Universal e analisa o processo que levou ao surgimento da Classificação Decimal Universal (CDU). Conclui sugerindo a inclusão desta visão extensiva e integradora da documentação ao referencial teórico da Ciência da Informação. Sugere que o resgate deste aporte teórico poderá contribuir para um melhor enfrentamento dos problemas da gestão do conhecimento registrado, produzido e acumulado até os dias atuais, nos mais diversos formatos, suportes e repositórios.

Os ultimos fins do homem, salvaçam, e condenaçam eterna : tratado espiritual, dividido em dous livros : no primeiro se trata da singular providencia de Deos na salvação das almas; no segundo das causas geraes da perdição das almas, ou estradas commuas do reyno da morte : escrito, e dedicado à soberana Rainha dos Anjos, Maria Santissima senhora nossa : pelo Padre Manoel Bernardes da Congregação do Oratorio de Lisboa

Manuel Bernardes nasceu em 1644, em Lisboa, onde viveu e morreu em 1710. Estudou Filosofia e Direito Canônico na Universidade de Coimbra e seguiu, posteriormente, o curso de Teologia ordenando-se sacerdote. De acordo com a Advertência contida na obra, o Padre Manuel Bernardes pretendia acrescentar mais algumas causas da perdição das almas, o que não chegou a fazer, impedido por outras ocupações. Não obstante esta falta, pareceu-lhe conveniente publicá-la para não tirar dos fiéis a oportunidade de aprender lição tão útil e saudável. A primeira edição, ‘rara’ e muito apreciada foi impressa em Lisboa na Oficina de Joseph Antonio da Sylva, em 1728