Grounding human vocabulary in robot perception through interaction

This thesis addresses the problem of word learning in computational agents. The motivation behind this work lies in the need to support language-based communication between service robots and their human users, as well as grounded reasoning using symbols relevant for the assigned tasks. The research focuses on the problem of grounding human vocabulary in robotic agent’s sensori-motor perception. Words have to be grounded in bodily experiences, which emphasizes the role of appropriate embodiments. On the other hand, language is a cultural product created and acquired through social interactions. This emphasizes the role of society as a source of linguistic input. Taking these aspects into account, an experimental scenario is set up where a human instructor teaches a robotic agent the names of the objects present in a visually shared environment. The agent grounds the names of these objects in visual perception. Word learning is an open-ended problem. Therefore, the learning architecture of the agent will have to be able to acquire words and categories in an openended manner. In this work, four learning architectures were designed that can be used by robotic agents for long-term and open-ended word and category acquisition. The learning methods used in these architectures are designed for incrementally scaling-up to larger sets of words and categories. A novel experimental evaluation methodology, that takes into account the openended nature of word learning, is proposed and applied. This methodology is based on the realization that a robot’s vocabulary will be limited by its discriminatory capacity which, in turn, depends on its sensors and perceptual capabilities. An extensive set of systematic experiments, in multiple experimental settings, was carried out to thoroughly evaluate the described learning approaches. The results indicate that all approaches were able to incrementally acquire new words and categories. Although some of the approaches could not scale-up to larger vocabularies, one approach was shown to learn up to 293 categories, with potential for learning many more.

A frágil totalidade: o significado do desenho no projecto de design: poética e técnica

A presente investigação procura contribuir para o estudo e desenvolvimento da disciplina de design partindo da análise e interpretação da prática do desenho no âmbito do projecto. A escolha dos objectos de estudo – desenhos de projecto de designers e arquitectos nacionais – procura validar a classificação do projecto através da análise dos desenhos dos autores. Procuramos a relação entre desenho e design propondo como hipótese que a diferença ontológica entre ambos derive da condição fenomenológica que cada uma das disciplinas estabelece na relação com a outra. A partir da bibliografia proposta procedeu-se à reflexão crítica com vista à consideração teórica acerca do desenho, particularmente, na sua relação com o projecto. Num primeiro momento analisamos ontologicamente a prática do desenho mantendo como referência a possibilidade da sua origem no disegno florentino como fundador da disciplina, competência ao serviço de outras disciplinas, quer artísticas quer científicas e do seu desenvolvimento na prática da cultura ocidental. Num segundo momento discutimos o desenho na prática do projecto partindo da consideração teórica do desenho como resultado da triangulação imaginação – classificação – representação e do design como resultado da triangulação autor – tecnologia – programa. Interpretando o desenho como um campo operativo alargado interessou-nos o estudo do porquê e de como o desenho intervém, condicionando e/ou participando na prática e pensamento em design. Num terceiro momento interpretamos os desenhos dos autores escolhidos. Fundamentalmente analisa-se em que medida a representação (desenho) intervém no desenvolvimento da ideia (projecto) considerando as técnicas (meios) da representação. Atribui-se como finalidade contribuir para o debate crítico dentro da disciplina do design, cruzando práticas que embora relacionadas são distintas do ponto de vista epistemológico. Espera-se assim o enriquecimento da cada uma delas estimulando a possibilidade da sua prática interdisciplinar. Do ponto de vista da aplicação prática a investigação prevê a criação de um arquivo de desenho de projecto que, de entre outros, posteriormente, permitirá o estudo comparado dos desenhos com a obra realizada de cada autor.

Palavras e imagens de mãos dadas: a arquitetura do álbum narrativo em Manuela Bacelar

É objetivo da presente investigação a análise sistemática do álbum narrativo infantil, mais concretamente, da obra escrita e ilustrada por Manuela Bacelar, numa leitura dialógica das suas componentes linguística e pictórica. Partindo de um conspecto teórico-crítico do conceito e da caracterização do álbum enquanto género maior da literatura, o estudo centra-se no exame técnicocompositivo do corpus, procurando indagar alguns dos traços e/ou dos recursos formais, retórico-estilísticos e ideotemáticos que singularizam a obra desta premiada artista plástica, assentando em algumas das modernas correntes literárias (e.g., a intertextualidade e a metaficção) que a inscrevem numa estética pós-modernista. As repercussões práticas do contacto precoce com o álbum e os seus contributos na promoção de comportamentos emergentes de literacia são analisados num estudo de caso que a investigação contempla. Analisando a interação entre as vertentes textual e icónica sublinha-se a especificidade de um género que aposta na narrativização como forma de aproximar a criança do universo plástico e literário.