Dynamic equilibrium through reinforcement learning

Reinforcement Learning is an area of Machine Learning that deals with how an agent should take actions in an environment such as to maximize the notion of accumulated reward. This type of learning is inspired by the way humans learn and has led to the creation of various algorithms for reinforcement learning. These algorithms focus on the way in which an agent’s behaviour can be improved, assuming independence as to their surroundings. The current work studies the application of reinforcement learning methods to solve the inverted pendulum problem. The importance of the variability of the environment (factors that are external to the agent) on the execution of reinforcement learning agents is studied by using a model that seeks to obtain equilibrium (stability) through dynamism – a Cart-Pole system or inverted pendulum. We sought to improve the behaviour of the autonomous agents by changing the information passed to them, while maintaining the agent’s internal parameters constant (learning rate, discount factors, decay rate, etc.), instead of the classical approach of tuning the agent’s internal parameters. The influence of changes on the state set and the action set on an agent’s capability to solve the Cart-pole problem was studied. We have studied typical behaviour of reinforcement learning agents applied to the classic BOXES model and a new form of characterizing the environment was proposed using the notion of convergence towards a reference value. We demonstrate the gain in performance of this new method applied to a Q-Learning agent.

Proof in classroom social practice

How does the construction of proof relate to the social practice developed in the mathematics classroom? This report addresses the role of diagrams in order to focus the complementarity of participation and reification in the process of constructing a proof and negotiating its meaning. The discussion is based on the analysis of the mathematical practice developed by a group of four 9th grade students and is inspired by the social theory of learning

MDAI: Model based Design in Automobile Industry

It is proposed a new approach based on a methodology, assisted by a tool, to create new products in the automobile industry based on previous defined processes and experiences inspired on a set of best practices or principles: it is based on high-level models or specifications; it is component-based architecture centric; it is based on generative programming techniques. This approach follows in essence the MDA (Model Driven Architecture) philosophy with some specific characteristics. We propose a repository that keeps related information, such as models, applications, design information, generated artifacts and even information concerning the development process itself (e.g., generation steps, tests and integration milestones). Generically, this methodology receives the users' requirements to a new product (e.g., functional, non-functional, product specification) as its main inputs and produces a set of artifacts (e.g., design parts, process validation output) as its main output, that will be integrated in the engineer design tool (e.g. CAD system) facilitating the work.

Direct multisearch for multiobjective optimization

In practical applications of optimization it is common to have several conflicting objective functions to optimize. Frequently, these functions are subject to noise or can be of black-box type, preventing the use of derivative-based techniques. We propose a novel multiobjective derivative-free methodology, calling it direct multisearch (DMS), which does not aggregate any of the objective functions. Our framework is inspired by the search/poll paradigm of direct-search methods of directional type and uses the concept of Pareto dominance to maintain a list of nondominated points (from which the new iterates or poll centers are chosen). The aim of our method is to generate as many points in the Pareto front as possible from the polling procedure itself, while keeping the whole framework general enough to accommodate other disseminating strategies, in particular, when using the (here also) optional search step. DMS generalizes to multiobjective optimization (MOO) all direct-search methods of directional type. We prove under the common assumptions used in direct search for single objective optimization that at least one limit point of the sequence of iterates generated by DMS lies in (a stationary form of) the Pareto front. However, extensive computational experience has shown that our methodology has an impressive capability of generating the whole Pareto front, even without using a search step. Two by-products of this paper are (i) the development of a collection of test problems for MOO and (ii) the extension of performance and data profiles to MOO, allowing a comparison of several solvers on a large set of test problems, in terms of their efficiency and robustness to determine Pareto fronts.

Instrumentos de apoio à gestão estratégica e ao desempenho organizacional dos fisioterapeutas em unidades privadas de fisioterapia

Mestrado em Intervenção Sócio-Organizacional na Saúde - Área de especialização: Políticas de Administração e Gestão de Serviços de Saúde.

Políticas de intervenção prioritária em Portugal: novas políticas, novas práticas?

Em Portugal, no final da década de 90 do século XX, começaram a ser desenvolvidas estratégias de discriminação positiva visando garantir o cumprimento da escolaridade obrigatória e a luta contra a exclusão escolar e social, designadamente nas periferias das grandes cidades. É neste contexto que surgem as escolas e os Territórios Educativos de Intervenção Prioritária (TEIP) pelo Despacho nº147-B/ME/96, de 1 de Agosto de 1996. Este programa, inicialmente inspirado nas zonas de intervenção prioritárias francesas, visava a intervenção de vários parceiros locais (professores, alunos, pessoal não docente, associações de pais, autarquias locais, associações culturais e associações recreativas) na elaboração do Projeto Educativo. Com o XVII Governo Constitucional o programa foi redefinido passando a incluir novas vertentes: necessidade de existência de um projeto educativo próprio; consultadoria externa; avaliação periódica de resultados em diferentes domínios (taxas de insucesso e abandono escolar, assiduidade, comportamento, participação, inovações organizacionais, parcerias educativas estabelecidas no âmbito do Programa, etc.). Foi também alargado a todo o território nacional, envolvendo atualmente cento e cinco agrupamentos escolares. Com esta apresentação visamos analisar se as novas políticas e diretrizes, no domínio da educação prioritária, contribuíram para a emergência de novas estratégias pedagógicas, organizacionais e de envolvimento comunitário. Os elementos em que basearemos a nossa análise serão os seguintes: (i) relatório nacional do programa TEIP (2010-2011); (ii) relatórios do programa de avaliação externa das escolas; (iii) entrevistas realizadas aos atores locais, designadamente a coordenadores e consultores dos projetos TEIP. As conclusões da nossa comunicação centrar-se-ão no papel dos atores locais no desenvolvimento do Programa TEIP e no impacto deste programa na melhoria dos resultados académicos, na diminuição da indisciplina e violência escolar e na construção de percursos de vida que contrariem as tendências para a exclusão escolar e social.

A denoising approach for iterative side information creation in distributed video coding

In distributed video coding, motion estimation is typically performed at the decoder to generate the side information, increasing the decoder complexity while providing low complexity encoding in comparison with predictive video coding. Motion estimation can be performed once to create the side information or several times to refine the side information quality along the decoding process. In this paper, motion estimation is performed at the decoder side to generate multiple side information hypotheses which are adaptively and dynamically combined, whenever additional decoded information is available. The proposed iterative side information creation algorithm is inspired in video denoising filters and requires some statistics of the virtual channel between each side information hypothesis and the original data. With the proposed denoising algorithm for side information creation, a RD performance gain up to 1.2 dB is obtained for the same bitrate.

Da comunicação popular

As manifestações públicas de cultura popular têm sido abordadas por diferentes áreas do conhecimento (antropologia, sociologia, história, etnografia e outras), mas as ciências da comunicação têm-lhes dado relativamente menos atenção. Do estudo de festas populares, sobretudo na investigação literária da sua matriz religiosa, passamos à investigação e à análise dos processos comunicacionais destas manifestações. O encontro com uma nova área das ciências da comunicação, a folkcomunicação, foi decisivo para a opção por paradigmas e instrumentos de análise que nos têm apoiado na investigação em curso sobre comunicação popular. Este texto tem como principal objectivo apresentar a origem e a evolução desta teoria comunicacional, Folkcomunicação, teoria inspirada na Escola de Chicago. Trata-se de um artigo teórico/conceptual, resultado de pesquisa bibliográfica e análise do Estado da Arte em relação à cultura popular e à folkcomunicação.

Da comunicação popular

As manifestações públicas de cultura popular têm sido abordadas por diferentes áreas do conhecimento (antropologia, sociologia, história, etnografia e outras), mas as ciências da comunicação têm-lhes dado relativamente menos atenção. Do estudo de festas populares, sobretudo na investigação literária da sua matriz religiosa, passámos à investigação e à análise dos processos comunicacionais destas manifestações. O encontro com uma nova área das ciências da comunicação, a folkcomunicação, foi decisivo para a opção por paradigmas e instrumentos de análise que nos têm apoiado na investigação em curso sobre comunicação popular. Este texto tem como principal objectivo apresentar a origem e a evolução desta teoria comunicacional, Folkcomunicação, teoria inspirada na Escola de Chicago. Trata-se de um artigo teórico/conceptual, resultado de pesquisa bibliográfica e análise do Estado da Arte em relação à cultura popular e à folkcomunicação.

Síntese e caracterização de redes metalo-orgânicas de fármacos

Trabalho Final de Mestrado para obtenção do grau de Mestre em Engenharia Química e Biológica

As remisturas satíricas no YouTube: criatividade e subversão nas lutas de poder simbólico e cultural

O YouTube é descrito como uma “comunidade” em que os seus membros fazem vídeos em conjunto, vêem as criações vídeo uns dos outros, são inspirados por esses vídeos, comentam-nos e partilham-nos. Este artigo foca-se nas práticas vídeo de remistura desenvolvidas no campo da política, no seu sentido mais estrito, envolvendo actores e temáticas tradicionalmente consideradas desta esfera, mas também no sentido mais lato, enquanto respeitante às lutas de poder que marcam a vida social, especialmente no que se refere às lutas de poder simbólico e cultural. A remistura com fins de crítica política proporciona a exposição tanto das estratégias dos actores políticos, como do funcionamento interno dos media e das relações entre ambos. Estas práticas vídeo contributivas implicam dois processos distintos: primeiro, a partilha de um vasto quadro referencial, ligando a construção de sentido a um carácter intertextual no ambiente online; e segundo, procedente da digitalização, a transformação de imagens, palavras e sons em elementos prontos a utilizar de uma linguagem multimédia que conduz a formas avançadas de pastiche e paródia.

Sistema de visão para aterragem automática de UAV

Dissertação para obtenção do grau de Mestre em Engenharia Electrotécnica Ramo de Automação e Electrónica Industrial

Os millennials em Portugal: estudo exploratório a partir de um coorte etário sobre engagement consumidor-marca

Dissertação apresentada à Escola Superior de Comunicação Social como parte dos requisitos para obtenção de grau de mestre em Publicidade e Marketing.

A Perturbation and Observation Routine Used To Control A Power Converter

This paper presents a programable perturbation and observation control implementation for a wind generation system and its power electronic converter. The objective of the method in this particular application is to adjust the power delivered to charge a battery to its maximum and allowable value, function of the real values of several parameters and their continuous variation, the most important the wind velocity and the turbine efficiency. Also, to improve the power throughput and to use the turbine and generator marginal zones of operation, an unusual power converter is used, allowing a wide range for the input voltage values. The implemented control is continuously measuring the actual power and looks for a new and powerful operation point. © 2014 IEEE.

O auteur a ver-se a si mesmo ao espelho: as alegorias do enunciador em Jean Cocteau

ABSTRACT - Jean Cocteau, French cinema auteur avant la lettre, has consecrated his uniqueness to the defense of the “poet” and the promotion of its artistic ideals, before the French Nouvelle Vague inspired the break away from the filmic tradition and ahead of the eulogistic tendency to consider the director the undisputed creative entity of the filmmaking process. The Orphic trilogy expresses Cocteau’s cinematic philosophy in action. In other words, it reveals the way by which the creative entity affirms itself as the major filmic enunciator, through an allegorical relationship with vision. Therefore, Cocteau’s self-reflexive metacinema conjoins, in a fertile attunement, the starting point and the ultimate goal, the creation and the reception. Without being exactly a cinema about the cinema, this artistic practice is, nonetheless, very much with the cinema, feeding as it does on its essence. The films Le Sang d’un poète (“The Blood of a Poet”, 1932), Orphée (“Orpheus”, 1950) and Le Testament d’Orphée, ou ne me demandez pas pourquoi! (“Testament of Orpheus”, 1960) recreate, in allegorical form, the double creative function: the look of the directing entity reflects the gaze of the observer, just as this one always restores the presence of the creator. In short: Cocteau’s films, more than anyone else’s, deliberately reflect its auteur as enunciator.