Cost dependent strategy for electricity markets bidding based on adaptive reinforcement learning

Electricity markets are complex environments, involving a large number of different entities, playing in a dynamic scene to obtain the best advantages and profits. MASCEM is a multi-agent electricity market simulator to model market players and simulate their operation in the market. Market players are entities with specific characteristics and objectives, making their decisions and interacting with other players. MASCEM provides several dynamic strategies for agents’ behavior. This paper presents a method that aims to provide market players with strategic bidding capabilities, allowing them to obtain the higher possible gains out of the market. This method uses a reinforcement learning algorithm to learn from experience how to choose the best from a set of possible bids. These bids are defined accordingly to the cost function that each producer presents.

MASCEM: electricity markets simulation with strategic agents

Electricity markets are complex environments, involving numerous entities trying to obtain the best advantages and profits while limited by power-network characteristics and constraints.1 The restructuring and consequent deregulation of electricity markets introduced a new economic dimension to the power industry. Some observers have criticized the restructuring process, however, because it has failed to improve market efficiency and has complicated the assurance of reliability and fairness of operations. To study and understand this type of market, we developed the Multiagent Simulator of Competitive Electricity Markets (MASCEM) platform based on multiagent simulation. The MASCEM multiagent model includes players with strategies for bid definition, acting in forward, day-ahead, and balancing markets and considering both simple and complex bids. Our goal with MASCEM was to simulate as many market models and player types as possible. This approach makes MASCEM both a short- and mediumterm simulation as well as a tool to support long-term decisions, such as those taken by regulators. This article proposes a new methodology integrated in MASCEM for bid definition in electricity markets. This methodology uses reinforcement learning algorithms to let players perceive changes in the environment, thus helping them react to the dynamic environment and adapt their bids accordingly.

A new approach for multi-agent coalition formation and management in the scope of electricity markets

This paper presents a new methodology for the creation and management of coalitions in Electricity Markets. This approach is tested using the multi-agent market simulator MASCEM, taking advantage of its ability to provide the means to model and simulate VPP (Virtual Power Producers). VPPs are represented as coalitions of agents, with the capability of negotiating both in the market, and internally, with their members, in order to combine and manage their individual specific characteristics and goals, with the strategy and objectives of the VPP itself. The new features include the development of particular individual facilitators to manage the communications amongst the members of each coalition independently from the rest of the simulation, and also the mechanisms for the classification of the agents that are candidates to join the coalition. In addition, a global study on the results of the Iberian Electricity Market is performed, to compare and analyze different approaches for defining consistent and adequate strategies to integrate into the agents of MASCEM. This, combined with the application of learning and prediction techniques provide the agents with the ability to learn and adapt themselves, by adjusting their actions to the continued evolving states of the world they are playing in.

Bid definition method for electricity markets based on an adaptive multiagent system

Electricity markets are complex environments with very particular characteristics. MASCEM is a market simulator developed to allow deep studies of the interactions between the players that take part in the electricity market negotiations. This paper presents a new proposal for the definition of MASCEM players’ strategies to negotiate in the market. The proposed methodology is multiagent based, using reinforcement learning algorithms to provide players with the capabilities to perceive the changes in the environment, while adapting their bids formulation according to their needs, using a set of different techniques that are at their disposal. Each agent has the knowledge about a different method for defining a strategy for playing in the market, the main agent chooses the best among all those, and provides it to the market player that requests, to be used in the market. This paper also presents a methodology to manage the efficiency/effectiveness balance of this method, to guarantee that the degradation of the simulator processing times takes the correct measure.

Strategic bidding methodology for electricity markets using adaptive learning

The very particular characteristics of electricity markets, require deep studies of the interactions between the involved players. MASCEM is a market simulator developed to allow studying electricity market negotiations. This paper presents a new proposal for the definition of MASCEM players’ strategies to negotiate in the market. The proposed methodology is implemented as a multiagent system, using reinforcement learning algorithms to provide players with the capabilities to perceive the changes in the environment, while adapting their bids formulation according to their needs, using a set of different techniques that are at their disposal. This paper also presents a methodology to define players’ models based on the historic of their past actions, interpreting how their choices are affected by past experience, and competition.

Multi-agent negotiation for coalition formation and management in electricity markets

Negotiation is a fundamental tool for reaching understandings that allow each involved party to gain an advantage for themselves by the end of the process. In recent years, with the increasing of compe-titiveness in most sectors, negotiation procedures become present in practically all of them. One particular environment in which the competitiveness has been increasing exponentially is the electricity markets sector. This work is directed to the study of electricity markets’ partici-pating entities interaction, namely in what concerns the formation, management and operation of aggregating entities – Virtual Power Players (VPPs). VPPs are responsible for managing coalitions of market players with small market negotiating influence, which take strategic advantage in entering such aggregations, to increase their negotiating power. This chapter presents a negotiation methodology for the creation and management of coalitions in Electricity Markets. This approach is tested using MASCEM, taking advantage of its ability to provide the means to model and simulate VPPs. VPPs are represented as coalitions of agents, with the capability of negotiating both in the market, and internally, with their members, in order to combine and manage their individual specific characteristics and goals, with the strategy and objectives of the VPP itself.

Multilevel negotiation in smart grids for VPP management of distributed resources

A multilevel negotiation mechanism for operating smart grids and negotiating in electricity markets considers the advantages of virtual power player management.

Dinâmicas e relações intra-organizacionais nos cuidados às crianças / adolescentes com diabetes mellitus tipo 1

Mestrado em Intervenção Sócio-Organizacional na Saúde. Área de especialização: Políticas de Administração e Gestão dos Serviços de Saúde.

O valor-notícia de celebridades desportivas: o caso de José Mourinho

Dissertação apresentada à Escola Superior de Comunicação Social como parte dos requisitos para obtenção de grau de mestre em Jornalismo.

O Balanced Scorecard como instrumento de gestão estratégica: sua aplicabilidade no Instituto Superior de Gestão Financeira da Segurança Social, I.P.

Pretende-se com esta dissertação efectuar um estudo dos conceitos associados ao sistema Balanced Scorecard e como este agrupa e articula os vários indicadores financeiros e não financeiros em quatro perspectivas, a sua aplicabilidade em grandes ou pequenas organizações, qualquer que seja o seu âmbito de actuação, privada ou pública, com ou sem fins lucrativos e a sua importância para a gestão estratégica. De facto, as mudanças tecnológicas, socioculturais e económicas que se têm verificado nas últimas décadas, têm impelido as organizações a adaptarem-se a um novo mundo global e competitivo. Assim, desde 1990 que têm surgido diversos conteúdos bibliográficos e divulgações em conferências dando ênfase à eficácia da sua adopção, com reflexos visíveis na gestão das empresas e organizações do sector público que optam pela implementação deste instrumento que articula a estratégia com a gestão. A aderência à realidade através de um Estudo de Caso aplicado à implementação do Balanced Scorecard no Instituto de Gestão Financeira da Segurança Social, I. P. irá dar uma forte consistência ao desenvolvimento teórico a efectuar na primeira parte da dissertação.

O conceito da qualidade nos produtos à base de Ginkgo biloba comercializados em Portugal

O extracto de Ginkgo biloba é o produto fitoterápico mais vendido na Europa. Em Portugal e muitos países, a maioria dos produtos à base de plantas são comercializados como suplementos alimentares, não estando garantidos, parâmetros de qualidade, segurança e eficácia. Realizouse um estudo, com recolha de informações, tendo por base uma amostra de 50 produtos à base de ginkgo. Da análise, verificou-se que 94% podiam ser encontrados à venda na internet, e desse total, 89% possuíam informação on-line quanto à composição. Apenas 40% referem a utilização do extracto padronizado de ginkgo e muitos recomendam doses superiores às referidas como terapêuticas.

Acção do vento em edifícios altos

A acção do vento é um dos factores mais importantes a considerar na análise do comportamento de estruturas de grandes dimensões e elevada flexibilidade. Numa construção, a eficácia, a segurança e os custos da construção, são factores que estão directamente relacionados com a exactidão dos cálculos do projecto, devendo a acção do vento ser objecto de uma avaliação detalhada. O quadro de Países da Comunidade Europeia criou o eurocódigo (procedimento simplificado e determinístico) que é aplicado a todos os Países membro. Em edíficios, cuja altura supere em duas vezes o valor da largura, o código sugere a divisão da altura do edifício em três zonas, sendo a zona central subdividida em bandas. O código não define o número de bandas, ou as respetivas alturas, a considerar para a realização do cálculo da zona central. Pretende-se com este trabalho contribuir para o esclarecimento do número e dimensão dessas bandas horizontais (hstrip), a adoptar no cálculo. Como objecto do estudo são utilizados edifícios, com diferentes alturas, geometrias e características estruturais. Como ferramenta é utilizada a metodologia do código, tendo sido elaborada uma folha de cálculo para o processamento de dados. Conseguiu-se assim representar o perfil do desvio percentual em relação ao valor óptimo, em função do número de faixas horizontais pretendido para realizar cálculo.

Development of novel ionic liquids based on ampicillin

Novel ionic liquids containing ampicillin as an active pharmaceutical ingredient anion were prepared with good yields by using a new, efficient synthetic procedure based on the neutralization of a moderately basic ammonia solution of ampicillin with different organic cation hydroxides. The relevant physical and thermal properties of these novel ionic liquids based on ampicillin were also evaluated.

Materiais estruturados: qual o seu papel na aprendizágem dos primeiros números?

Dissertação apresentada para obtenção do grau de Mestre em Educação Matemática na Educação Pré-Escolar e no 1.º e 2.º Ciclos do Ensino Básico

Efeito do conteúdo energético da alimentação em colunas de destilação reativa

O objetivo desta tese final de mestrado reside na avaliação económica da viabilidade de utilização de alimentações com temperatura superior ao ponto de ebulição em colunas de destilação reativa (CDR). Considerando diversos estudos efetuados sobre a qualidade da alimentação em CDR, verificou-se que a utilização de valores de temperatura fora da gama tradicionalmente usada na metátese de olefinas (2C5H10 C4H8 + C6H12), poderia trazer vantagens ao nível das especificações e da energia consumida. Foi feita a comparação da avaliação económica realizada anteriormente de seis configurações otimizadas com base no princípio da Conservação de Energia e a avaliação económica das mesmas configurações considerando os dois primeiros princípios da termodinâmica A abordagem termodinâmica incidiu na análise dos perfis dos gráficos Estágio-Défice de entalpia e nos perfis de Estágios-Perdas de exergia gerados pela ferramenta Aspen Plus Targeting, que permitiu a identificação de especificações da coluna passíveis de ser melhoradas/alteradas nomeadamente: - localização do estágio de alimentação; - alterações na razão de refluxo; - alterações da temperatura de alimentação. Verificaram-se diminuições nos custos anuais (TAC) em todos os casos, pela alteração dos estágios da alimentação das correntes quente e fria, da razão de refluxo e da temperatura de alimentação da corrente quente, mantendo a pureza do produto obtido. A irreversibilidade de todos os casos diminuiu devido a uma melhoria na performance termodinâmica resultado das alterações introduzidas. Este trabalho mostra que a análise económica feita anteriormente no que diz respeito aos custos anuais de equipamento e utilidades (TAC) e catalisador, tendo como referência indicadores de custo, pode ser ajustada para valores inferiores se se considerar uma abordagem termodinâmica do processo.