Autonomous Pricing using Policy-Gradient Reinforcement Learning

Nella letteratura economica e di teoria dei giochi vi è un dibattito aperto sulla possibilità di emergenza di comportamenti anticompetitivi da parte di algoritmi di determinazione automatica dei prezzi di mercato. L'obiettivo di questa tesi è sviluppare un modello di reinforcement learning di tipo actor-critic con entropy regularization per impostare i prezzi in un gioco dinamico di competizione oligopolistica con prezzi continui. Il modello che propongo esibisce in modo coerente comportamenti cooperativi supportati da meccanismi di punizione che scoraggiano la deviazione dall'equilibrio raggiunto a convergenza. Il comportamento di questo modello durante l'apprendimento e a convergenza avvenuta aiuta inoltre a interpretare le azioni compiute da Q-learning tabellare e altri algoritmi di prezzo in condizioni simili. I risultati sono robusti alla variazione del numero di agenti in competizione e al tipo di deviazione dall'equilibrio ottenuto a convergenza, punendo anche deviazioni a prezzi più alti.

Factors affecting the mission time of an autonomous mobile robot: a theoretical and experimental investigation

I vantaggi dell’Industria 4.0 hanno stravolto il manufacturing. Ma cosa vuol dire "Industria 4.0"? Essa è la nuova frontiera del manufacturing, basata su princìpi che seguono i passi avanti dei sistemi IT e della tecnologia. Dunque, i suoi pilastri sono: integrazione, verticale e orizzontale, digitalizzazione e automazione. L’Industria 4.0 coinvolge molte aree della supply chain, dai flussi informativi alla logistica. In essa e nell’intralogistica, la priorità è sviluppare dei sistemi di material handling flessibili, automatizzati e con alta prontezza di risposta. Il modello ideale è autonomo, in cui i veicoli fanno parte di una flotta le cui decisioni sono rese decentralizzate grazie all'alta connettività e alla loro abilità di collezionare dati e scambiarli rapidamente nel cloud aziendale.Tutto ciò non sarebbe raggiungibile se ci si affidasse a un comune sistema di trasporto AGV, troppo rigido e centralizzato. La tesi si focalizza su un tipo di material handlers più flessibile e intelligente: gli Autonomous Mobile Robots. Grazie alla loro intelligenza artificiale e alla digitalizzazione degli scambi di informazioni, interagiscono con l’ambiente per evitare ostacoli e calcolare il percorso ottimale. Gli scenari dell’ambiente lavorativo determinano perdite di tempo nel tragitto dei robot e sono queste che dovremo studiare. Nella tesi, i vantaggi apportati dagli AMR, come la loro decentralizzazione delle decisioni, saranno introdotti mediante una literature review e poi l’attenzione verterà sull’analisi di ogni scenario di lavoro. Fondamentali sono state le esperienze nel Logistics 4.0 Lab di NTNU, per ricreare fisicamente alcuni scenari. Inoltre, il software AnyLogic sarà usato per riprodurre e simulare tutti gli scenari rilevanti. I risultati delle simulazioni verranno infine usati per creare un modello che associ ad ogni scenario rilevante una perdita di tempo, attraverso una funzione. Per questo saranno usati software di data analysis come Minitab e MatLab.

An optimal control tool for trajectory generation of autonomous drones

In the recent years, autonomous aerial vehicles gained large popularity in a variety of applications in the field of automation. To accomplish various and challenging tasks the capability of generating trajectories has assumed a key role. As higher performances are sought, traditional, flatness-based trajectory generation schemes present their limitations. In these approaches the highly nonlinear dynamics of the quadrotor is, indeed, neglected. Therefore, strategies based on optimal control principles turn out to be beneficial, since in the trajectory generation process they allow the control unit to best exploit the actual dynamics, and enable the drone to perform quite aggressive maneuvers. This dissertation is then concerned with the development of an optimal control technique to generate trajectories for autonomous drones. The algorithm adopted to this end is a second-order iterative method working directly in continuous-time, which, under proper initialization, guarantees quadratic convergence to a locally optimal trajectory. At each iteration a quadratic approximation of the cost functional is minimized and a decreasing direction is then obtained as a linear-affine control law, after solving a differential Riccati equation. The algorithm has been implemented and its effectiveness has been tested on the vectored-thrust dynamical model of a quadrotor in a realistic simulative setup.

Crowd-shipping and autonomous vehicles: an optimization model for the last mile delivery

Il seguente elaborato propone un modello innovativo per la gestione della logistica distributiva nell’ultimo miglio, congiungendo l’attività di crowd-shipping con la presenza di Autonomous Vehicles, per il trasporto di prodotti all’interno della città. Il crowd-shipping utilizza conducenti occasionali, i quali deviano il loro tragitto in cambio di una ricompensa per il completamento dell’attività. Dall’altro lato, gli Autonomous Vehicles sono veicoli elettrici a guida autonoma, in grado di trasportare un numero limitato di pacchi e dotati di un sistema di sicurezza avanzato per garantire la fiducia nel trasporto. In primo luogo, nel seguente elaborato verrà mostrato il modello di ottimizzazione che congiunge i due attori principali in un unico ambiente, dove sono presenti un numero determinato di prodotti da muovere. Successivamente, poiché il problema di ottimizzazione è molto complesso e il numero di istanze valutabili è molto basso, verranno presentate due soluzioni differenti. La prima riguarda la metaeuristica chiamata Ant System, che cerca di avvicinarsi alle soluzioni ottime del precedente modello, mentre la seconda riguarda l’utilizzo di operatori di Local Search, i quali permettono di valutare soluzioni per istanze molto più grandi rispetto alla metaeuristica. Infine, i due modelli euristici verranno utilizzati per analizzare uno scenario che cerca di riprodurre una situazione reale. Tale scenario tenta di allocare strategicamente le risorse presenti e permette di dimostrare che gli Autonomous Vehicles riescono a supportare gli Occasional Drivers anche quando il numero di prodotti trasportabili è elevato. Inoltre, le due entità proposte riescono a soddisfare la domanda, garantendo un servizio che nel futuro potrebbe sostituire il tradizionale sistema di logistica distributiva last mile.

Smart freight transport in urban areas: a crowd-shipping model using autonomous vehicles

L'avanzamento dell'e-commerce e l'aumento della densità abitativa nel centro città sono elementi che incentivano l'incremento della richiesta merci all'interno dei centri urbani. L'attenzione all'impatto ambientale derivante da queste attività operative è un punto focale oggetto di sempre maggiore interesse. Attraverso il seguente studio, l'obiettivo è definire attuali e potenziali soluzioni nell'ambito della logistica urbana, con particolare interesse alle consegne dell'ultimo miglio. Una soluzione proposta riguarda la possibilità di sfruttare la capacità disponibile nei flussi generati dalla folla per movimentare merce, pratica nota sotto il nome di Crowd-shipping. L'idea consiste nella saturazione di mezzi già presenti nella rete urbana al fine di ridurre il numero di veicoli commerciali e minimizzare le esternalità negative annesse. A supporto di questa iniziativa, nell'analisi verranno considerati veicoli autonomi elettrici a guida autonoma. La tesi è incentrata sulla definizione di un modello di ottimizzazione matematica, che mira a designare un network logistico-distributivo efficiente per le consegne dell'ultimo miglio e a minimizzare le distanze degli attori coinvolti. Il problema proposto rappresenta una variante del Vehicle Routing Problem con time windows e multi depots. Il problema è NP-hard, quindi computazionalmente complesso per cui sarà necessario, in fase di analisi, definire un approccio euristico che permetterà di ottenere una soluzione sub-ottima in un tempo di calcolo ragionevole per istanze maggiori. L'analisi è stata sviluppata nell'ambiente di sviluppo Eclipse, attraverso il risolutore Cplex, in linguaggio Java. Per poterne comprendere la validità, è prevista un'ultima fase in cui gli output del modello ottimo e dell'euristica vengono confrontati tra loro su parametri caratteristici. Bisogna tuttavia considerare che l' utilizzo di sistemi cyber-fisici a supporto della logistica non può prescindere da un costante sguardo verso il progresso.

Autonomous pagination for newspaper from a predefined plan

Description of the development of a product able to deliver an autonomous page construction from a predefined plan. The processes involve Machine Learning techniques for text fitting on shapes, Beam Search for associations and Deep Learning for autonomous cropping of images.

Spatial-temporal variability of the benthic communities in Ravenna harbour using Autonomous Reef Monitoring Structures (ARMS) with focus on Non-Indigenous Species (NIS)

A Non-Indigenous Species (NIS) is defined as an organism, introduced outside its natural past or present range of distribution by humans, that successfully survives, reproduces, and establish in the new environment. Harbors and tourist marinas are considered NIS hotspots, as they are departure and arrival points for numerous vessels and because of the presence of free artificial substrates, which facilitate colonization by NIS. To early detect the arrival of new NIS, monitoring benthic communities in ports is essential. Autonomous Reef Monitoring Structures (ARMS) are standardized passive collectors that are used to assess marine benthic communities. Here we use an integrative approach based on multiple 3-month ARMS deployment (from April 2021 to October 2022) to characterize the benthic communities (with a focus on NIS) of two sites: a commercial port (Harbor) and a touristic Marina (Marina) of Ravenna. The colonizing sessile communities were assessed using percentage coverage of the taxa trough image analyses and vagile fauna (> 2 mm) was identified morphologically using a stereomicroscope and light microscope. Overall, 97 taxa were identified and 19 of them were NIS. All NIS were already observed in port environments in the Mediterranean Sea, but for the first time the presence of the polychaete Schistomeringos cf. japonica (Annenkova, 1937) was observed; however molecular analysis is needed to confirm its identity. Harbor and Marina host significantly different benthic communities, with significantly different abundance depending on the sampling period. While the differences between sites are related to their different environmental characteristic and their anthropogenic pressures, differences among times seems related to the different life cycle of the main abundant species. This thesis evidenced that ARMS, together with integrative taxonomic approaches, represent useful tools to early detect NIS and could be used for a long-term monitoring of their presence.

Na "periferia" da quadra : educação fisica, cultura e sociabilidade na escola

Universidade Estadual de Campinas . Faculdade de Educação Física

Em busca da formação de individuos autonomos nas aulas de educação fisica

Universidade Estadual de Campinas . Faculdade de Educação Física

O esporte como manifestação de cultura e cidadania : o futebol de praia em Santos

Universidade Estadual de Campinas. Faculdade de Educação Física

Cooperação e autonomia : jogando em grupo e que se aprende

Universidade Estadual de Campinas . Faculdade de Educação Física

Ginastica ritmica : construindo uma metodologia

Universidade Estadual de Campinas . Faculdade de Educação Física

Scripts em cena: HIV e mercado sexual no contexto turístico

A atividade turística tem impacto também na saúde das populações de comunidades anfitriãs. Com base em estudo etnográfico e em 14 entrevistas com monitores(as) de turismo ambiental, o objetivo deste artigo é analisar como o cenário sexual no contexto do turismo e seus scripts sexuais constroem a vulnerabilidade de caiçaras às DSTs/HIV e ao mercado sexual. Scripts sexuais tradicionais operacionalizados num cenário de "curtição", "prazer", "desinibição sexual", evidenciaram desigualdades sociais entre caiçaras e turistas que ampliam a vulnerabilidade dos jovens às DSTs/HIV e à mercantilização de sua sexualidade. Os scripts sexuais femininos (passividade/ingenuidade) dificultavam a negociação do preservativo nas cenas sexuais coletadas; os "mais pró-ativos" eram interpretados como disponibilidade para "programas". Os scripts "não negar fogo", "catar as turistas" também ampliavam a vulnerabilidade dos rapazes. O contexto turístico constrói um cenário sexual singular e atravessa as trajetórias socioafetivas dos moradores. Seu impacto deve ser considerado por políticas e programas de saúde locais.

Da fotografia como arte à arte como fotografia: a experiência do Museu de Arte Contemporânea da USP na década de 1970

Este ensaio visa sistematizar os primeiros resultados de uma pesquisa, ainda em curso, sobre o processo de legitimação da fotografia pelo sistema de arte no Brasil, cujo foco principal é o museu. Os museus de arte da cidade de São Paulo foram escolhidos para dar início a essa investigação. Primeiramente, será abordada, em linhas gerais, a presença da fotografia no Museu de Arte Moderna de São Paulo e na Bienal de São Paulo, dada a vinculação de origem do Museu de Arte Contemporânea com essas duas instituições paulistanas. Na seqüência será analisada a formação do acervo fotográfico do Museu de Arte Contemporânea da Universidade de São Paulo durante a década de 1970. Por fim, esse percurso permitirá observar que a atuação de Walter Zanini, o primeiro diretor do Museu, e as particularidades da posição do MAC-USP no sistema de arte no Brasil naquele período resultaram no entendimento da fotografia prioritariamente no âmbito da arte contemporânea de caráter experimental e não como obra de arte autônoma, segundo os princípios da chamada fotografia artística.

Novas perspectivas na gestão do sistema de saúde da Espanha

Ao longo dos últimos vinte e cinco anos, a organização do sistema de saúde na Espanha vem adotando diversas medidas que reorientaram seu gerenciamento, melhoraram sua eficiência e aprimoraram seu sistema de financiamento, resultado de profundas reformas e da introdução de novos instrumentos de gestão. Este artigo é resultado de uma análise documental que objetivou descrever a trajetória de conformação do sistema de saúde espanhol e sua organização na contemporaneidade. Apresenta alguns determinantes históricos que tornaram possíveis as reformas no setor sanitário, como a descentralização para o nível das Comunidades Autônomas, a incorporação de mecanismos de coordenação e a integração e o financiamento dos novos e distintos formatos organizativos coexistentes no país. Além disso, identifica desafios que emergem no cenário atual do Sistema Nacional de Saúde, como o fenômeno da imigração, o avançado processo de transição demográfica, a crescente demanda por melhorias na qualidade da atenção e de incorporação tecnológica. Todos esses fatores influem na sustentabilidade do sistema, o que motivou a criação de mais um espaço para estabelecimentos de consensos sobre o papel fundamental do sistema sanitário para o Estado de Bem-Estar espanhol.