Autonomous Pricing using Policy-Gradient Reinforcement Learning

Nella letteratura economica e di teoria dei giochi vi è un dibattito aperto sulla possibilità di emergenza di comportamenti anticompetitivi da parte di algoritmi di determinazione automatica dei prezzi di mercato. L'obiettivo di questa tesi è sviluppare un modello di reinforcement learning di tipo actor-critic con entropy regularization per impostare i prezzi in un gioco dinamico di competizione oligopolistica con prezzi continui. Il modello che propongo esibisce in modo coerente comportamenti cooperativi supportati da meccanismi di punizione che scoraggiano la deviazione dall'equilibrio raggiunto a convergenza. Il comportamento di questo modello durante l'apprendimento e a convergenza avvenuta aiuta inoltre a interpretare le azioni compiute da Q-learning tabellare e altri algoritmi di prezzo in condizioni simili. I risultati sono robusti alla variazione del numero di agenti in competizione e al tipo di deviazione dall'equilibrio ottenuto a convergenza, punendo anche deviazioni a prezzi più alti.

Trajectory Planning in UAV-Aided Wireless Networks Via Reinforcement Learning

This thesis is focused on the design of a flexible, dynamic and innovative telecommunication's system for future 6G applications on vehicular communications. The system is based on the development of drones acting as mobile base stations in an urban scenario to cope with the increasing traffic demand and avoid network's congestion conditions. In particular, the exploitation of Reinforcement Learning algorithms is used to let the drone learn autonomously how to behave in a scenario full of obstacles with the goal of tracking and serve the maximum number of moving vehicles, by at the same time, minimizing the energy consumed to perform its tasks. This project is an extraordinary opportunity to open the doors to a new way of applying and develop telecommunications in an urban scenario by mixing it to the rising world of the Artificial Intelligence.

Chitosan Nanoparticles Loaded The Herbicide Paraquat: The Influence Of The Aquatic Humic Substances On The Colloidal Stability And Toxicity.

Polymeric nanoparticles have been developed for several applications, among them as carrier system of pesticides. However, few studies have investigated the fate of these materials in the environment in relation to colloidal stability and toxicity. In nature, humic substances are the main agents responsible for complexation with metals and organic compounds, as well as responsible for the dynamics of these nanoparticles in aquatic and terrestrial environments. In this context, the evaluation of the influence of aquatic humic substances (AHS) on the colloidal stability and toxicity of polymeric nanoparticles of chitosan/tripolyphosphate with or without paraquat was performed. In this study, the nanoparticles were prepared by the ionic gelation method and characterized by size distribution measurements (DLS and NTA), zeta potential, infrared and fluorescence spectroscopy. Allium cepa genotoxicity studies and ecotoxicity assays with the alga Pseudokirchneriella subcapitata were used to investigate the effect of aquatic humic substances (AHS) on the toxicity of this delivery system. No changes were observed in the physical-chemical stability of the nanoparticles due to the presence of AHS using DLS and NTA techniques. However some evidence of interaction between the nanoparticles and AHS was observed by infrared and fluorescence spectroscopies. The ecotoxicity and genotoxicity assays showed that humic substances can decrease the toxic effects of nanoparticles containing paraquat. These results are interesting because they are important for understanding the interaction of these nanostructured carrier systems with species present in aquatic ecosystems such as humic substances, and in this way, opening new perspectives for studies on the dynamics of these carrier systems in the ecosystem.

Uso de membranas de Nafion para a construção de sensores ópticos para medidas de pH

The behaviour of Nafion® polymeric membranes containing acid-base dyes, bromothymol blue (BB) and methyl violet (MV), were studied aiming at constructing an optical sensor for pH measurement. BB revealed to be inadequate for developing sensing phases due to the electrostatic repulsion between negative groups of their molecules and the negative charge of the sulfonate group of the Nafion®, which causes leaching of the dye from the membrane. On the other hand, MV showed to be suitable due to the presence of positive groups in its structure. The membrane prepared from a methanolic solution whose Nafion®/dye molar ratio was 20 presented the best analytical properties, changing its color from green to violet in the pH range from 0.6 to 3.0. The membrane can be prepared with good reproducibility, presenting durability of ca. 6 months and response time of 22 s, making possible its use for pH determination in flow analysis systems.

Recentes avanços e novas perspectivas dos eletrodos íon-seletivos

This paper describes the recent progress in the development of polymeric membranes for ion-selective electrodes. The importance of knowing the mechanism of potential development in membranes for ion-selective electrodes to reach lower detection limits and improve selectivity are discussed. Recent advances and future trends of research on ion-selective electrodes are also reported.

A relevante potencialidade dos centros básicos nitrogenados disponíveis em polímeros inorgânicos e biopolímeros na remoção catiônica

This review reports the application of inorganic and organic polymeric materials for cation removal by using nitrogenated basic centers. The data demonstrate the importance of the desired groups when free or immobilized on natural or synthesized inorganic polymers through silanol groups. Thus, the most studied silica gel is followed by natural crysotile and talc polymers, and the synthesized mesopore silicas, talc-like, silicic acids, phosphates and phyllosilicates. The organic natural biopolymeric chitin and cellulose were chemically modified to improve the availability of the amine groups or the reactivity with desirable molecules to enlarge the content of basic centers. The cation removal takes place at the solid/liquid interface and some interactive effects have their thermodynamic data determined.

Blendas de PHB e seus copolímeros: miscibilidade e compatibilidade

Poly(hydroxybutyrate) and its copolymers are linear polyesters behaving as conventional thermoplastic materials. However, they are totally biodegradable and produced by a wide variety of bacteria from renewable sources. Some properties and high production cost are still preventing future applications. In an attempt to improve the properties and to reduce cost blending PHB with others polymeric materials is one of the most efficient method. In this paper, miscibility, compatibility, morphological and mechanical aspects of PHB blends will be reviewed. An extensive revision over twenty last years was realized about works of blends based on PHB and its copolymers.

O comportamento de crianças durante atendimento odontológico

This research intended to investigate the use of diazepam in conjunction with behavioral strategies to manage uncooperative behavior of child dental patients. The 6 participants received dental treatment during 9 sessions. Using a double-blind design, children received placebo or diazepam and at the same time were submitted to behavior management produces (distraction, explanation, reinforcement and set rule and limits). All sessions were recorded in video-tapes biped in 15 seconds intervals, in which observers recorded child's (crying, body and/or head movements, escape and avoidance) and dentist's behavior. The results indicated that diazepam, considering the used dose, was only effective with one subject. The other participants didn't permit the treatment and showed an increase in their resistance. The behavioral preparation strategies for dental treatment should have been more precisely planned in order to help the child to face the real dental treatment conditions mainly in the first sessions avoiding to reinforce inappropriate behaviors.

O comportamento de crianças em tratamento odontológico: intervenção psicofarmacológica

The present investigation evaluated the effects of diazepam used to manage uncooperative behavior of child dental patients. Six participants received placebo or diazepam (0,3 mg/kg weight) before formal dental treatment at total 54 sessions that were all recorded in videotapes. The analysis of recorded child (crying, body and/or head movements, escape and avoidance) and dentist's behavior management procedures (distraction, explanation, positive reinforcement) indicates no differences by using a double-blind Wilcoxon design (p>0.05). It is suggested the necessity of methodological refinement in studies that combine psychological and pharmacological handling strategies.

Barreiras socio-culturais e lazer das pessoas portadoras de deficiencia fisica : um estudo do grupo Fraternidade Cristã de Doença e Deficiencia de Campinas, SP

Universidade Estadual de Campinas. Faculdade de Educação Física

In vitro evaluation of an alternative method to bond molar tubes

Despite the advances in bonding materials, many clinicians today still prefer to place bands on molar teeth. Molar bonding procedures need improvement to be widely accepted clinically. OBJECTIVE: The purpose of this study was to evaluate the shear bond strength when an additional adhesive layer was applied on the occlusal tooth/tube interface to provide reinforcement to molar tubes. MATERIAL AND METHODS: Sixty third molars were selected and allocated to the 3 groups: group 1 received a conventional direct bond followed by the application of an additional layer of adhesive on the occlusal tooth/tube interface, group 2 received a conventional direct bond, and group 3 received a conventional direct bond and an additional cure time of 10 s. The specimens were debonded in a universal testing machine. The results were analyzed statistically by ANOVA and Tukey's test (α=0.05). RESULTS: Group 1 had a significantly higher (p<0.05) shear bond strength compared to groups 2 and 3. No difference was detected between groups 2 and 3 (p>0.05). CONCLUSIONS: The present in vitro findings indicate that the application of an additional layer of adhesive on the tooth/tube interface increased the shear bond strength of the bonded molar tubes.

Polímeros sintéticos biodegradáveis: matérias-primas e métodos de produção de micropartículas para uso em drug delivery e liberação controlada

Micropartículas produzidas a partir de polímeros sintéticos têm sido amplamente utilizadas na área farmacêutica para encapsulação de princípios ativos. Essas micropartículas apresentam as vantagens de proteção do princípio ativo, mucoadesão e gastrorresistência, melhor biodisponibilidade e maior adesão do paciente ao tratamento. Além disso, utiliza menores quantidade de princípio ativo para obtenção do efeito terapêutico proporcionando diminuição dos efeitos adversos locais, sistêmicos e menor toxidade. Os polímeros sintéticos empregados na produção das micropartículas são classificados biodegradáveis ou não biodegradáveis, sendo os biodegradáveis mais utilizados por não necessitam ser removidos cirurgicamente após o término de sua ação. A produção das micropartículas poliméricas sintéticas para encapsulação tanto de ativos hidrofílicos quanto hidrofóbicos pode ser emulsificação por extração e/ou evaporação do solvente; coacervação; métodos mecânicos e estão revisados neste artigo evidenciando as vantagens, desvantagens e viabilidade de cada metodologia. A escolha da metodologia e do polímero sintético a serem empregados na produção desse sistema dependem da aplicação terapêutica requerida, bem como a simplicidade, reprodutibilidade e factibilidade do aumento de escala da produção.

Resíduos de sisal como reforço em compósitos de polipropileno virgem e reciclado

Foram estudadas as propriedades térmicas e mecânicas de compósitos de polipropileno, virgem e reciclado, reforçados com 30% em massa de fibras residuais de sisal, assim como o perfil de processamento e a morfologia da matriz polimérica. Para tanto, foram determinadas a resistência à tração, o módulo de Young, alongamento na ruptura, e energia de impacto. As amostras também foram caracterizadas por MEV, DMTA e TG. Para ambos os compósitos de polipropileno, virgem e reciclado, com a adição das fibras, o alongamento na ruptura mostrou uma queda significativa, enquanto que a resistência à tração não sofreu grandes variações. Houve um aumento significativo nos valores de tração na ruptura e de energia de impacto com a adição das fibras de sisal na matriz de polipropileno. As análises térmicas mostraram ligações secundárias, como as ligações polares, entre as fibras e a matriz, concordando com o comportamento mecânico dos compósitos. Constatou-se que a temperatura de transição vítrea não variou após a adição da fibra.

Nova técnica para o fechamento dinâmico da parede abdominal

Os avanços nos cuidados com o paciente traumatizado e com infecções abdominais graves são responsáveis por um número crescente de peritoneostomias. O manejo desta entidade é complexo e várias técnicas foram descritas para seu tratamento. Recentemente foi introduzido na literatura o conceito de fechamento dinâmico da parede abdominal, com elevadas taxas de sucesso. O objetivo deste trabalho é de servir como nota prévia de uma nova abordagem para o tratamento das peritoneostomias, desenvolvida no Hospital Universitário da Universidade de São Paulo. Trata-se de um procedimento simples e de baixo custo, facilmente realizado por cirurgião geral. O procedimento também foi utilizado como reforço em fechamentos abdominais tensos, de maneira profilática. O procedimento é descrito em detalhes, assim como os resultados nos primeiros pacientes. Apesar de promissora, refinamentos técnicos e estudos complementares são necessários para a validação da técnica.

Avaliação da cicatrização de feridas em dorso de ratos tratados com mitomicina C tópica e posterior reforço com injetável

Estudo experimental em animais. A mitomicina C vem sendo usada como inibidor de fibroblastos, acarretando, com isso, diminuição do processo cicatricial em feridas cirúrgicas. OBJETIVO: Este trabalho visa avaliar o uso de Mitomicina C para diminuir o processo cicatricial, através de seu uso tópico com reforços posteriores injetáveis. MATERIAL E MÉTODOS: Foi usado um modelo de feridas em dorso de ratos, com retirada circular da pele e cicatrização por segunda intenção. Foram usados 18 ratos, divididos em três grupos: controle; com uso tópico; e com reforço de mitomicina C injetável, mensalmente e por 2 meses. Após 3 meses os animais foram sacrificados e as cicatrizes retiradas cirurgicamente e submetidas a estudo histológico. RESULTADOS: Notou-se sob vários critérios que a cicatrização com o uso tópico é menos intensa, mas ao se usar o reforço injetável os parâmetros voltam a ser comparados ao do grupo controle. DISCUSSÃO: Acreditamos que a administração injetável de mitomicina C nas cicatrizes, pela sua elevada característica tóxica, acarreta destruição tecidual e neoformação cicatricial. CONCLUSÕES: A mitomicina C diminui o processo cicatricial quando usada topicamente, mas acarreta aumento da cicatrização quando nestas feridas são feitos reforços injetáveis.