Reinforcement Learning With Function Approximation for Traffic Signal Control

We propose, for the first time, a reinforcement learning (RL) algorithm with function approximation for traffic signal control. Our algorithm incorporates state-action features and is easily implementable in high-dimensional settings. Prior work, e. g., the work of Abdulhai et al., on the application of RL to traffic signal control requires full-state representations and cannot be implemented, even in moderate-sized road networks, because the computational complexity exponentially grows in the numbers of lanes and junctions. We tackle this problem of the curse of dimensionality by effectively using feature-based state representations that use a broad characterization of the level of congestion as low, medium, or high. One advantage of our algorithm is that, unlike prior work based on RL, it does not require precise information on queue lengths and elapsed times at each lane but instead works with the aforementioned described features. The number of features that our algorithm requires is linear to the number of signaled lanes, thereby leading to several orders of magnitude reduction in the computational complexity. We perform implementations of our algorithm on various settings and show performance comparisons with other algorithms in the literature, including the works of Abdulhai et al. and Cools et al., as well as the fixed-timing and the longest queue algorithms. For comparison, we also develop an RL algorithm that uses full-state representation and incorporates prioritization of traffic, unlike the work of Abdulhai et al. We observe that our algorithm outperforms all the other algorithms on all the road network settings that we consider.

15-deoxyspergualin hinders physical interaction between basic residues of transit peptide in PfENR and Hsp70-1

The apicoplast of Plasmodium harbors several metabolic pathways. The enzymes required to perform these reactions are all nuclearly encoded and apicoplast targeted (NEAT) proteins. Plasmodium falciparum Enoyl-ACP Reductase (PfENR) is one such NEAT protein. The NEAT proteins have a transit peptide which is required for crossing the membranes of apicoplast. We studied the importance of basic residues like Arginine and Lysine within the transit peptide. Previous studies have suggested that all basic residues are essential for apicoplast trafficking. In this study, we demonstrate that only some of these residues are essential (K44, R48, K51, and R52), whereas others are dispensable (R40, K42, and K49). On mutating these specific residues, PfENR is not imported into the apicoplast and is mislocalized to the cytoplasm. We also demonstrate that these residues are also crucial for interaction with Hsp70-1, implying that interactions of Lysine 44, Arginine 48, Lysine 51, and Arginine 52 of the transit peptide with PfHsp70-1 are required for apicoplast trafficking. 15-Deoxyspergualin, which has earlier been proposed to interact with EEVD motif of PfHsp70-1 hinders the physical interaction between these cationic residues of PfENR and Hsp70-1. Hence, we propose that in the transport competent state of NEAT proteins some specific positively charged amino acids in the transit peptide interact with PfHsp70-1, and this interaction is essential for apicoplast targeting.

Design and Evaluation of a Robust Optical Beam-Interruption-Based Vehicle Classifier System

This paper presents the design and development of a novel optical vehicle classifier system, which is based on interruption of laser beams, that is suitable for use in places with poor transportation infrastructure. The system can estimate the speed, axle count, wheelbase, tire diameter, and the lane of motion of a vehicle. The design of the system eliminates the need for careful optical alignment, whereas the proposed estimation strategies render the estimates insensitive to angular mounting errors and to unevenness of the road. Strategies to estimate vehicular parameters are described along with the optimization of the geometry of the system to minimize estimation errors due to quantization. The system is subsequently fabricated, and the proposed features of the system are experimentally demonstrated. The relative errors in the estimation of velocity and tire diameter are shown to be within 0.5% and to change by less than 17% for angular mounting errors up to 30 degrees. In the field, the classifier demonstrates accuracy better than 97.5% and 94%, respectively, in the estimation of the wheelbase and lane of motion and can classify vehicles with an average accuracy of over 89.5%.

Multi-agent Reinforcement Learning for Traffic Signal Control

Optimal control of traffic lights at junctions or traffic signal control (TSC) is essential for reducing the average delay experienced by the road users amidst the rapid increase in the usage of vehicles. In this paper, we formulate the TSC problem as a discounted cost Markov decision process (MDP) and apply multi-agent reinforcement learning (MARL) algorithms to obtain dynamic TSC policies. We model each traffic signal junction as an independent agent. An agent decides the signal duration of its phases in a round-robin (RR) manner using multi-agent Q-learning with either is an element of-greedy or UCB 3] based exploration strategies. It updates its Q-factors based on the cost feedback signal received from its neighbouring agents. This feedback signal can be easily constructed and is shown to be effective in minimizing the average delay of the vehicles in the network. We show through simulations over VISSIM that our algorithms perform significantly better than both the standard fixed signal timing (FST) algorithm and the saturation balancing (SAT) algorithm 15] over two real road networks.

Spatial repeatability of dynamic tyre forces generated by heavy vehicles

Road damage due to heavy vehicles is thought to be dependent on the extent to which lorries in normal traffic apply peak forces to the same locations along the road. A validated vehicle simulation is used to simulate 37 leaf-sprung articulated vehicles with parametric variations typical of vehicles in one weight class in the highway vehicle fleet. The spatial distribution of tyre forces generated by each vehicle is compared with the distribution generated by a reference vehicle, and the conditions are established for which repeated heavy loading occurs at specific points along the road. It is estimated that approximately two-thirds of vehicles in this class (a large proportion of all heavy vehicles) may contribute to a repeated pattern of road loading. It is concluded that dynamic tyre forces are a significant factor influencing road damage, compared to other factors such as tyre configuration and axle spacing.

“Un claror de fuente” : presencia de la lírica española medieval y áurea en la poesía de Ángel Escobar (Cuba, 1957-1997)

Integran este número de la revista ponencias presentadas en Studia Hispanica Medievalia VIII : Actas de las X Jornadas Internacionales de Literatura Española Medieval, 2011, y de Homenaje al Quinto Centenario del Cancionero General de Hernando del Castillo.

A review of travel time estimation and forecasting for advanced traveler information systems

Providing on line travel time information to commuters has become an important issue for Advanced Traveler Information Systems and Route Guidance Systems in the past years, due to the increasing traffic volume and congestion in the road networks. Travel time is one of the most useful traffic variables because it is more intuitive than other traffic variables such as flow, occupancy or density, and is useful for travelers in decision making. The aim of this paper is to present a global view of the literature on the modeling of travel time, introducing crucial concepts and giving a thorough classification of the existing tech- niques. Most of the attention will focus on travel time estimation and travel time prediction, which are generally not presented together. The main goals of these models, the study areas and methodologies used to carry out these tasks will be further explored and categorized.

Deleuze e a literatura: o devir pelas linhas da escrita

Este trabalho tem como desafio falar da Literatura como experimentação de vida, sob a ótica filosofia. A prática de uma abordagem filosófica tendo como horizonte o universo da escrita tende a enriquecer as duas práticas. E sobretudo, a vida, quando não é separada do pensamento. O desafio é mostrar que a vida está presente em todas as manifestações do que é vivo. Sem distinção quanto a sujeito, objeto ou representação. Experimentar é dar as mãos a vida e seus infinitos modos de ser. Não obstante, o trabalho busca mostrar que a arte é essencialmente experimentalista. E que múltiplos caminhos podem levar a ela. Para a enorme tafera temos a companhia de Gilles Deleuze, grande filósofo francês, e seu, não menos importante parceiro, Félix Guattari. Em específico, trata-se de um trabalho que investiga os trajetos da Linguagem como instrumento de expressão em todos os caminhos e conexões possíveis. Deleuze encontrou na Literatura um destino para a criação, uma inspiração para a vida. Ele vislumbrou o escrever como experiência de Devir, como prática essencial, abertura da estrada para o desejo e para a fala coletiva. Para Deleuze, a linguagem é algo vivo, que sofre desvios, que enriquece na medida que se conecta com o seu fora. A linguagem é algo que cresce e se retrai de acordo com os agenciamentos que a envolvem. Falaremos do sopro que emerge das as entrelinhas do texto, o ilimitado da rachadura, a força dos signos. Em suma, falemos da força da escrita e da escritura de novos destinos.

Giza baliabideetara zuzendutako eitb enpresaren plan estrategikoa

EiTBren Giza Baliabideen plan estrategiko honek, erakundearen langileen ibilbide-orriak finkatzen ditu, 2013-2016 plan estrategiko orokorra oinarritzat hartuta. Hausnarketa estrategiko honetan, etorkizunari buruzko gogoeta egiten da, eta etorkizuna giza baliabideen esfortzuarekin eraikitzen da.

Plano de Ação de Emergência Integrador: uma proposta com base no COMPERJ/CONLESTE

Há uma grande incidência de acidentes com produtos perigosos, na tipologia rodoviária. A tese se situa no contexto da elaboração e da implementação dos planos de emergência, ou seja, do planejamento formal para lidar com as emergências. Dividem-se, neste trabalho, os planos de emergência em duas classes: os planos individuais e os planos integradores. Os planos individuais tem o seu foco centrado na atuação, considerando as ênfases técnico-operacional e de comunicação. Já os planos integradores, usualmente na alçada do poder público ou na área corporativa de grandes empresas, devem, como o nome sugere, integrar os recursos técnicos e humanos disponíveis. O principal ponto desta tese é a conceituação e a análise crítica tomando como base a situação atual e futura do CONLESTE, de quatro eixos estruturais a serem considerados nos planos integradores: de acompanhamento, fiscalizador, autorizador e operacional. Apresenta-se, adicionalmente, um modelo que se divide em nove itens, articulados com os eixos estruturais já citados.

Práticas escolares como táticas criadoras: os praticantes nas tessituras de currículos

Através de narrativas sobre as práticas cotidianas de quatro professoras (três brasileiras e uma francesa), acompanhadas de narrativas desenvolvidas entorno de um conjunto de imagens de alunos, esta pesquisa busca pensar como professores e alunos produzem os currículos nos seus cotidianos escolares. Através dos diferentes usos dos materiais disponíveis, dos questionamentos, das histórias de vida e das inúmeras experiências que constituem as subjetividades, os praticantes das escolas tecem, em redes, os seus conhecimentos e suas significações para a vida. Problematizando esta temática, com a professora de artes, Cristiane Costa, busco desenvolver uma discussão metodológica sobre os estudos dos cotidianos, me propondo compreender algumas possibilidades das táticas cotidianas de aprenderensinar. Com uma professora de matemática, Luciana Getirana, acompanhada da narrativa de uma aluna, Maria Nunes, analiso as relações entre conhecimentos científicos e conhecimentos cotidianos. Em seguida, com a professora de língua portuguesa, Cristiane Souza, discuto as demandas de professores por uma fórmula, uma receita de bolo, que contenha algumas soluções para os problemas da educação. Com a professora de história e geografia, Laure Cambos, busco pensar o professor no atravessamento de fronteiras entre culturas e conhecimentos. Neste sentido, elegi duas práticas de mediação cultural presentes no cotidiano desta professora: a primeira é o uso de imagens como prática de aprenderensinar, e a segunda consiste nas atividades de saídas da escola (aulas caminhadas). Por último, reúno fotografias de alunos para desenvolver duas temáticas que entrelaçam os capítulos anteriores: o dentrofora das escolas e as experimentações do mundo. A partir de narrativas sobre estas imagens, procuro pensar os cotidianos dos alunos nas práticas de aprenderensinar. Compreender estes currículos em redes possibilita problematizar as noções que não reconhecem a fragilidade das fronteiras, por perceberem os cotidianos através de relações dicotômicas. Estas fronteiras são habitadas pelos professores, produtores de possibilidades de mediações entre diferentes culturas e conhecimentos. Como práticas de atravessamento de fronteiras, as práticas de aprenderensinar buscam alternativas para a dicotomia que separa o dentro e o fora da escola, os conhecimentos cotidianos e os conhecimentos científicos, bem como os currículos prescritos e os currículos vividos. A pesquisa tem apoio teórico em autores como Nilda Alves, Michel de Certeau, Henri Lefebvre, Boaventura Santos, Nèstor Canclini entre outros.

A arte da palhaçaria e a psicanálise

Ao visualizar uma figura de nariz vermelho, sapatos grandes e roupas coloridas, muitos podem acreditar que estão diante de um palhaço. Entretanto, o referido personagem não se caracteriza pela indumentária, mas sim por assumir-se ridículo e criar a partir disso. Ele não quer se curar de seus defeitos, pelo contrário, quer utilizá-los para produzir riso. Utilizando a psicanálise como instrumento de interpretação, é possível compreender que o palhaço se define por um modo de relação específico com a falta, radicalmente diferente da forma neurótica e sintomática. Por meio do chiste e do humor, ele acolhe o real inquirindo a realidade e demonstrando com o nonsense que todo sentido é parcial. O chiste elucida a estrutura do inconsciente a qual o palhaço sabe ser incurável. O humor possui a capacidade de rejeitar as reivindicações da realidade e efetivar o princípio de prazer, com a grande vantagem de não ultrapassar os limites da saúde mental. Assim, ele transforma as ocasiões traumáticas em oportunidades para a obtenção de prazer, uma vez que no humor o ego se recusa a sofrer rejeitando as reivindicações da realidade.

Relação entre pluviosidade efetiva e estoque de matéria orgânica de superfície na ciclagem de nutrientes em floresta ombrófila urbana: Parque Nacional da Tijuca - RJ

O estoque de matéria orgânica de superfície refere-se a todo material orgânico decomposto ou em decomposição sobreposto ao solo mineral, bem como ao material orgânico misturado às partículas minerais do horizonte A. Este serve como indicador da funcionalidade e integridade de ecossistemas florestais quando o analisamos sob a perspectiva das "Formas de Húmus". Nesta perspectiva o material orgânico se presenta como disposto em camadas internas que variam no peso e espessura de acordo com a atuação dos agentes decompositores locais, e expressa a ciclagem de nutrientes que se dá a partir dos dois principais processos que sintetizam e/ou modulam o funcionamento dos ecossistemas, a produção e a decomposição da matéria orgânica. O modelo de formas de húmus segue uma classificação desenvolvida na Europa que não se aplica perfeitamente às áreas tropicais pela alta variabilidade de ambientes. Estima-se que fatores locais e particulares como características edáficas, estrutura e composição da vegetação, relevo e o microclima podem distorcer esta classificação e diferir significativamente do modelo global. Esta pesquisa buscou o refinamento deste modelo, buscando entender de que modo a pluviosidade efetiva (chuva que atravessa a copa das árvores e chega ao solo), como fenômeno de natureza microclimática, se relaciona com o estoque de matéria orgânica de superfície (sob a perspectiva das formas de húmus) em ambiente de floresta ombrófila montanhosa urbana.Para tal foram executadas análises físicas sobre o estoque de matéria orgânica de superfície, monitoramento da pluviosidade efetiva com pluviômetro experimentais adaptados para esta demanda e análises químicas sobre a água da chuva após lixiviação da matéria orgânica. Foi montada uma estrutura composta de quinze pluviômetros experimentais em uma encosta florestada no Parque Nacional da Tijuca (Rio de Janeiro - RJ) e instalação de pluviômetros eletrônicos em ambientes de céu aberto em áreas adjacentes a esta encosta pertencentes à área do parque. Os resultados indicam que da chuva que cai na floresta, cerca de 15% é interceptada pelas copas e o restante, parte é interceptada pela matéria orgânica do solo. A camada MFB (ou H) é a que retém mais água, indicando que, florestas que a decomposição é rápida no processo de fragmentação e lenta na mineralização, terão mais água retida no estoque de matéria orgânica. As diferentes camadas vão nutrir o solo de maneira diferenciada quando este processo deriva da lixiviação, como o cálcio que é liberado em a maior quantidade pelas camadas mais fragmentadas como a F e a MFB, o potássio e magnésio têm maior disponibilização quando deriva da camada L, indicando que durante este processo estes nutrientes são mais consumidos do que liberados. Foi perceptível que o sódio é bastante abundante na chuva antes mesmo de atingir a matéria orgânica, confirmando estudos anteriores. A utilização deste sistema proposto de pluviômetros experimentais possibilitou entender como esta estratificação interna do estoque de matéria orgânica de superfície acumula água, pois os métodos tradicionais não se baseiam no modelo de formas de húmus, e possibilitou ainda, o a análise do processo de lixiviação e liberação de nutrientes para o solo.

Nuevos restos viarios romanos en el norte de Burgos. ¿Vía "Flaviobriga-luliobriga"? Intento de reconstrucción del trazado por medio de sistemas de información geográficos

Este artículo forma parte de la investigación realizada en el marco de la tesis de licenciatura de su autora: "La red viaria romana en el norte de Burgos. Valles de Mena, Losa y Sotoscueva. Vía Pisoraca- Flauiobriga. Via Flauiobriga-Iuliobriga. Vías secundarias", leída en el Departamento de Estudios Clásicos de la Facultad de Filología, Geografía e Historia de la UPV/EHU el 9 de octubre de 1996.

Caracterização química de um solo contaminado por resíduos sólidos urbanos na estrada Arroio Pavuna em Jacarepaguá no município Rio de Janeiro

Neste trabalho, escolheu-se a estrada canal Arroio Pavuna, em Jacarepaguá, para avaliar quimicamente a qualidade do solo que recebe diariamente resíduos sólidos urbanos. A região deste estudo é também conhecida como estrada do Urubu, sendo este animal um dos principais vetores presente no local. Para uma caracterização química, foram determinados pH, carbono orgânico, matéria orgânica, concentrações dos metais alumínio, cádmio, chumbo, cobre, cromo, ferro, níquel e zinco, utilizando a técnica de Absorção Atômica por Chama, além da identificação dos principais compostos orgânicos através da técnica de Cromatografia Gasosa acoplada a Espectrometria de Massas. Também foi realizado o teste de comportamento com oligoquetas da espécie Eisenia andrei para avaliar a função de habitat do solo analisado. Os resultados obtidos apontaram que a região apresenta um solo ácido na faixa de 5,51 a 6,70, bem como as concentrações de Cobre, Cromo, Níquel e Zinco acima dos valores orientadores de referência de qualidade dos solos, um teor médio de matéria orgânica na faixa de 21,71 g.kg-1 a 29,73 g.kg-1, além de presença de compostos orgânicos com estruturas muito complexas. O solo apresentou função de habitat limitada. E como sugestão para a remediação deste solo, a fitorremediação apresenta bons rendimentos na literatura para remoção parcial ou total desses metais