Semi-online neural-Q_leaming for real-time robot learning

Reinforcement learning (RL) is a very suitable technique for robot learning, as it can learn in unknown environments and in real-time computation. The main difficulties in adapting classic RL algorithms to robotic systems are the generalization problem and the correct observation of the Markovian state. This paper attempts to solve the generalization problem by proposing the semi-online neural-Q_learning algorithm (SONQL). The algorithm uses the classic Q_learning technique with two modifications. First, a neural network (NN) approximates the Q_function allowing the use of continuous states and actions. Second, a database of the most representative learning samples accelerates and stabilizes the convergence. The term semi-online is referred to the fact that the algorithm uses the current but also past learning samples. However, the algorithm is able to learn in real-time while the robot is interacting with the environment. The paper shows simulated results with the "mountain-car" benchmark and, also, real results with an underwater robot in a target following behavior

QoS online routing and MPLS multilevel protection: a survey

A survey of MPLS protection methods and their utilization in combination with online routing methods is presented in this article. Usually, fault management methods pre-establish backup paths to recover traffic after a failure. In addition, MPLS allows the creation of different backup types, and hence MPLS is a suitable method to support traffic-engineered networks. In this article, an introduction of several label switch path backup types and their pros and cons are pointed out. The creation of an LSP involves a routing phase, which should include QoS aspects. In a similar way, to achieve a reliable network the LSP backups must also be routed by a QoS routing method. When LSP creation requests arrive one by one (a dynamic network scenario), online routing methods are applied. The relationship between MPLS fault management and QoS online routing methods is unavoidable, in particular during the creation of LSP backups. Both aspects are discussed in this article. Several ideas on how these actual technologies could be applied together are presented and compared

Estudi, disseny i implementació d'un gestor d’incidències online

L’objectiu d’aquest projecte és la realització d’un gestor d’incidències que doni suport a l’àrea de sistemes de la informació i comunicació d’una organització. Per assolir aquest objectiu, és important tenir un bon control de les incidències generades mitjançant una base de dades que ens permeti organitzar la informació de manera eficient i d’una interfície Web que permet de forma simple, ràpida i ordenada gestionar la informació recopilada.

Preferits online : Projecte J2EE per guardar els teus preferits a Internet

Treball de final de carrera pel desenvolupament d'una aplicació J2EE destinada a oferir a l'usuari un entorn on guardar els seus links preferits online i tenir-los sempre disponibles des de qualsevol navegador.

Formación interactiva en entornos virtuales : una experiencia en screencasting

L'objectiu de la comunicació és donar a conèixer un estudi sobre els requisits que han de tenir els materials formatius en línia de les biblioteques, i difondre l'experiència pilot que s'ha dut a terme per a elaborar uns materials de formació en format vídeo a la Biblioteca Virtual de la Universitat Oberta de Catalunya.El punt de partida de l'estudi ha estat la necessitat de crear uns materials de formació nous, adaptats a les necessitats dels usuaris en un entorn virtual i en el marc de l'EEES, en el qual els estudiants cada vegada han de ser més autònoms i en què les competències informacionals són bàsiques. Tots aquests aspectes ens han portat a repensar els nostres materials formatius.

Estudi descriptiu de l'ús de xarxes socials online per la promoció de l'alimentació saludable en hospitals dels Estats Units

Internet i les xarxes socials online s'estan mostrant com a útils en la promoció de la salut i en la difusió d'hàbits saludables. L'objectiu del treball és observar el grau d'utilització que es fa de les xarxes socials online per a la promoció d'hàbits d'alimentació saludable. S'ha dissenyat un estudi observacional descriptiu transversal amb una mostra de 14 hospitals dels Estats Units. A l'estudi s'ha trobat una bona freqüència d'utilització dels canals que ofereix la xarxa però una baixa freqüència per fer promoció d'hàbits saludables en alimentació.

Video presentació projecte .Castells

Video presentació projecte .Castells

Rare Disease Video Portal

Rare Disease Video Portal (RD Video) is a portal web where contains videos from Youtube including all details from 12 channels of Youtube.

Búsqueda, selección e implantación de un sistema online de software libre para revisión por pares en congresos científicos

Este proyecto tiene como objetivo implementar un sistema libre bajo GNU/Linux para la recepción y evaluación de trabajos presentados a un congreso argentino sobre sistemas embebidos. Además, se piensa en un futuro en organizar un evento de software libre con revisión de pares, para lo cual sería coherente utilizar un sistema con licencia de software libre.

Gestión y reserva online de acciones formativas con ASP.NET MVC3

El proyecto consiste en el desarrollo de una aplicación para la gestión y reserva online de acciones formativas, haciendo un uso intensivo de la tecnología ASP.NET MVC3.

Projecte informàtic d'aplicació online que interpreta l'estat financer d'una empresa

La present memòria conté l'elaboració del projecte informàtic que permet portar a terme la implementació d'una aplicació online que interpreta els ratis financers per a cada tipus d'empresa i així poder informar, mitjançant indicadors, l'estat de salut financera de l'empresa.

Proposal for the analysis of a video game, a film, and their relationship : Silent Hill as a subject of the horror genre

Aquest treball de recerca fa un estudi comparatiu del videojoc de terror amb el seu homòleg cinematogràfic. L’objectiu és arribar a saber si els dos mitjans de comunicació usen les mateixes tècniques per transmetre les seves històries i per crear suspens. Aquesta investigació és només una part d'un estudi més ampli amb el que es pretén tenir un coneixement més aprofundit de les emocions de la gent i les reaccions que els provoca un videojoc de terror en comparació amb la visualització de l'adaptació cinematogràfica del corresponent videojoc.

Anàlisi i millora dels processos online i eliminació de les barreres d'accessibilitat i usabilitat del site d'una entitat financera

Aquest projecte se centrarà en l'anàlisi i millora dels processos online i l'eliminació de les barreres d'accessibilitat i usabilitat del site d'una entitat financera. Per al compliment d'aquest objectiu ens fixarem en el formulari de contractació d'una hipoteca.

Intervenció per millorar la comunicació dels nens i adolescents amb DAR i els seus pares : Aplicació pel programa d'intervenció online DARWeb

Chronic pain is a relevant problem in our society. Concerning the young population, recurring abdominal pain (RAP in English, DAR in Spanish and Catalan) is very common among children and adolescents. DARWeb is an online treatment program addressed to children and teenagers with DAR and their parents. This work is aimed to develop an intervention to improve the communication skills of the children/adolescents with DAR and their parents. It is also proposed how this could be implemented to DARWeb.

Implementació d'un instrument de mesura de la qualitat del servei d'un supermercat online

Aquest treball posa en pràctica l'adaptació d'una enquesta anomenada E-S-QUAL, que avalua la qualitat del servei en establiments virtuals. Es parteix de la tesi del doctor Cristóbal i es combina amb part de la tesi del doctor Granollers, concretament amb el model MPIU+Q. S'ha implementat un lloc web amb l'enquesta, ens hem posat en contacte amb un supermercat virtual (Plusfresh.com)i l'hem posada en maxa per a que els clients la contestessin. Finalment, s'ha fet una anàlisi de les dades recollides i s'han extret uns informes i conclusions.