Métodes d'aprenentatge per reforç basats en la política i la seva aplicació a la robótica

Projecte de recerca elaborat a partir d’una estada al Robot Locomotion Group del Massachusetts Institute of Technology, Estats Units, entre març i agost del 2006. Es descriu la feina portada a terme en el camp de l'aprenentatge per reforç (RL), una metodologia molt utilitzada en aprenentatge artificial. En RL, un agent intenta maximitzar un valor escalar (càstig o premi) obtingut com a resultat de la seva interacció amb l'entorn. L'objectiu d'un sistema basat en RL és el de trobar una política d'actuació òptima que relaciona l'estat de l'entorn amb una acció determinada que maximitzi la suma de reforços futurs. El principal avantatge és que no utilitza cap base de dades conegudes, així que l'agent no rep informació sobre quina decisió triar, com succeeix en molts tipus d'aprenentatge, sinó que ha de triar per descobrir aquelles accions que tenen un valor més alt, sent molt adient en robòtica aplicada. Els principals desavantatges són uns temps de convergència sovint elevats i la manca de generalització quan tractem variables contínues. Principalment, el treball s’ha centrat en l'estudi de noves i més complexes metodologies basades en RL que combinessin dos tipus d'algorismes: els basats en funcions de valor i els representats únicament per una política d'actuació. Posteriorment s'analitzà la seva aplicabilitat en aplicacions robòtiques reals. En tots els estudis i les simulacions s’ha utilitzat un braç robòtic dissenyat i contruït al laboratori. El tipus de robot, anomenat Acrobot, és un banc de proves molt utilitzat en els camps de teoria de control i aprenentatge.

Miniaturización de componentes planares de microondas mediante técnicas basadas en metamateriales: aplicación a un desfasador de cuadratura

En este trabajo se describe la miniaturización del diseño de un desfasador de cuadratura mediante líneas de transmisión metamaterial en tecnología microstrip. Para conseguir la miniaturización del diseño se utiliza la topología Spiral Resonator (SR). Los desfasadores de cuadratura han sido diseñados, fabricados y medidos. Mediante este proceso se ha consiguido un dispositivo metamaterial que presenta una reducción de un 77% del tamaño respecto a las líneas convencionales.

Diseño de inversores de impedancias de microondas compactos basados en metamateriales: aplicación a divisores de potencia

Recientemente ha surgido un nuevo campo de investigación en el área del electromagnetismo aplicado y de la ingeniería de microondas, basado en el control de las propiedades electromagnéticas de estructuras artificiales, conocidas como metamateriales. El objetivo principal de este proyecto es el estudio y control del comportamiento de estas estructuras artificiales, y su posterior aplicación para la síntesis de dispositivos compactos de microondas. En el primer capítulo se hace una introducción a los metamateriales en la que se exponen sus principales propiedades electromagnéticas, para finalmente presentar las líneas de transmisión zurdas que se suelen utilizar en el diseño de metamateriales. En el segundo capítulo se realiza un estudio de las propiedades y del funcionamiento de una celda metamaterial. Finalmente en el tercer capítulo se exponen diferentes dispositivos diseñados mediante la utilización de este tipo de celdas.

Desenvolupament d'una xarxa de sensors i actuadors sense fils de propòsit industrial

Aquesta memòria de projecte final de carrera és un estudi i implementació bàsica de l’estat actual en quant a les tecnologies/protocols sense fils existents, en particular centrat en ZigBee sobre la plataforma CC2430 de Texas Instruments, per a una aplicació industrial amb una taxa de transferència de dades baixa, que no presenta un alt grau de complexitat, però que requereix gran versatilitat i fiabilitat.

Síntesi i caracterització de membranes electrolítiques d'oxo-vanadi-sulfats per aplicacions en la reducció d'emissions de SO2

La recerca de nous materials pel desenvolupament de membranes per a la reducció d’emissions de SO2 ha estat en el punt de mira de nombrosos estudis recents, degut al seu gran potencial per a dur a terme aquests processos i pel gran impacte mediambiental causat pel SO2. La temàtica d’aquest projecte consisteix en la síntesi i caracterització de nous materials basats en compostos d’Oxo-Vanadi-Sulfats de metalls alcalins per tal de preparar aquestes membranes supressores de SO2.

Implementació i simulació funcional en MATLAB del protocol IEEE 802.15.4 de WSN

El principal objectiu que es pretén assolir és dissenyar un simulador de la capa MAC, definida a l’estàndard IEEE 802.15.4. Convé matisar que l’objectiu no és implementar un simulador, sinó utilitzar una plataforma genèrica existent, MATLAB, i definir sobre ella, una metodologia que, permeti utilitzar-la més com a plataforma específica de desenvolupament i simulació de protocols per a xarxes de sensors, que no pas com a simple simulador.

Códigos binarios no lineales en MAGMA

La finalitat d'aquest projecte és aconseguir representar codis binaris no lineals de manera eficient en un ordinador. Per fer-ho, hem desenvolupat funcions per representar un codi binari a partir del super dual. Hem millorat la funció de càlcul del kernel d'un codi binari, implementada en projectes d'anys anteriors. També hem desenvolupat un paquet software per l'intèrpret MAGMA. Aquest paquet ens proveeix d'eines per al tractament de codis binaris no necessàriament lineals.

Extensió de l'entorn SMARD per permetre la depuració d'aplicacions basades en agents mòbils

Un dels principals obstacles per l’adopció dels agents mòbils, fins i tot per tasques per les quals s’ha demostrat la seva idoneïtat, és la dificultat de desenvolupar-los. Aquest projecte aporta solucions per ajudar en aquest procés. Més concretament, per provar agents i observar-ne el seu comportament en un entorn de simulació, abans d’executar-los en un escenari real. Hem afegit un depurador i un constructor d’agents mòbils a la interfície gràfica de disseny d’itineraris de l’entorn SMARD. Fent servir afegit aquests nous components, el programador pot dissenyar, construir i fer proves d’un agent mòbil des d’aquesta aplicació.

Manejo de históricos en clusters

CISNE es un sistema de cómputo en paralelo del Departamento de Arquitectura de Computadores y Sistemas Operativos (DACSO). Para poder implementar políticas de ordenacción de colas y selección de trabajos, este sistema necesita predecir el tiempo de ejecución de las aplicaciones. Con este trabajo se pretende proveer al sistema CISNE de un método para predecir el tiempo de ejecución basado en un histórico donde se almacenarán todos los datos sobre las ejecuciones.

Estudi d'un sistema integrat en una empresa tecnològica

El projecte que es presenta és l’estudi de diferents sistemes integrats (ERP) per a la seva implementació en una empresa de desenvolupament de software. Els sistemes integrats són sistemes de gestió de la informació que integren i automatitzen moltes de les pràctiques del negoci d’una empresa per a facilitar-ne l’intercanvi d’informació entre les diferents parts. El projecte ha estat desenvolupat seguint la metodologia METRICA per a la implementació de software, i a partir d’aquesta metodologia s’han estudiat les característiques de l’empresa i posteriorment s’ha fet un anàlisi dels diferents sistemes integrats que podrien ser bones opcions per a implementar-los en l’empresa estudiada. Finalment, s’ha escollit el sistema integrat que més requisits acomplia per a ser instal·lat en l’empresa.

Codificació i transmissió interactiva d'imatges en dispositius mòbils

JPEG2000 és el nou estàndard de compressió d’imatges impulsat pel Joint Photographics Experts Group, el qual defineix un protocol eficient per la transmissió interactiva d’imatges, anomenat JPIP. El Group on Interactive Coding of Images (GICI) té una implementació d’aquest protocol, CADI. En aquest projecte es realitza l’implementació del client d’aquest protocol en un dispositiu mòbil. Per això s’ha realitzat un estudi de les plataformes mòbils que hi ha actualment en el mercat. Finalment s’han proposat millores, en el descodificador, per reduir el temps de computació i la carrega de memòria.

Diseño cooperativo de un sistema de comunicaciones por satélite basado en diversidad espacial

En este proyecto se han presentado los modelos de distribución de canal más comunes que se puede encontrar una señal en una transmisión. Seguidamente se ha presentado el concepto de diversidad en comunicaciones inalámbricas terrestres y se ha trasladado el escenario a comunicaciones por satélite. Para analizar la calidad de los enlaces con diversidad se ha realizado un simulador, con Matlab, que modele la estructura básica de un sistema de comunicaciones (emisor, canal y receptor). Simulando las comunicaciones entre los diferentes sistemas de diversidad se ha podido comparar la calidad de cada enlace. El modelo Alamouti ha presentado una robustez y una baja probabilidad de error que hacen que sea la mejor elección a la hora de diseñar un sistema de diversidad para comunicaciones por satélite. Utiliza la diversidad de canal para aprovechar cada pizca de señal que recibe y así poder descifrar el mensaje enviado.

Estudio para la implantación de un ERP en una empresa de transportes

Este proyecto presenta un estudio para la implantación de un Enterprise Resource Planning (ERP) en una empresa de transportes. Para ello se muestra una primera parte teórica donde se da a conocer todo lo que comporta el término ERP y su proceso de implantación. A continuación se estudian los requerimientos y necesidades de la empresa objeto del estudio. Para finalizar, se estudian tres soluciones existentes el mercado actual de ERP’s y se selecciona la que mejor se adapta a las necesidades y requerimientos en vistas a una hipotética implantación.

Estudio para la implantación de un ERP en una empresa textil

El proyecto abarca el estudio para la implantación de un ERP en una empresa textil. En concreto, una empresa dedicada a la venta al por menor de ropa en el Vallés Occidental. Utiliza la metodología de Planificacón de Sistemas de Información (PSI) promovida por el Ministerio de Administraciones Públicas del Gobierno de España. El estudio se centra en tres ERP's que son Microsoft Dynamics NAV de Microsoft, SAP Business One de SAP y Ekon Moda de CSS Agresso y su adaptabilidad a la empresa estudiada.

Reconocimiento de objetos multi-clase basado en descriptores de forma

Este trabajo presenta un sistema para detectar y clasificar objetos binarios según la forma de éstos. En el primer paso del procedimiento, se aplica un filtrado para extraer el contorno del objeto. Con la información de los puntos de forma se obtiene un descriptor BSM con características altamente descriptivas, universales e invariantes. En la segunda fase del sistema se aprende y se clasifica la información del descriptor mediante Adaboost y Códigos Correctores de Errores. Se han usado bases de datos públicas, tanto en escala de grises como en color, para validar la implementación del sistema diseñado. Además, el sistema emplea una interfaz interactiva en la que diferentes métodos de procesamiento de imágenes pueden ser aplicados.