Policy gradient based Reinforcement Learning for real autonomous underwater cable tracking

This paper proposes a field application of a high-level reinforcement learning (RL) control system for solving the action selection problem of an autonomous robot in cable tracking task. The learning system is characterized by using a direct policy search method for learning the internal state/action mapping. Policy only algorithms may suffer from long convergence times when dealing with real robotics. In order to speed up the process, the learning phase has been carried out in a simulated environment and, in a second step, the policy has been transferred and tested successfully on a real robot. Future steps plan to continue the learning process on-line while on the real robot while performing the mentioned task. We demonstrate its feasibility with real experiments on the underwater robot ICTINEU AUV

Autonomous underwater vehicle control using reinforcement learning policy search methods

Autonomous underwater vehicles (AUV) represent a challenging control problem with complex, noisy, dynamics. Nowadays, not only the continuous scientific advances in underwater robotics but the increasing number of subsea missions and its complexity ask for an automatization of submarine processes. This paper proposes a high-level control system for solving the action selection problem of an autonomous robot. The system is characterized by the use of reinforcement learning direct policy search methods (RLDPS) for learning the internal state/action mapping of some behaviors. We demonstrate its feasibility with simulated experiments using the model of our underwater robot URIS in a target following task

Towards Direct Policy Search Reinforcement Learning for Robot Control

This paper proposes a high-level reinforcement learning (RL) control system for solving the action selection problem of an autonomous robot. Although the dominant approach, when using RL, has been to apply value function based algorithms, the system here detailed is characterized by the use of direct policy search methods. Rather than approximating a value function, these methodologies approximate a policy using an independent function approximator with its own parameters, trying to maximize the future expected reward. The policy based algorithm presented in this paper is used for learning the internal state/action mapping of a behavior. In this preliminary work, we demonstrate its feasibility with simulated experiments using the underwater robot GARBI in a target reaching task

La competència «El treball col·laboratiu» : una oportunitat per a incorporar les TIC en la didàctica universitària. Descripció de l'experiència amb la plataforma ACME (UdG)

L'article és una reflexió sobre els requisits de formació dels professionals que demana la societat del coneixement. Un dels objectius més importants que ha de tenir la universitat en la societat del coneixement és la formació de professionals competents que tinguin prou eines intel·lectuals per a enfrontar-se a la incertesa de la informació, a la consciència que aquesta té una data de caducitat a curt termini i a l'ansietat que això provoca. Però, a més, també han de ser capaços de definir i crear les eines de treball amb què donaran sentit i eficàcia a aquest coneixement mudable i mutant. Per això, l'espai europeu d'ensenyament superior prioritza la competència transversal del treball col·laboratiu amb l'objectiu de promoure un aprenentatge autònom, compromès i adaptat a les noves necessitats de l'empresa del segle xxi. En aquest context, es presenta l'entorn teòric que fonamenta el treball desenvolupat a la plataforma informàtica ACME, que uneix el treball col·laboratiu i l'aprenentatge semipresencial o blended learning. Així mateix, es descriuen amb detall alguns exemples de wikis, paradigma del treball col·laboratiu, fets en assignatures impartides per la Universitat de Girona en l'espai virtual ACME

Aprendre a aprendre: una proposta d’intervenció psicopedagògica

Descripció de les pràctiques realitzades en un despatx psicopedagògic especialitzat en dificultats d’aprenentatge dirigit a nens, nenes i adolescents. L'objectiu principal és ajudar als alumnes a ser competents a aprendre a aprendre mitjançant diferents estratègies metodològiques i diversitat de materials, tot centrant-se en aquest cas en una alumna, amb diverses problemàtiques d’aprenentatge, a més d’una baixa autoestima

Maleta pedagògica familiar "Descobrim l'estany de Banyoles"

L’educació ambiental a Catalunya i, en concret a les comarques gironines, compta amb una certa tradició. Són diversos els equipaments que, de mica en mica, han anat oferint a les escoles la possibilitat de fer un aprenentatge directe i experimental de les Ciències Naturals i Socials, tot oferint als centres allò que la seva infraestructura no els permet obtenir o allò que el seu context geogràfic els impedeix conèixer. Doncs la ciutat de Banyoles i la seva comarca, el Pla de l’Estany, constitueixen una zona de gran interès paisatgístic i natural, a més de cultural i artístic, que comporten un gran nombre de possibilitats didàctiques ja que el propi medi ofereix un ampli ventall de recursos pedagògics. Per això, amb l’interès de fer conèixer als escolars de Catalunya la riquesa de la comarca i de recolzar amb l'experiència directa el treball de l'aula, va néixer l’Escola de Natura de Banyoles (d’ara endavant EdNB)

Soporte de Herramientas GNU/Linux para educación especial

The aim of this study limit is to analyze the different learning software tools for groups in need of attention special and disability that exist in the market so exclusive and cost recorded consulting and licensing, and compare them with the tools repository of Open Source Software Community without loss of performance and efficiency. Our engineering knowledge should always help the most in need.

The interactional space in CLIL (Content and Language Integrated Learning) and EFL (English as a Foreign Language) classrooms

Aquest estudi pretén investigar els intercanvis verbals mestre/a – aprenent(s) en dos contextos d'instrucció diferents: classes amb un enfocament AICLE (Aprenentatge Integrat de Continguts Curriculars i Llengua Estrangera) on s’aprenen continguts no lingüístics a través de l’anglès, per una banda, i classes 'tradicionals' d'anglès com a llengua estrangera, on l’anglès és alhora objecte d’estudi i vehicle de comunicació, per una altra banda. Més concretament, les preguntes que formula el/la mestre/a, la producció oral dels aprenents i el 'feedback' del/de la mestre/a en els episodis d’atenció a la forma s’han estudiat a la llum de les principals teories provinents del camp de l’Adquisició de Segones Llengües (SLA) per tal de demostrar el seu paper en l’aprenentatge de l’anglès. El corpus de dades prové de l’enregistrament de 7 sessions AICLE i d'11 sessions EFL enregistrades en format àudio i vídeo en dos centres públics d’Educació Primària (EP) de Catalunya. A cadascuna de les escoles, el/la mateix/a mestre/a és l’encarregat/da dels dos tipus d’instrucció amb el mateix grup d’aprenents (10-11 anys d’edat), fet que permet eliminar variables individuals com l'aptitud dels aprenents o l'estil del/de la mestre/a.Els resultats mostren un cert nombre de similituds discursives entre AICLE i EFL donat que ambdós enfocaments tenen lloc en el context-classe amb unes característiques ben definides. Tal com apunta la recerca realitzada en aquest camp, la instrucció AICLE reuneix un seguit de condicions idònies per un major desenvolupament dels nivells de llengua anglesa més enllà de les classes ‘tradicionals’ d’anglès. Malgrat això, aquest estudi sembla indicar que el potencial d'AICLE pel que fa a facilitar una exposició rica a l’anglès i una producció oral significativa no s’explota degudament. En aquest sentit, els resultats d’aquest estudi poden contribuir a la formació dels futurs professors d'AICLE si es busca l’assoliment d’una complementarietat d’ambdós contextos amb l’objectiu últim de millorar els nivells de domini de la llengua anglesa.

Diseño de una herramienta de e-learning para el área de cirugía traumatológica

Este artículo trata, en primer lugar, de analizar el estado actual de las herramientas de e-learning relacionadas y aplicadas en el área de cirugía traumatológica, presentando las herramientas disponibles en la actualidad como vídeos, audios, simuladores de realidad virtual, pacientes virtuales, LMS, entre otras; para, a continuación, describir el diseño de una herramienta en la que los componentes cumplan con los criterios de integración, interactividad, estandarización y asegure la reutilización. Como conclusión, se valora positivamente el diseño de una herramienta totalmente de código abierto que incorpora componentes de LMCS, repositorios de objetos, pacientes virtuales, simuladores hápticos de realidad virtual y objetos educativos, entre otros. Finalmente se recomienda implementar y comprobar la utilidad de la herramienta propuesta en la formación y entrenamiento de cirujanos traumatólogos.

Actualización gráfica y funcional del proyecto Rodolfo

El proyecto Rodolfo es una herramienta online para ayudar en el proceso del aprendizaje de las matemáticas. Consiste pues, en un repositorio de fórmulas matemáticas y sus correspondientes locuciones para poder escuchar cómo se leen las mismas.

El fracàs escolar lligat necessàriament a un QI baix? Estudi del fracàs escolar d'un grup classe de l'Escola Pit-Roig

Davant la diversitat de teories que acompanyen al concepte de fracàs escolar i a la seva relació amb la intel·ligència, a continuació es presenta un estudi d'un grup classe de primària en un centre escolar de Barcelona ciutat, enfocat a verificar o rebutjar algunes de les teories clàssiques que parlen sobre l'èxit i/o el fracàs escolar i els factors predictius d'aquest, en concret el quocient intel·lectual, a l'igual que d'altres factors determinants amb aquest rendiment escolar. D'aquest grup classe, han estat tres els subjectes que han estat sotmesos a un estudi més profund per ser els que presenten fracàs escolar. Els materials utilitzats han estat diferents tests psicomètrics per valorar la intel·ligència de tot el grup classe, i les conductes adaptatives i la part emocional i relacional d'aquests tres alumnes, i un qüestionari per obtenir informació dels hàbits d'estudi de tot el grup classe. Les activitats realitzades han inclòs el passar aquests tests, observacions a l'aula del grup classe, a l'aula de reforç i al pati, passar el qüestionari a tot el grup classe, entrevistes amb aquests tres alumnes en concret, amb les seves famílies, amb la tutora del grup classe i amb la monitora de reforç. Els resultats obtinguts en aquest estudi ens han permès rebutjar les teories que correlacionen directament el quocient intel·lectual amb un predictor del rendiment escolar i de les conductes adaptatives, i a reafirmar que la metodologia d'ensenyament-aprenentatge influeix de forma directa en la motivació de l'alumnat en els seus estudis, en la comprensió de la nova informació, en l'atribució d'un significat a l'aprenentatge i en rendiment escolar.

eduCAT

eduCAT és una aplicació educativa per l'iPhone en llengua catalana per a nens petits, on els més menuts podran aprendre mentre juguen. Els nens podran interactuar tant amb les lletres com amb els números, i podran fer-ho amb les dues modalitats que ofereix eduCAT: mode d'aprenentatge i mode joc. En aquesta memòria comentarem la tecnologia emprada per fer l'aplicació, anàlisi del sistema, disseny, implementació i conclusions finals.

Electronic voting system for computer supported collaborative learning

The EVS4CSCL project starts in the context of a Computer Supported Collaborative Learning environment (CSCL). Previous UOC projects created a CSCL generic platform (CLPL) to facilitate the development of CSCL applications. A discussion forum (DF) was the first application developed over the framework. This discussion forum was different from other products on the marketplace because of its focus on the learning process. The DF carried out the specification and elaboration phases from the discussion learning process but there was a lack in the consensus phase. The consensus phase in a learning environment is not something to be achieved but tested. Common tests are done by Electronic Voting System (EVS) tools, but consensus test is not an assessment test. We are not evaluating our students by their answers but by their discussion activity. Our educational EVS would be used as a discussion catalyst proposing a discussion about the results after an initial query or it would be used after a discussion period in order to manifest how the discussion changed the students mind (consensus). It should be also used by the teacher as a quick way to know where the student needs some reinforcement. That is important in a distance-learning environment where there is no direct contact between the teacher and the student and it is difficult to detect the learning lacks. In an educational environment, assessment it is a must and the EVS will provide direct assessment by peer usefulness evaluation, teacher marks on every query created and indirect assessment from statistics regarding the user activity.

Gestión de un proyecto de implantación de un repositorio de objetos de aprendizaje

El presente Trabajo Final de Carrera (TFC) está centrado en la Gestión de un Proyecto de Implantación de un Repositorio de Objetos Digitales de Aprendizaje en una Universidad, y queda englobado en el área de Gestión de Proyectos de la Ingeniería Técnica Informática de Gestión.

An empirical study of machine learning techniques applied to image watermarking

A study of how the machine learning technique, known as gentleboost, could improve different digital watermarking methods such as LSB, DWT, DCT2 and Histogram shifting.