A behavior-based scheme using reinforcement learning for autonomous underwater vehicles

This paper presents a hybrid behavior-based scheme using reinforcement learning for high-level control of autonomous underwater vehicles (AUVs). Two main features of the presented approach are hybrid behavior coordination and semi on-line neural-Q_learning (SONQL). Hybrid behavior coordination takes advantages of robustness and modularity in the competitive approach as well as efficient trajectories in the cooperative approach. SONQL, a new continuous approach of the Q_learning algorithm with a multilayer neural network is used to learn behavior state/action mapping online. Experimental results show the feasibility of the presented approach for AUVs

Policy gradient based Reinforcement Learning for real autonomous underwater cable tracking

This paper proposes a field application of a high-level reinforcement learning (RL) control system for solving the action selection problem of an autonomous robot in cable tracking task. The learning system is characterized by using a direct policy search method for learning the internal state/action mapping. Policy only algorithms may suffer from long convergence times when dealing with real robotics. In order to speed up the process, the learning phase has been carried out in a simulated environment and, in a second step, the policy has been transferred and tested successfully on a real robot. Future steps plan to continue the learning process on-line while on the real robot while performing the mentioned task. We demonstrate its feasibility with real experiments on the underwater robot ICTINEU AUV

Towards Direct Policy Search Reinforcement Learning for Robot Control

This paper proposes a high-level reinforcement learning (RL) control system for solving the action selection problem of an autonomous robot. Although the dominant approach, when using RL, has been to apply value function based algorithms, the system here detailed is characterized by the use of direct policy search methods. Rather than approximating a value function, these methodologies approximate a policy using an independent function approximator with its own parameters, trying to maximize the future expected reward. The policy based algorithm presented in this paper is used for learning the internal state/action mapping of a behavior. In this preliminary work, we demonstrate its feasibility with simulated experiments using the underwater robot GARBI in a target reaching task

Designing context-aware adaptive units of learning based on IMS-LD standard

Learning contents adaptation has been a subject of interest in the research area of the adaptive hypermedia systems. Defining which variables and which standards can be considered to model adaptive content delivery processes is one of the main challenges in pedagogical design over e-learning environments. In this paper some specifications, architectures and technologies that can be used in contents adaptation processes considering characteristics of the context are described and a proposal to integrate some of these characteristics in the design of units of learning using adaptation conditions in a structure of IMS-Learning Design (IMS-LD) is presented. The key contribution of this work is the generation of instructional designs considering the context, which can be used in Learning Management Systems (LMSs) and diverse mobile devices

Adaption of Courses and Learning Environment to the User Context in dotLRN

The explosive growth of Internet during the last years has been reflected in the ever-increasing amount of the diversity and heterogeneity of user preferences, types and features of devices and access networks. Usually the heterogeneity in the context of the users which request Web contents is not taken into account by the servers that deliver them implying that these contents will not always suit their needs. In the particular case of e-learning platforms this issue is especially critical due to the fact that it puts at stake the knowledge acquired by their users. In the following paper we present a system that aims to provide the dotLRN e-learning platform with the capability to adapt to its users context. By integrating dotLRN with a multi-agent hypermedia system, online courses being undertaken by students as well as their learning environment are adapted in real time

Adaptive intelligent agent approach to guide the web navigation on the PLAN-G distance learning platform

Hypermedia systems based on the Web for open distance education are becoming increasingly popular as tools for user-driven access learning information. Adaptive hypermedia is a new direction in research within the area of user-adaptive systems, to increase its functionality by making it personalized [Eklu 961. This paper sketches a general agents architecture to include navigational adaptability and user-friendly processes which would guide and accompany the student during hislher learning on the PLAN-G hypermedia system (New Generation Telematics Platform to Support Open and Distance Learning), with the aid of computer networks and specifically WWW technology [Marz 98-1] [Marz 98-2]. The PLAN-G actual prototype is successfully used with some informatics courses (the current version has no agents yet). The propased multi-agent system, contains two different types of adaptive autonomous software agents: Personal Digital Agents {Interface), to interacl directly with the student when necessary; and Information Agents (Intermediaries), to filtrate and discover information to learn and to adapt navigation space to a specific student

Curriculum sequencing for an e-learning system based on learning styles

This work shows the use of adaptation techniques involved in an e-learning system that considers students' learning styles and students' knowledge states. The mentioned e-learning system is built on a multiagent framework designed to examine opportunities to improve the teaching and to motivate the students to learn what they want in a user-friendly and assisted environment

Aplicación del modelo b-learning en la asignatura 'Modelos y Simulación' de las carreras de Sistemas de la FACENA- UNNE.

Resumen tomado de la publicación. Incluye gráficas y tablas de datos

Archivo digital de imágenes diagnósticas enfocado a tórax y abdomen de Fundación Cardioinfantil – Instituto de Cardiología

Introducción: El desarrollo del archivo docente de imágenes diagnósticas, permite al Departamento de Imágenes compartir y difundir el conocimiento de la colección de casos e imágenes radiológicas reales con mayor rapidez y facilidad en el acceso a las mismas por parte de todo el personal de la Clínica Fundación Cardio-Infantil – Instituto de Cardiología, a través por portal web “e-cardio”, contribuyendo así en la formación académica del personal médico, técnico y administrativo. Metodología: Este trabajo no responde a ningún tipo de estudio epidemiológico, sino a una colección de imágenes y reseñas radiológicas de casos de patología torácica y cardiovascular, procedentes de pacientes de la Fundación Cardioinfantil – Instituto de Cardiología, con el fin de conformar un archivo digital docente. Resultados: Se recolectaron 1.148 radiografías impresas, previamente rotuladas según el Index for Radiological Diagnoses 4 edición y de archivos individuales 3.512 imágenes. Utilizando los criterios de inclusión y exclusión, se realizó la selección de imágenes para continuar el procedimiento. Se descartaron 278 radiografías impresas por no tener rotulo, estar en mal estado general, o rotulación incorrecta. En el caso de los archivos digitales, se descartaron 1435 imágenes, utilizando el mismo procedimiento. Conclusión: Iniciar la conformación y montaje del primer archivo docente de la Clínica Fundación Cardioinfantil – Instituto de Cardiología. Motivar a los profesionales médicos de la Clínica Fundación Cardio Infantil, y especialmente a los residentes de Radiología, para que estén en un proceso de aprendizaje continúo, fortaleciendo su autoevaluación, y todo ello para beneficio final de los pacientes y de la misma Institución.

Archivo digital de imágenes diagnósticas enfocado a tórax y abdomen de Fundación Cardioinfantil – instituto de cardiología

El desarrollo del archivo docente de imágenes diagnósticas, permite compartir y difundir el conocimiento de la colección de casos e imágenes radiológicas con rapidez y facilidad al personal de la Clínica Fundación Cardio-Infantil – Instituto de Cardiología, a través por portal web “e-cardio”, contribuyendo en la formación académica del personal médico, técnico y administrativo.

Archivo docente en imágenes del seno: mamografía digital. Fundación santa fe de Bogotá.

Se conformó el primer archivo docente digital de patología específica del seno en la modalidad de mamografía a nivel nacional, el cuál permitirá el entrenamiento de radiólogos y residentes de radiología según el sistema de lectura BI-RADS, buscando la unificación de criterios y mejoría de las competencias en la interpretación de las imágenes con la finalidad de aumentar la detección temprana del carcinoma de seno

Estándares educativos para la gestión del conocimiento en e-learning.

Presentar una propuesta para ayudar a los docentes a obtener información de calidad y estructurarla adecuadamente a partir de la información existente en Internet, que permita desarrollar cursos on-line. La propuesta sugiere utilizar los objetos de aprendizaje (fragmentos de información) provenientes de fuentes externas aplicando una serie de criterios que permitan valorar la calidad de la información obtenida de la red, para incorporar estos objetos a un repositorio de datos a disposición de las organizaciones educativas para el desarrollo de cursos on-line. Literatura publicada sobre el tema en formato impreso o digital. Revisión bibliográfica sobre el tema. Recursos bibliográficos y buscadores en internet. Análisis de contenido y análisis comparativo. La investigación está estructurada en cuatro apartados. En el primero se aborda el tema del e-learning, indicando las características de este sistema de formación, los factores a considerar para disponer de un sistema eficiente de e-learning. Se exponen las ventajas de este sistema frente a la enseñanza presencial. La segunda parte está dedicada a la gestión del conocimiento en e-learning, se profundiza sobre el concepto de gestión del conocimiento en las organizaciones y las posibilidades que ofrece la informática en los procesos de gestión de conocimiento actualmente. La tercera parte aborda la utilización de estándares educativos en la gestión del conocimiento, realiza un recorrido histórico sobre los diferentes estándares de estructuración de la información y las potencialidades que suponen respecto a la incorporación e intercambio de información en las diferentes plataformas de teleformación que se utilizan actualmente. La última parte analiza las estrategias para gestionar información de calidad en un sistema de e-learning, basado en a utilización de objetos de aprendizaje. La propuesta que realiza la autora tiene como objetivo incorporar en un sistema de e-learning la información de utilidad disponible en la web, organizando la misma de acuerdo a su almacenamiento en sistemas de gestión de bases de datos, utilizados por las actuales plataformas de teleformación en líneas generales, sin especificar el sistema adoptado por alguna de las plataformas actualmente disponibles en el mercado. Expone los criterios de calidad que deben de reunir los objetos de aprendizaje para sugerir finalmente algunas pautas respecto a cómo se deberían estructurar estos objetos en unidades de aprendizaje que denomina unidades didácticas. La aplicación de lenguajes de marcado y de estándares de organización de la información no persigue otra finalidad que dar a conocer las posibilidades que ofrece la investigación tecnológica en la gestión de la información y el conocimiento, y como tal su aplicación el sistemas de e-learning. Las líneas futuras de investigación se orientarán a desarrollar en la realidad los planteamientos teóricos expuestos en esta investigación con el objeto de desarrollar un prototipo orientado a promover la gestión del conocimiento de calidad dentro de un sistema de e-learning, que pueda ser útil a las organizaciones educativas en la educación no presencial.

Entorno virtual de aprendizaje : plataformas de e-learning en el contexto de la sociedad de la información.

Resumen tomado de la revista

Especificaciones y estándares en e-learning.

Resumen tomado de la publicación

Academic libraries and learning support in the eectronic enviroment. 'Bibliotecas universitarias y apoyo al aprendizaje en el entorno electrónico'.

Resumen basado en el del autor