Reinforcement Learning solution for Unit Commitment Problem through pursuit method

Unit commitment is an optimization task in electric power generation control sector. It involves scheduling the ON/OFF status of the generating units to meet the load demand with minimum generation cost satisfying the different constraints existing in the system. Numerical solutions developed are limited for small systems and heuristic methodologies find difficulty in handling stochastic cost functions associated with practical systems. This paper models Unit Commitment as a multi stage decision task and Reinforcement Learning solution is formulated through one efficient exploration strategy: Pursuit method. The correctness and efficiency of the developed solutions are verified for standard test systems

Teaching an Old Robot New Tricks: Learning Novel Tasks via Interaction with People and Things

As AI has begun to reach out beyond its symbolic, objectivist roots into the embodied, experientialist realm, many projects are exploring different aspects of creating machines which interact with and respond to the world as humans do. Techniques for visual processing, object recognition, emotional response, gesture production and recognition, etc., are necessary components of a complete humanoid robot. However, most projects invariably concentrate on developing a few of these individual components, neglecting the issue of how all of these pieces would eventually fit together. The focus of the work in this dissertation is on creating a framework into which such specific competencies can be embedded, in a way that they can interact with each other and build layers of new functionality. To be of any practical value, such a framework must satisfy the real-world constraints of functioning in real-time with noisy sensors and actuators. The humanoid robot Cog provides an unapologetically adequate platform from which to take on such a challenge. This work makes three contributions to embodied AI. First, it offers a general-purpose architecture for developing behavior-based systems distributed over networks of PC's. Second, it provides a motor-control system that simulates several biological features which impact the development of motor behavior. Third, it develops a framework for a system which enables a robot to learn new behaviors via interacting with itself and the outside world. A few basic functional modules are built into this framework, enough to demonstrate the robot learning some very simple behaviors taught by a human trainer. A primary motivation for this project is the notion that it is practically impossible to build an "intelligent" machine unless it is designed partly to build itself. This work is a proof-of-concept of such an approach to integrating multiple perceptual and motor systems into a complete learning agent.

Implementation of training programs in self-regulated learning strategies in Moodle format : Results of a experience in higher education

Resumen tomado de la publicaci??n

La incidencia de la toma de apuntes sobre el aprendizaje significativo. Un estudio de enseñanza superior.= The incidence of notetaking on meaningful learning. A study of higher education.

En este estudio presentamos una experiencia llevada a cabo con estudiantes de la asignatura “Psicología de la Educación” de diferentes centros universitarios. Tomando como marco de referencia las teorías constructivistas del aprendizaje, el objetivo de nuestro trabajo se centra en comprobar la incidencia de la utilización de diferentes estrategias de enseñanza por parte del profesor y de determinadas estrategias de aprendizaje en el proceso de registrar la información por parte de los estudiantes, en la significatividad del aprendizaje. Los resultados obtenidos muestran que en los grupos donde los profesores han utilizado estrategias de enseñanza diferentes a la clase magistral, se ha producido un cambio positivo en las respuestas de los estudiantes o se ha mantenido el mismo nivel, mientras que el grupo donde se ha utilizado una metodología magistral, el nivel de respuesta es inferior. Así mismo, hemos podido observar como los grupos de estudiantes que utilizan las estrategias de aprendizaje seleccionadas para tomar apuntes mejoran su nivel de respuestas, lo cual no se produce en el grupo control

Attention, memory and verbal learning and their relation to schizotypal traits in unaffected parents of schizophrenic patients

The main objective of this ex post facto study is to compare the differences in cognitive functions and their relation to schizotypal personality traits between a group of unaffected parents of schizophrenic patients and a control group. A total of 52 unaffected biological parents of schizophrenic patients and 52 unaffected parents of unaffected subjects were assessed in measures of attention (Continuous Performance Test- Identical Pairs Version, CPT-IP), memory and verbal learning (California Verbal Learning Test, CVLT) as well as schizotypal personality traits (Oxford-Liverpool Inventory of Feelings and Experiences, O-LIFE). The parents of the patients with schizophrenia differ from the parents of the control group in omission errors on the Continuous Performance Test- Identical Pairs, on a measure of recall and on two contrast measures of the California Verbal Learning Test. The associations between neuropsychological variables and schizotpyal traits are of a low magnitude. There is no defined pattern of the relationship between cognitive measures and schizotypal traits

Learning and adaptation in physical heterogeneous teams of robots

In this paper we present a novel approach to assigning roles to robots in a team of physical heterogeneous robots. Its members compete for these roles and get rewards for them. The rewards are used to determine each agent’s preferences and which agents are better adapted to the environment. These aspects are included in the decision making process. Agent interactions are modelled using the concept of an ecosystem in which each robot is a species, resulting in emergent behaviour of the whole set of agents. One of the most important features of this approach is its high adaptability. Unlike some other learning techniques, this approach does not need to start a whole exploitation process when the environment changes. All this is exemplified by means of experiments run on a simulator. In addition, the algorithm developed was applied as applied to several teams of robots in order to analyse the impact of heterogeneity in these systems

Efficient learning of reactive robot behaviors with a Neural-Q_learning approach

The purpose of this paper is to propose a Neural-Q_learning approach designed for online learning of simple and reactive robot behaviors. In this approach, the Q_function is generalized by a multi-layer neural network allowing the use of continuous states and actions. The algorithm uses a database of the most recent learning samples to accelerate and guarantee the convergence. Each Neural-Q_learning function represents an independent, reactive and adaptive behavior which maps sensorial states to robot control actions. A group of these behaviors constitutes a reactive control scheme designed to fulfill simple missions. The paper centers on the description of the Neural-Q_learning based behaviors showing their performance with an underwater robot in a target following task. Real experiments demonstrate the convergence and stability of the learning system, pointing out its suitability for online robot learning. Advantages and limitations are discussed

A behavior-based scheme using reinforcement learning for autonomous underwater vehicles

This paper presents a hybrid behavior-based scheme using reinforcement learning for high-level control of autonomous underwater vehicles (AUVs). Two main features of the presented approach are hybrid behavior coordination and semi on-line neural-Q_learning (SONQL). Hybrid behavior coordination takes advantages of robustness and modularity in the competitive approach as well as efficient trajectories in the cooperative approach. SONQL, a new continuous approach of the Q_learning algorithm with a multilayer neural network is used to learn behavior state/action mapping online. Experimental results show the feasibility of the presented approach for AUVs

Policy gradient based Reinforcement Learning for real autonomous underwater cable tracking

This paper proposes a field application of a high-level reinforcement learning (RL) control system for solving the action selection problem of an autonomous robot in cable tracking task. The learning system is characterized by using a direct policy search method for learning the internal state/action mapping. Policy only algorithms may suffer from long convergence times when dealing with real robotics. In order to speed up the process, the learning phase has been carried out in a simulated environment and, in a second step, the policy has been transferred and tested successfully on a real robot. Future steps plan to continue the learning process on-line while on the real robot while performing the mentioned task. We demonstrate its feasibility with real experiments on the underwater robot ICTINEU AUV

Adaption of Courses and Learning Environment to the User Context in dotLRN

The explosive growth of Internet during the last years has been reflected in the ever-increasing amount of the diversity and heterogeneity of user preferences, types and features of devices and access networks. Usually the heterogeneity in the context of the users which request Web contents is not taken into account by the servers that deliver them implying that these contents will not always suit their needs. In the particular case of e-learning platforms this issue is especially critical due to the fact that it puts at stake the knowledge acquired by their users. In the following paper we present a system that aims to provide the dotLRN e-learning platform with the capability to adapt to its users context. By integrating dotLRN with a multi-agent hypermedia system, online courses being undertaken by students as well as their learning environment are adapted in real time

Factores para la implementación eficiente de un sistema de control de gestión en las organizaciones

La implementación del MCS es una necesidad que demandan las organizaciones en la medida en que incrementan de tamaño, pero la experiencia muestra que esta metodología tiene casos de éxito como de fracaso, por lo que es importante identificar y contemplar los factores que influyen en la implementación para que el sistema sea efectivo. Este proyecto pretende analizar las variables y herramientas para la implementación de un MCS en una organización. Para este análisis se hizo una amplia revisión literaria teórica y práctica. Finalmente el resultado que se obtuvo fue definir cuáles son los factores determinantes para la implementación de un MCS efectivo en una empresa.

Impacto del sistema de control de gestión en el aprendizaje de las empresas multidomésticas del sector automotriz de Colombia

Las empresas multidomesticas en su direccionamiento estratégico necesitan de un sistema de control de gestión que les permita entender cómo se está desarrollando su estrategia en los diferentes mercados, frente a los objetivos planteados, de esta forma la implementación de estos sistemas de gestión generan la posibilidad de poder medir, valorar e informar sobre el cumplimiento y la evolución de los resultados previstos y ser un apoyo para la estrategia de mercados multidomesticos. Frente al contexto actual colombiano, se encontro que el mercado del sector automotriz, conformado por empresas multinacionales con una administración estratégica multidomestica, está cada vez más competitivos.Mediante la utilización de los sistemas de control de gestión es posible establecer e identificar variables que fomenten el aprendizaje organizacional, un campo de investigación académica y de práctica profesional el cual permite desarrollar variables claves dentro de la organización como lo son la innovación, la estrategia, la productividad y la toma de decisiones. Variables que favorecen el dinamismo y sostenibilidad del sector automotriz y las organizaciones que la conforman. Así garantizan un mayor aprendizaje creciente en el tiempo, por medio del cual se garantiza la perfecta armonía entre todos los empleados sin jerarquizacion y filtros para la información, dando paso al aprendizaje. Por medio de encuestas a directivos de las empresas mencionadas fue posible obtener conclusiones y encontrar similitudes entre el panorama actual contado por ellos mismos y lo que previamente se formulaba basados en fuentes teóricas, demostrando el real impacto de los sistemas de control de gestión en el aprendizaje de las empresas multidomesticas del sector automotriz en Colombia.

Diferencias individuales y desarrollo de habilidades de liderazgo : el rol del locus de control

El presente proyecto se ha elaborado con la finalidad de encontrar la relación existente entre el liderazgo y el locus de control, por medio de una revisión documental que permita dar una visión más amplia de estos dos fenómenos. De acuerdo con investigaciones realizadas, existen características individuales que afectan el desarrollo de liderazgo, lo cual a su vez tiene un impacto sobre el comportamiento de los individuos dentro de una sociedad. Uno de estos factores es el locus de control, el cual sesta determinado por características del individuo, y por el ambiente en el cual se desenvuelven las personas. Existen diferentes evidencias que soportan ésta relación entre locus de control y liderazgo. En éste estudio documental se describirán estos hallazgos, identificando las características del individuo y del contexto que influyen sobre ellos. Asimismo se pondrá en contexto a través del trabajo las características principales de los líderes y como se presentan las interacciones entre los lideres y seguidores, teniendo en cuenta que no todas las veces los seguidores desarrollan este papel al seguir a su líder, sino que por otro lado y estos pueden tomar parte fundamental en la interacción, influyendo de manera directa sobre el líder. Se recuerda que a los lideres los hacen sus seguidores y que sin estos no podrían desarrollar el papel de líder.

Relación entre el desarrollo de sistemas de control de gestión y los recursos y capacidades caso : Teleperformance Colombia

Siguiendo un marco teórico integrado por varios autores entorno a los sistemas de control de gestión a lo largo de varias décadas, este trabajo pretende estudiar y contrastar la relación entre el desarrollo de dichos sistemas y los recursos y capacidades. Para tal fin, se desarrolló un estudio de caso en Teleperformance Colombia (TC), una empresa dedicada a prestación de servicio de tercerización de procesos o business process outsourcing. En el estudio se establecieron dos variables para evaluar el desarrollo de sistema de control de gestión: el diseño y el uso. A su vez, para cada uno de ellos, se definieron los indicadores y preguntas que permitieran realizar la observación y posterior análisis. De igual manera, se seleccionaron los recursos y capacidades más importantes para el desarrollo del negocio: innovación, aprendizaje organizacional y capital humano. Sobre estos se validó la existencia de relación con el SCG implementado en TC. La información obtenida fue analizada y contrastada a través de pruebas estadísticas ampliamente utilizadas en este tipo de estudios en las ciencias sociales. Finalmente, se analizaron seis posibles relaciones de las cuales, solamente se ratificó el relacionamiento positivo entre uso de sistema de control gestión y el recurso y capacidad capital humano. El resto de relacionamientos, refutaron los planteamientos teóricos que establecían cierta influencia de los sistemas de control de gestión sobre recursos y capacidades de innovación y aprendizaje organizacional.

Estándares educativos para la gestión del conocimiento en e-learning.

Presentar una propuesta para ayudar a los docentes a obtener información de calidad y estructurarla adecuadamente a partir de la información existente en Internet, que permita desarrollar cursos on-line. La propuesta sugiere utilizar los objetos de aprendizaje (fragmentos de información) provenientes de fuentes externas aplicando una serie de criterios que permitan valorar la calidad de la información obtenida de la red, para incorporar estos objetos a un repositorio de datos a disposición de las organizaciones educativas para el desarrollo de cursos on-line. Literatura publicada sobre el tema en formato impreso o digital. Revisión bibliográfica sobre el tema. Recursos bibliográficos y buscadores en internet. Análisis de contenido y análisis comparativo. La investigación está estructurada en cuatro apartados. En el primero se aborda el tema del e-learning, indicando las características de este sistema de formación, los factores a considerar para disponer de un sistema eficiente de e-learning. Se exponen las ventajas de este sistema frente a la enseñanza presencial. La segunda parte está dedicada a la gestión del conocimiento en e-learning, se profundiza sobre el concepto de gestión del conocimiento en las organizaciones y las posibilidades que ofrece la informática en los procesos de gestión de conocimiento actualmente. La tercera parte aborda la utilización de estándares educativos en la gestión del conocimiento, realiza un recorrido histórico sobre los diferentes estándares de estructuración de la información y las potencialidades que suponen respecto a la incorporación e intercambio de información en las diferentes plataformas de teleformación que se utilizan actualmente. La última parte analiza las estrategias para gestionar información de calidad en un sistema de e-learning, basado en a utilización de objetos de aprendizaje. La propuesta que realiza la autora tiene como objetivo incorporar en un sistema de e-learning la información de utilidad disponible en la web, organizando la misma de acuerdo a su almacenamiento en sistemas de gestión de bases de datos, utilizados por las actuales plataformas de teleformación en líneas generales, sin especificar el sistema adoptado por alguna de las plataformas actualmente disponibles en el mercado. Expone los criterios de calidad que deben de reunir los objetos de aprendizaje para sugerir finalmente algunas pautas respecto a cómo se deberían estructurar estos objetos en unidades de aprendizaje que denomina unidades didácticas. La aplicación de lenguajes de marcado y de estándares de organización de la información no persigue otra finalidad que dar a conocer las posibilidades que ofrece la investigación tecnológica en la gestión de la información y el conocimiento, y como tal su aplicación el sistemas de e-learning. Las líneas futuras de investigación se orientarán a desarrollar en la realidad los planteamientos teóricos expuestos en esta investigación con el objeto de desarrollar un prototipo orientado a promover la gestión del conocimiento de calidad dentro de un sistema de e-learning, que pueda ser útil a las organizaciones educativas en la educación no presencial.