Efficient learning of reactive robot behaviors with a Neural-Q_learning approach

The purpose of this paper is to propose a Neural-Q_learning approach designed for online learning of simple and reactive robot behaviors. In this approach, the Q_function is generalized by a multi-layer neural network allowing the use of continuous states and actions. The algorithm uses a database of the most recent learning samples to accelerate and guarantee the convergence. Each Neural-Q_learning function represents an independent, reactive and adaptive behavior which maps sensorial states to robot control actions. A group of these behaviors constitutes a reactive control scheme designed to fulfill simple missions. The paper centers on the description of the Neural-Q_learning based behaviors showing their performance with an underwater robot in a target following task. Real experiments demonstrate the convergence and stability of the learning system, pointing out its suitability for online robot learning. Advantages and limitations are discussed

Semi-online neural-Q_leaming for real-time robot learning

Reinforcement learning (RL) is a very suitable technique for robot learning, as it can learn in unknown environments and in real-time computation. The main difficulties in adapting classic RL algorithms to robotic systems are the generalization problem and the correct observation of the Markovian state. This paper attempts to solve the generalization problem by proposing the semi-online neural-Q_learning algorithm (SONQL). The algorithm uses the classic Q_learning technique with two modifications. First, a neural network (NN) approximates the Q_function allowing the use of continuous states and actions. Second, a database of the most representative learning samples accelerates and stabilizes the convergence. The term semi-online is referred to the fact that the algorithm uses the current but also past learning samples. However, the algorithm is able to learn in real-time while the robot is interacting with the environment. The paper shows simulated results with the "mountain-car" benchmark and, also, real results with an underwater robot in a target following behavior

Estudio de asociación entre genotipo de DAT1 y transtorno por déficit de atención / hiperactividad

Introducción: El TDAH tiene un componente genético importante; el gen de transportador de Dopamina (DAT1) se ha asociado con susceptibilidad al TDAH y con sus endofenotipos. El VNTR de 40pb en la región 3’UTR aumenta la expresión del DAT1. En Colombia no hay ningún estudio previo que indique evidencia de la asociación genética entre TDAH y el gen DAT1. Objetivo: Determinar asociación entre el VNTR del DAT1 y el fenotipo y/o endofenotipos del TDAH. Métodos: Se seleccionaron 73 pacientes con TDAH y 75 controles, se valoró en los casos inteligencia y funciones ejecutivas. Mediante (PCR) se amplificó el VNTR DAT1. Se establecieron estadísticos genético poblacionales, análisis de asociación y de regresión logística entre las pruebas neuropsicológicas y genotipo. Resultado: El polimorfismo del DAT1 no mostró asociación con TDAH, ni con alteraciones en las funciones ejecutivas. El genotipo 10/10 del VNTR DAT1 se encontró asociado con el índice de velocidad de procesamiento (p <0,05). En el subgrupo hiperactividad hubo asociación con algunas subpruebas de flexibilidad cognitiva, número de respuestas correctas, total de errores, número de respuestas perseverativas (p ≤ 0.01). En el subgrupo mixto se asoció con índice de comprensión verbal (p <0,05). Conclusiones: No hubo asociación entre el polimorfismo VNTR (DAT1) y el fenotipo de TDAH. Se encontraron asociaciones entre genotipo y algunos test de flexibilidad cognitiva e índice de comprensión verbal. Se establecieron los estadísticos genético poblacionales de este polimorfismo para la población analizada, el cual corresponde al primer reporte de una muestra de nuestro país.

Estimulacion magnetica trascraneal en el desempeno motor en enfermedades del sistema nervioso central: Revision Sistematica

Introducción: El uso de la estimulación cerebral no invasiva en procesos de rehabilitación es de gran interés, por cuanto con mediación tecnológica se generan nuevas posibilidades de recuperación motora, a partir de la activación de la corteza cerebral. El objetivo del estudio es establecer la evidencia del uso terapéutico de la EMT, relacionado con el desempeño motor de pacientes con enfermedades del sistema nervioso central. Metodología: Se realizó una revisión sistemática de la literatura. Se incluyeron 10 estudios en el análisis cualitativo que incluyó la evaluación de calidad con la escala de Jadad y del riesgo de sesgo con la herramienta Cochrane. Fueron excluidos 1613 estudios. Se aplicó el protocolo del estudio para la extracción, revisión y validez de los estudios incluidos. Resultados: La evidencia disponible muestra resultados positivos del uso terapéutico de la EMT en el desempeño motor en aspectos como la aceleración, la fuerza de pinza y de agarre, la estabilidad y la fuerza muscular, así como una mejor velocidad de la marcha y una disminución en la frecuencia y severidad de los espasmos. Discusión: La EMT puede constituir una estrategia terapéutica para mejorar el desempeño motor en pacientes con ECV, Lesión Medular y enfermedad de Parkinson, que requiere más investigación por la heterogeneidad de los diseños y medidas de descenlace utilizados, así como por la alta variabilidad interindividual que hace complejo estandarizar los protocolos de su uso terapéutico.

Data-Driven Text Generation using Neural Networks & Provenance is Complicated and Boring — Is there a solution?

Title: Data-Driven Text Generation using Neural Networks Speaker: Pavlos Vougiouklis, University of Southampton Abstract: Recent work on neural networks shows their great potential at tackling a wide variety of Natural Language Processing (NLP) tasks. This talk will focus on the Natural Language Generation (NLG) problem and, more specifically, on the extend to which neural network language models could be employed for context-sensitive and data-driven text generation. In addition, a neural network architecture for response generation in social media along with the training methods that enable it to capture contextual information and effectively participate in public conversations will be discussed. Speaker Bio: Pavlos Vougiouklis obtained his 5-year Diploma in Electrical and Computer Engineering from the Aristotle University of Thessaloniki in 2013. He was awarded an MSc degree in Software Engineering from the University of Southampton in 2014. In 2015, he joined the Web and Internet Science (WAIS) research group of the University of Southampton and he is currently working towards the acquisition of his PhD degree in the field of Neural Network Approaches for Natural Language Processing. Title: Provenance is Complicated and Boring — Is there a solution? Speaker: Darren Richardson, University of Southampton Abstract: Paper trails, auditing, and accountability — arguably not the sexiest terms in computer science. But then you discover that you've possibly been eating horse-meat, and the importance of provenance becomes almost palpable. Having accepted that we should be creating provenance-enabled systems, the challenge of then communicating that provenance to casual users is not trivial: users should not have to have a detailed working knowledge of your system, and they certainly shouldn't be expected to understand the data model. So how, then, do you give users an insight into the provenance, without having to build a bespoke system for each and every different provenance installation? Speaker Bio: Darren is a final year Computer Science PhD student. He completed his undergraduate degree in Electronic Engineering at Southampton in 2012.

Neural networks of human nature and nurture

Neural network methods have facilitated the unification of several unfortunate splits in psychology, including nature versus nurture. We review the contributions of this methodology and then discuss tentative network theories of caring behavior, of uncaring behavior, and of how the frontal lobes are involved in the choices between them. The implications of our theory are optimistic about the prospects of society to encourage the human potential for caring. 

Validación diagnóstica del test neural 1 para el síndrome de túnel del carpo

El objetivo de este estudio fue realizar una prueba de validez diagnostica del test neural 1 para el diagnóstico del Síndrome de Túnel del Carpo (STC) utilizando como prueba de referencia o de oro el test de conducción nerviosa. En este estudio participaron 115 sujetos, 230 manos con sospecha clínica de STC quienes fueron evaluados con el test de conducción nerviosa y el test neural 1. Se encontró una sensibilidad del 93.0% (IC 95%:88,21-96,79) y una especificidad del 6,67% (IC 95%:0,0-33,59), razón de verosimilitud positiva fue de 1,00 y razón de verosimilitud negativa de 1,05. Valor predictivo positivo de 86,9% y un valor predictivo negativo de 12,5%. Se concluye que el test neural 1 es una prueba clínica de alta sensibilidad y baja especificidad de gran utilidad para el monitoreo e identificación del STC. Es un procedimiento para el diagnóstico clínico de bajo costo que puede incluirse en los exámenes de rutina de los trabajadores como complemento a las pruebas clínicas sugeridas por las Gatiso para dar mayor precisión a la identificación temprana del STC. Se sugiere combinarla con otros test de mayor especificidad para ser aplicada en trabajadores en condiciones de riesgo o que presenten síntomas en miembros superiores y realizar otros estudios en donde participen sujetos sin diagnóstico clínico del STC.

Análisis del gen adra2a receptor alfa 2a adrenergico en pacientes con trastorno de hiperactividad y déficit de atención

El trastorno de hiperactividad y déficit de atención (THDA), es definido clínicamente como una alteración en el comportamiento, caracterizada por inatención, hiperactividad e impulsividad. Estos aspectos son clasificados en tres subtipos, que son: Inatento, hiperactivo impulsivo y mixto. Clínicamente se describe un espectro amplio que incluye desordenes académicos, trastornos de aprendizaje, déficit cognitivo, trastornos de conducta, personalidad antisocial, pobres relaciones interpersonales y aumento de la ansiedad, que pueden continuar hasta la adultez. A nivel global se ha estimado una prevalencia entre el 1% y el 22%, con amplias variaciones, dadas por la edad, procedencia y características sociales. En Colombia, se han realizado estudios en Bogotá y Antioquia, que han permitido establecer una prevalencia del 5% y 15%, respectivamente. La causa específica no ha sido totalmente esclarecida, sin embargo se ha calculado una heredabilidad cercana al 80% en algunas poblaciones, demostrando el papel fundamental de la genética en la etiología de la enfermedad. Los factores genéticos involucrados se relacionan con cambios neuroquímicos de los sistemas dopaminérgicos, serotoninérgicos y noradrenérgicos, particularmente en los sistemas frontales subcorticales, corteza cerebral prefrontal, en las regiones ventral, medial, dorsolateral y la porción anterior del cíngulo. Basados en los datos de estudios previos que sugieren una herencia poligénica multifactorial, se han realizado esfuerzos continuos en la búsqueda de genes candidatos, a través de diferentes estrategias. Particularmente los receptores Alfa 2 adrenérgicos, se encuentran en la corteza cerebral, cumpliendo funciones de asociación, memoria y es el sitio de acción de fármacos utilizados comúnmente en el tratamiento de este trastorno, siendo esta la principal evidencia de la asociación de este receptor con el desarrollo del THDA. Hasta la fecha se han descrito más de 80 polimorfismos en el gen (ADRA2A), algunos de los cuales se han asociado con la entidad. Sin embargo, los resultados son controversiales y varían según la metodología diagnóstica empleada y la población estudiada, antecedentes y comorbilidades. Este trabajo pretende establecer si las variaciones en la secuencia codificante del gen ADRA2A, podrían relacionarse con el fenotipo del Trastorno de Hiperactividad y el Déficit de Atención.

Eficacia y seguridad de la melatonina para el manejo de los trastornos del sueño en el autismo: meta-análisis

INTRODUCCIÓN: El 80% de los niños y adolescentes con trastornos del espectro autista (TEA) presenta algún trastorno del sueño, en cuya génesis al parecer intervienen alteraciones en la regulación de la melatonina. El objetivo de este metaanálisis fue determinar la eficacia y seguridad de la melatonina para el manejo de ciertos trastornos del sueño en niños con TEA. MÉTODOS: Tres revisores extrajeron los datos relevantes de los ensayos clínicos aleatorizados doble ciego de alta calidad publicados en bases de datos primarias, de ensayos clínicos, de revisiones sistemáticas y de literatura gris; además se realizó búsqueda en bola de nieve. Se analizaron los datos con RevMan 5.3. Se realizó un análisis del inverso de la varianza por un modelo de efectos aleatorios para las diferencias de medias de los desenlaces propuestos: duración del tiempo total, latencia de sueño y número de despertares nocturnos. Se evaluó la heterogeneidad interestudios con el parámetro I2 RESULTADOS: La búsqueda inicial arrojó 355 resultados, de los cuales tres cumplieron los criterios de selección. La melatonina resultó ser un medicamento seguro y eficaz para aumentar la duración total del sueño y disminuir la latencia de sueño en niños y adolescentes con TEA; hasta el momento la evidencia sobre el número de despertares nocturnos no es estadísticamente significativa. DISCUSIÓN: A la luz de la evidencia disponible, la melatonina es una elección segura y eficaz para el manejo de ciertos problemas del sueño en niños y adolescentes con TEA. Es necesario realizar estudios con mayores tamaños muestrales y comparados con otros medicamentos disponibles en el mercado.

Spontaneous otoacoustic emissions in a chinchilla: audiometric correlates as seen in audiogram microstructure

This paper reviews a study to evaluate the audiogram microstructure of a chinchilla with a documented spontaneous otoacoustic emission.

Perceptual correlates of spectral changes in complex tones

This paper reviews a study of tonal precepts such as pitch and timbre as a means of facilitating auditory discrimination tasks.

Student musicians' perception of loudness and how it correlates to the measured level

The purpose of this project was to evaluate student musicians’ perception of loudness and see how it relates to the measured sound level when playing an instrument alone and when playing in an orchestra. Perhaps by examining this relationship, strategies can be developed to educate musicians on the risk of excessive noise exposure and hearing protection options.

Anatomic correlates of strial presbycusis in recombinant inbred mouse strains

This project attempts to identify anatomic features that predict the range of the ‘normal’ endocochlear potential in young inbred mice. Cochlear lateral wall histologic metrics were compared in recombinant inbred (RI) mouse strains formed from BALB/c and C57BL/6 mice.