Conceptual Design of a Circulating Fluidized Bed Reactor as a Thermochemical Thermal Energy Storage System for Applications in Concentrated Solar Thermal Power Plants

Thesis (Master's)--University of Washington, 2016-08

Techniques for batch reinforcement learning in robotics

This thesis addresses the Batch Reinforcement Learning methods in Robotics. This sub-class of Reinforcement Learning has shown promising results and has been the focus of recent research. Three contributions are proposed that aim to extend the state-of-art methods allowing for a faster and more stable learning process, such as required for learning in Robotics. The Q-learning update-rule is widely applied, since it allows to learn without the presence of a model of the environment. However, this update-rule is transition-based and does not take advantage of the underlying episodic structure of collected batch of interactions. The Q-Batch update-rule is proposed in this thesis, to process experiencies along the trajectories collected in the interaction phase. This allows a faster propagation of obtained rewards and penalties, resulting in faster and more robust learning. Non-parametric function approximations are explored, such as Gaussian Processes. This type of approximators allows to encode prior knowledge about the latent function, in the form of kernels, providing a higher level of exibility and accuracy. The application of Gaussian Processes in Batch Reinforcement Learning presented a higher performance in learning tasks than other function approximations used in the literature. Lastly, in order to extract more information from the experiences collected by the agent, model-learning techniques are incorporated to learn the system dynamics. In this way, it is possible to augment the set of collected experiences with experiences generated through planning using the learned models. Experiments were carried out mainly in simulation, with some tests carried out in a physical robotic platform. The obtained results show that the proposed approaches are able to outperform the classical Fitted Q Iteration.

Diseño y optimización de un aplanador de flujo neutrónico para dopaje de silicio en el Reactor RA-10.

El reactor multipropósito RA-10 que se construirá en Ezeiza tiene como objetivo principal aumentar la producción de radioisótopos destinados al diagnóstico de enfermedades; adicionalmente el proyecto RA-10 permitirá ofrecer al sistema científico-tecnológico oportunidades de investigación, desarrollo y producción. Entre ellas se contará con una facilidad de dopaje de silicio a través de transmutación neutrónica para producir material semiconductor. La principal ventaja de esta técnica de fabricación es que se obtiene el semiconductor más homogéneamente dopado del mercado. Esto se logra irradiando a la pieza con un flujo neutrónico axialmente uniforme. La uniformidad axial se obtiene diseñando un aplanador de flujo que consiste en un conjunto de anillos de acero de diferentes espesores para lograr aplanar el perfil de flujo neutrónico que irradia al silicio. El objetivo de este trabajo es diseñar e implementar un algoritmo que permita calcular los espesores óptimos de acero de forma tal de modificar el perfil de flujo neutrónico que se genera en el núcleo para uniformizarlo lo más posible. Se proponen y evalúan mejoras para incrementar el valor del flujo neutrónico al cual se uniformiza. Posteriormente se evalúan los tiempos necesarios para obtener diferentes resistividades objetivo y se realizan cálculos de activación neutrónica para determinar los tiempos de decaimiento necesarios para cumplir los límites de actividad requeridos. Se realizan además cálculos de calentamiento para determinar la potencia que se debe disipar para refrigerar la facilidad.

Sistema avanzado de alarmas para el reactor RA6.

Los sistemas de alarmas constituyen un elemento clave en las plantas modernas de procesos industriales. A lo largo de los años, los mismos han ido evolucionando de la mano del importante desarrollo en la industria del software, para pasar de ser simples paneles de anunciación y lámparas cableadas hasta complejos sistemas inteligentes que asisten al operador en sus funciones de operación. En el desarrollo de este trabajo se planteó diseñar un Sistema Avanzado de Alarmas para el Reactor Nuclear de Investigación RA6 contemplando las nuevas tecnologías existentes para incorporar mejoras a la actual sala de control. Para ello se trabajó siguiendo la metodología propuesta por la guía de diseño de sistemas de alarmas ANSI / ISA- SP-18. Para asistir al diseño y la verificación del sistema se utilizó un modelo termohidráulico de la planta desarrollado en Matlab/Simulink. Entre las nuevas herramientas incorporadas en el prototipo final obtenido se pueden mencionar: creación de archivos históricos, asignación de prioridades, supresiones de alarmas según estado operativo, filtrado y agrupamiento de alarmas.

Diseño de un condensador para un loop experimental para probar maniobras de arranque del reactor CAREM.

En este trabajo se diseñó un condensador de vapor sobrecalentado (320°C@2bar) de 78KW que formará parte de un arreglo experimental en el cual se probarán maniobras de arranque del reactor CAREM. Con este objetivo se hizo un estudio de las distintas tecnologías de condensadores existentes en el mercado y se seleccionó el más apropiado para este proyecto. Se encontró que el formato carcasa-tubo de orientación horizontal era el más apropiado. Se efectuó un dimensionamiento termohidráulico del mismo y se realizó posteriormente un diseño mecánico para satisfacer los requerimientos siguiendo las normas TEMA y ASME. Se efectuó el armado de un circuito termohidráulico, empleando un intercambiador carcasa y tubo de la CNEA. Obteniendo experiencia en dicha tarea. Una vez finalizado el proceso de análisis y diseño del condensador, se realizaron los planos de ingeniería básica del mismo empleando un programa de diseño 3D.

A novel vortex flow reactor for the purification of B-phycoerythrin from Porphyridium cruentum

The purification of B-phycoerythrin from a concentrated extract of disrupted Porphyridium cruentum cells was carried out using a new vortex flow reactor design for protein purification. The reactor behaved as an expanded bed in the laminar vortices flow regime where the Streamline DEAE resin was expanded by the axial flow and stabilized by the vortex flow. After the broth culture was centrifuged and resuspended in the adsorption buffer, the concentrated extract of disrupted cells was directly loaded into the vortex flow reactor. The purification of B-phycoerythrin was carried out in two steps: adsorption in the expanded bed and elution from the settled bed. 142.0 mg of B-phycoerythrin was eluted representing a total recovery yield of 86.6%. Prior to B-phycoerythrin purification, the protein adsorption of the vortex flow reactor was characterized through hydrodynamic studies and a dynamic capacity measurement using a standard protein.