面向ETL过程的数据质量控制系统的设计与实现

ETL过程是一个从分布数据源(包括数据库、应用系统、文件系统等)抽取数据，进行转换、集成和传输，并最终加载到目标系统的过程。传统的ETL过程主要服务于数据仓库(Data Warehouse)，属于企业决策支持系统的一部分。随着数据集成技术的发展和轻量级的数据集成中间件的出现，ETL过程广泛应用于企业数据集成与数据交换系统。在ETL过程中，数据质量控制是一个极为重要的基本组件和功能，它对集成中的数据进行检测、转换、清洗，以防止“脏”数据进入目标系统。在ETL过程中如果缺少对数据质量的有效控制，就会导致数据集成项目无法圆满实现目标或彻底失败。 针对ETL过程中存在的数据质量问题，设计并实现面向ETL过程的数据质量控制系统，是本文研究的重点。论文通过对ETL过程中各阶段可能产生的数据质量问题进行了分类，并对质量控制需求建模，提出一个面向ETL过程的数据质量控制框架，该框架通过对源端数据的分析来指导ETL的设计，通过灵活、可配置、可扩展的数据处理机制实现数据的过滤、转换与清洗，并支持对数据质量处理全过程进行监控。在该框架基础上，论文特别在灵活的数据处理机制、数据分析、数据过滤和数据清洗四个方面进行了探讨。在数据处理机制方面，提出了基于插件元模型的数据处理机制，该机制可以满足用户对数据过滤、数据转换与数据清洗等功能的各种定制需求，并具有较强的可扩展性；在数据分析方面，根据字段类型对数据进行分类统计，并针对大数据量统计分析问题，提出了可自动配置的不同数据统计策略；在数据过滤方面，通过将抽取数据的SQL语句重写的方式，过滤不满足完整性约束的元组；在数据清洗方法方面给出了一种利用统计信息动态确定属性相似度权重的方法，对基于字段的相似记录检测算法的领域无关算法进行了改进，提高了数据检测的准确性。在上述工作基础上，在数据集成中间件OnceDI中设计并实现了数据质量控制系统，并在设计中通过设计模式的应用增强系统的可扩展性。

基于D稳定域和ITAE准则的主动队列管理算法

主动队列管理（active queue management，简称AQM）是网络拥塞控制的研究热点之一，其中的关键问题是如何设计反馈控制策略．提出一种新的基于D稳定域和时间乘以误差绝对值乘积积分（integral of time-weighted absolute error,简称ITAE）性能准则的比例-积分-微分（proportional-integral-differential，简称PID）优化设计方法（简称DITAE-PID），并用于AQM控制器的设计，控制闭环系统的理想动态性能．首先在复平面上设定一组理想的D稳定域，然后以ITAE为目标函数，通过数值优化算法求出控制器的参数，使得闭环系统的所有特征根都在D稳定域内，以降低排队延时，提高有效吞吐量．对比仿真实验结果表明孩算法能够预先探测和控制拥塞，有较好的鲁棒性，链路利用率更高，丢包率更小，平均队列长度更趋于期望值，同时，趋于期望队列长度的时间更短，其综合性能明显优于典型的随机早期探测（random early detection，简称RED）和比例-积分（proportional-integral，简称PI）算法．

中药处方配伍监控系统的设计与实现

医院信息系统(hospital information system,HIS)作为医院信息化建设的重要组成部分越来越受到社会的重视,已经进入一个高速发展的阶段。但是作为诊疗过程的一个重要组成部分-药物处方治疗,在HIS中却缺少必要的监控与指导。在HIS标准化推进的同时,更应该对其深度和广度进行研究,结合软件工程的设计思想,基于面向对象的开发方法,设计开发了“中药处方配伍”监控系统,提供了临床用药指导功能,使其作为HIS的一个子系统能够实时的对医生处方进行监控,使临床医药人员记得更多、更准、更细,以降低药源性疾病,提高用药质量,加强用药管理,避免医疗纠纷。

一种分布式转发基站测控系统的研究与实现

布式监测系统(DCS)在许多领域具有重要的应用价值.针对目前分布式监测系统造价高、运行不稳定等问题,该文提出了一种解决方案--基于多种通讯链路的分布式转发基站监测系统.该文详细介绍了阐述了该监测控制系统的工作原理,并对监测控制系统的结构(包括软件的结构和硬件系统的结构)进行了具体地说明,然后详细描述了监控系统软件、硬件以及通讯协议的设计与实现;文章最后,对基于该系统的一个成功应用--无线寻呼基站无人测控系统的实现作了介绍.无线寻呼基站运行实践中所表现出的低成本、高性能的特点进一步验证了该方案的可实施性.

我国的风电技术和风电发展

发展风力发电是我国能源战略的一项重要内容。文章首先介绍了我国风电利用的总体状况；然后从风机叶片制造、控制系统及整机制造等方面，详述了现阶段我国风电设备的基本状况；最后对我国风电发展障碍进行了分析。并提出了相关建议。

车载式变量施药机控制系统设计与试验

施药控制是提高作业质量、减少化学污染、降低生产成本的关键技术。该文基于单片机AT89C52,采用滞环控制法,设计了一种车载式变量施药机控制系统。该系统能够根据施药机行走速度自动变更喷药量,实现施药量不变。试验表明:加速度小于0.4m/s2时,实际施药量与设定施药量之间的误差不超过8%,且雾化效果良好、生产效率高,还可以减少农药的残留和对环境的污染,能够满足农业生产的需要。

An investigation on fiber coupled polymer waveguide for electro-optic modulator

A novel crosslinkable polyurethane is used as the core layer of the electro-optic(E-O) modulator. The refractive index and dispersion of this material have been detected by analyzing the F-P oscillation in transmission spectra. Calculated results from the effective index method are given to design the Mach-Zehnder and straight 5-layer ridge wave-guide device (including the metal electrodes). With light at 1.31 mum being fiber coupled into waveguide, the mode properties of these devices have been demonstrated in a micron control system. The guided mode is accordant with the theoretical analysis.

一种新的分布式控制系统容错调度算法

目前多数容错调度算法在调度非周期任务时采用预留时间的方法,非周期任务无法得到充分响应.针对该问题,提出一种新的分布式控制系统容错调度算法,采用任务集划分的方法在不同处理机上运行不同的周期任务子集,使每个处理机具有不同的非周期任务预留时间,当非周期任务发生时,即可得到有效响应.结果表明,该方法能提高容错调度的效率.

容错控制系统的一类新型阵列码技术

随着现代化生产的不断发展,控制系统变得日渐复杂,出现各类故障的可能性也随之增大.为了解决控制系统复杂化引起系统安全性减低的问题,人们将编码技术作为一种软件冗余技术应用于控制系统,由于控制系统具有强实时性的要求,因此阵列码技术成为主流技术.阵列码技术虽然具有纠错时间短的优点,但是纠错能力有限,一般只能纠正一到两个磁盘错误.针对上述不足提出一种能够在三个磁盘同时发生错误的条件下有效恢复数据的新型阵列码-扩展X码,给出编译码算法,并将其应用于火箭控制系统的容错.

基于TCP/ IP 协议的CSR离子泵电源远程监控软件系统设计

This paper discuss a Ion-pump Power Supply control system making use of RS232 series bus and Intranet.The system s hardware VAC800 is composed of MSP430F149 mixed-signal processors produced by TI and UA7000A network model.MSP430F149 has advantages of ultra-low-power and high-integration.The Ion-pump Power Supply control system has the characteristics of strong function,simple structure,high reliability,strong resistance of noise,no peripheral chip,etc.Visual studio 2005 is used to design the system s softwa...中文文摘：论述了通过RS-232总线和Intranet网络,来实现对远端的离子泵电源的监测与控制。系统硬件VAC800由TI公司的MSP430F149混合信号处理器和UA7000A网络模块构成。MSP430F149具有超低功耗和高集成度等优点,利用它构建的离子泵电源监控系统功能强大,结构简单,可靠性高,抗干扰能力强。系统软件采用visual studio 2005设计。本监控系统能够很好地完成对加速器离子泵电源监视与控制。

基于分布式内存数据库的HIRFL-CSR真空监控系统

This paper introduced a real-time vacuum monitor system based on multilayer Web architecture for HIRFL-CSR(Heavy Ion Research Facility of Lanzhou & Cooler Storage Ring) project in Lanzhou.It combined with COM/DCOM to develop the application layer,and developed the web layer with ActiveX and Ajax technology.It provided a facility and efficiency method for real-time control.The application shows that this system runs stably and accurately.中文文摘：简要介绍了国家"九五"重大科学工程——兰州重离子加速器冷却储存环(HIRFL-CSR)真空监控系统的总体结构,分析了在Web构架下,基于分布式内存数据库的多层真空监控系统的实现方法。采用分布式内存数据库,解决了基于Web构架的分布式实时应用环境下对系统和网络资源的消耗问题。在软件控制方面采用了统一调度,既简化了软件实现过程,又提高了系统的安全性、高效性和易维护性。该系统已成功运行。

CSR主环磁场电源控制系统研究

CSR控制系统是一个很庞大的系统，对它的控制是由许多分控制系统组成： 真空系统、电子冷却系统、束流诊断系统，CSR高频系统，数据获取系统等。磁 场电源控制系统是CSR控制系统中很重要的一部分，它是一个任意波形发生系统。 在CSR的分控制系统中，所有依赖波形控制的系统都可以由它来控制。波形的形 状由物理人员根据加速器物理要求计算得出。因为加速器运行的所有过程都为电 源所控制，所以我们的控制系统的直接控制对象就是磁场电源。在整个控制系统 中最重要的就是在控制过程中，控制过程波形的同步和控制过程波形的精度，这 是同步加速器控制系统的关键所在。过程波形的同步由同步时序系统控制，这是 CSR主环成功运行的决定条件。 本文对磁场电源控制系统和时序系统分别进行了论述。对磁场电源控制系统， 主要从系统的结构，I/O部件的硬件设计，I/O部件的软件设计这几个方面进行 论述,其中，I/O部件由I/O控制器和DSP处理器组成；对时序系统，论述了设计 原理和具体实现；最后给出了实验平台测试和现场测试的结果。 本文的创新点主要有，在加速器控制领域：（1）采用ARM+DSP的控制方式； （2）同步时序系统的末端定时原理； 从测试结果来看，我们的控制系统不管从结构设计，还是从软硬件设计上都 达到了设计的要求

CSR真空控制系统的研究

本论文主要解决CSR真空系统的控制实现与连锁保护问题。 HIRFL-CSR（Heavy Ion Research Facility at LanZhou-Cooling Storage Ring兰州重离子冷却储存环）是国家重大科学工程。为了保证CSR正常运行，超高真空系统的平均真空度必须达到6×10-9Pa，超高的真空度来之不易，CSR上任何一处真空设备发生故障，就会破坏真空度，所以CSR必须具有响应速度快、安全可靠，稳定性好的真空控制与连锁保护系统。 HIRFL-CSR真空设备有离子泵电源、分子泵、钛升华泵、阀门、真空计等。分子泵只在粗抽时使用，钛升华泵为间歇升华，因此不需要监控。需要显示和控制的设备为离子泵电源、真空计和真空阀门。通过对CSR上每个真空计的真空度数据的监测和真空阀门状态的采集，一旦真空度降低到一定阈值，立即关闭相应位置阀门（保护真空）,并给出故障报警，从而实现真空系统的连锁保护。 真空控制系统以嵌入式处理器ARM、复杂可编程逻辑器件CPLD和微控制器MSP430为核心，实现了远程数据采集、数据显示和自动控制等功能。本系统可以进行现场监控与调试，也可以通过集成的100Mbps以太网接口电路进行远程监测与控制，CSR上各处真空度和真空阀门状态自动传送到中央控制中心，中控中心也可以发送命令查询当前真空设备状态和各种读数。 本文主要介绍了基于ARM、CPLD和MSP430的嵌入式真空控制系统的设计与实现。内容主要包括(1)系统各部分硬件电路设计与真空控制功能实现 ，硬件系统调试 。(2)嵌入式uClinux操作系统构建和在其上进行的应用程序，设备驱动程序，串行通信程序的开发。（3）CPLD的VHDL程序和MSP430的C430程序设计。 本文目的是解决CSR真空控制系统问题，但对于许多远程数据采集与控制等问题的解决有重要参考价值