面向ETL过程的数据质量控制系统的设计与实现

ETL过程是一个从分布数据源(包括数据库、应用系统、文件系统等)抽取数据，进行转换、集成和传输，并最终加载到目标系统的过程。传统的ETL过程主要服务于数据仓库(Data Warehouse)，属于企业决策支持系统的一部分。随着数据集成技术的发展和轻量级的数据集成中间件的出现，ETL过程广泛应用于企业数据集成与数据交换系统。在ETL过程中，数据质量控制是一个极为重要的基本组件和功能，它对集成中的数据进行检测、转换、清洗，以防止“脏”数据进入目标系统。在ETL过程中如果缺少对数据质量的有效控制，就会导致数据集成项目无法圆满实现目标或彻底失败。 针对ETL过程中存在的数据质量问题，设计并实现面向ETL过程的数据质量控制系统，是本文研究的重点。论文通过对ETL过程中各阶段可能产生的数据质量问题进行了分类，并对质量控制需求建模，提出一个面向ETL过程的数据质量控制框架，该框架通过对源端数据的分析来指导ETL的设计，通过灵活、可配置、可扩展的数据处理机制实现数据的过滤、转换与清洗，并支持对数据质量处理全过程进行监控。在该框架基础上，论文特别在灵活的数据处理机制、数据分析、数据过滤和数据清洗四个方面进行了探讨。在数据处理机制方面，提出了基于插件元模型的数据处理机制，该机制可以满足用户对数据过滤、数据转换与数据清洗等功能的各种定制需求，并具有较强的可扩展性；在数据分析方面，根据字段类型对数据进行分类统计，并针对大数据量统计分析问题，提出了可自动配置的不同数据统计策略；在数据过滤方面，通过将抽取数据的SQL语句重写的方式，过滤不满足完整性约束的元组；在数据清洗方法方面给出了一种利用统计信息动态确定属性相似度权重的方法，对基于字段的相似记录检测算法的领域无关算法进行了改进，提高了数据检测的准确性。在上述工作基础上，在数据集成中间件OnceDI中设计并实现了数据质量控制系统，并在设计中通过设计模式的应用增强系统的可扩展性。

中药处方配伍监控系统的设计与实现

医院信息系统(hospital information system,HIS)作为医院信息化建设的重要组成部分越来越受到社会的重视,已经进入一个高速发展的阶段。但是作为诊疗过程的一个重要组成部分-药物处方治疗,在HIS中却缺少必要的监控与指导。在HIS标准化推进的同时,更应该对其深度和广度进行研究,结合软件工程的设计思想,基于面向对象的开发方法,设计开发了“中药处方配伍”监控系统,提供了临床用药指导功能,使其作为HIS的一个子系统能够实时的对医生处方进行监控,使临床医药人员记得更多、更准、更细,以降低药源性疾病,提高用药质量,加强用药管理,避免医疗纠纷。

一种分布式转发基站测控系统的研究与实现

布式监测系统(DCS)在许多领域具有重要的应用价值.针对目前分布式监测系统造价高、运行不稳定等问题,该文提出了一种解决方案--基于多种通讯链路的分布式转发基站监测系统.该文详细介绍了阐述了该监测控制系统的工作原理,并对监测控制系统的结构(包括软件的结构和硬件系统的结构)进行了具体地说明,然后详细描述了监控系统软件、硬件以及通讯协议的设计与实现;文章最后,对基于该系统的一个成功应用--无线寻呼基站无人测控系统的实现作了介绍.无线寻呼基站运行实践中所表现出的低成本、高性能的特点进一步验证了该方案的可实施性.

计算机控制中的模糊调度设计

研究了具有模糊截止期的多控制任务的实时调度问题,提出了奉献度的概念和最大奉献优先(LDF)的调度策略.为了减小因任务间频繁切换造成的系统开销,提出了基于抢占阈值的最大奉献优先(TLDF)调度策略.最后,通过仿真比较了LDF和TLDF两种调度策略,实现了具有模糊截止期的控制任务调度,在减少并均衡控制性能损失的同时提高系统计算资源的使用率.

我国的风电技术和风电发展

发展风力发电是我国能源战略的一项重要内容。文章首先介绍了我国风电利用的总体状况；然后从风机叶片制造、控制系统及整机制造等方面，详述了现阶段我国风电设备的基本状况；最后对我国风电发展障碍进行了分析。并提出了相关建议。

车载式变量施药机控制系统设计与试验

施药控制是提高作业质量、减少化学污染、降低生产成本的关键技术。该文基于单片机AT89C52,采用滞环控制法,设计了一种车载式变量施药机控制系统。该系统能够根据施药机行走速度自动变更喷药量,实现施药量不变。试验表明:加速度小于0.4m/s2时,实际施药量与设定施药量之间的误差不超过8%,且雾化效果良好、生产效率高,还可以减少农药的残留和对环境的污染,能够满足农业生产的需要。

Single steady frequency and narrow line width external cavity semiconductor laser

A single longitudinal mode and narrow line width external cavity semiconductor laser is proposed. It is constructed with a semiconductor laser, collimator, a flame grating, and current and temperature control systems. The one facet of semiconductor laser is covered by high transmission film, and another is covered by high reflection film. The flame grating is used as light feedback element to select the mode of the semiconductor laser. The temperature of the constructed external cavity semiconductor laser is stabilized in order of 10(-3)degreesC by temperature control system. The experiments have been carried out and the results obtained-the spectral fine width of this laser is compressed to be less than 1.4MHz from its original line-width of more than 1200GHz and the output stability (including power and mode) is remarkably enhanced.

An investigation on fiber coupled polymer waveguide for electro-optic modulator

A novel crosslinkable polyurethane is used as the core layer of the electro-optic(E-O) modulator. The refractive index and dispersion of this material have been detected by analyzing the F-P oscillation in transmission spectra. Calculated results from the effective index method are given to design the Mach-Zehnder and straight 5-layer ridge wave-guide device (including the metal electrodes). With light at 1.31 mum being fiber coupled into waveguide, the mode properties of these devices have been demonstrated in a micron control system. The guided mode is accordant with the theoretical analysis.

一种新的分布式控制系统容错调度算法

目前多数容错调度算法在调度非周期任务时采用预留时间的方法,非周期任务无法得到充分响应.针对该问题,提出一种新的分布式控制系统容错调度算法,采用任务集划分的方法在不同处理机上运行不同的周期任务子集,使每个处理机具有不同的非周期任务预留时间,当非周期任务发生时,即可得到有效响应.结果表明,该方法能提高容错调度的效率.

容错控制系统的一类新型阵列码技术

随着现代化生产的不断发展,控制系统变得日渐复杂,出现各类故障的可能性也随之增大.为了解决控制系统复杂化引起系统安全性减低的问题,人们将编码技术作为一种软件冗余技术应用于控制系统,由于控制系统具有强实时性的要求,因此阵列码技术成为主流技术.阵列码技术虽然具有纠错时间短的优点,但是纠错能力有限,一般只能纠正一到两个磁盘错误.针对上述不足提出一种能够在三个磁盘同时发生错误的条件下有效恢复数据的新型阵列码-扩展X码,给出编译码算法,并将其应用于火箭控制系统的容错.

超声与磁粉强化含单宁废水生物处理研究

单宁是一种典型的有毒难降解污染物，在制革、造纸、制药、印染等行业废水中广泛存在，对水环境造成污染并且影响废水生物处理效果。本研究针对含单宁废水生物处理效率低、较高浓度时微生物受抑制且污泥容易膨胀等问题，采用超声和磁粉来强化含单宁废水生物处理，研究超声和磁粉对微生物活性、污染物去除及污泥沉降性能的影响，并对其作用机理进行了分析和探讨。 研究结果表明，活性污泥系统中单宁酸容积负荷可以达到1.8kgCOD/(m3·d)，单宁酸和COD去除率分别达到85.2%和79.6%，但如果负荷进一步增大则微生物活性迅速降低。系统在pH 5~8、温度20~35℃、DO>1 mg/L的条件下具有较好的单宁酸降解效果和处理稳定性。单宁降解动力学参数为：μmax =0.208h-1；Ks=226mg/L；Ki=522mg/L；kd=0.0092h-1；Y =0.594。 磁粉对系统处理效果和污泥沉降性能有一定的促进作用，且效果要优于外磁场。适宜的磁粉粒径和投加量分别为0.05~0.15mm和1.0g/L，COD去除率比对照系统提高6.4%，SVI降低28.6%，污泥絮体结构紧密。磁粉强化主要是通过其对污泥菌胶团的凝聚、吸附作用以及对微生物活性的强化作用实现。 在适当强度（0.4W/cm2）和辐照时间（20min）的超声作用下污泥絮体和细胞膜通透性增大，酶分泌也增多，系统的COD去除率比对照提高了8.8%，单宁酶酶活提高了11%。但超声也使污泥絮体结构松散，沉降性能下降，SVI比对照系统升高9.3%。 由于污泥流失加剧导致污泥浓度相对较低，声磁联合强化系统相对于磁粉强化系统其处理效果并没有提高。但相对于单纯活性污泥系统，声磁联合作用下系统处理效果、污泥沉降性能以及系统运行稳定性都得到明显改善。本研究为难降解废水的生物处理提供了一个新的思路。 Tannins are typical refractory and toxic pollutants that commonly exist in wastewater from dye, medicine, paper and leather industries and cause many problems associated with environmental pollution and biological treatment of wastewater. Biological treatment efficiency of tannin-containing wastewater is usually low owing to its biological toxicity and low biodegradability, microbes are usually inhibited under high tannin concentration and sludge bulking frequently occurs. In this study, ultrasound and magnetic powder were used to improve the biological treatment performance of simulated tannic acid-containing wastewater. The effects of ultrasonic irradiation and magnetic powder on microbial activity, tannic acid degradation rate and sludge sedimentation were investigated. The augmentation mechanisms were analyzed and discussed. The experimental results showed that the microbes were prominently inhibited under high tannic acid concentration, but moderate degradation efficiency can be maintained under a tannic acid load of up to 1.8kgCOD/(m3·d), with the tannic acid degradation and COD removal percentage of 85.2% and 79.6% respectively. The highest degradation rates and treatment stability were achieved at pH range of 5~8, temperature range of 20~35℃ and DO concentration of above 1mg/L. The kinetic parameters were estimated, including: μmax =0.208h-1；Ks=226mg/L；Ki=522mg/L；kd=0.0092h-1；Y =0.594. The microbial activity, tannic acid degradation rate and sludge sedimentation were improved by adding Fe3O4 magnetic powder, and the augmentation performance was better than external magnetic field. The appropriate particle size and dosage of magnetic powder were found to be 0.05~0.15mm and 1.0g/L, respectively, under which the COD removal percentage was improved by 6.4% and SVI value decreased by 28.6%, and compact floc structure was observed. This was mainly caused by the flocculation and adsorption effects of magnetic powder against sludge floc and the stimulation of microbial activity under appropriate magnetic field. Under appropriate ultrasonic irradiation (ultrasonic intensity 0.4W/cm2, ultrasonic irradiation time 20min), the permeability of floc and cell membrane are improved, transfer of substrate and oxygen were reinforced; meanwhile, more enzyme were produced by microbes under the slight damage caused by ultrasound. However, the floc structure became loose under ultrasonic irradiation, leading to relatively poor sedimentation, with the SVI value 9.3% higher than the control system. Although the magnetic powder-ultrasonic irradiation combined augmentation system showed no improvement in treatment performance compared with sole magnetic augmentation system owing to its relatively low sludge concentration, it guaranteed the stable operation of system, meanwhile the tannic acid degradation and sludge sedimentation were significantly improved compared with sole activated sludge system. This study gives a new idea for biological treatment of refractory wastewater.

基于TCP/ IP 协议的CSR离子泵电源远程监控软件系统设计

This paper discuss a Ion-pump Power Supply control system making use of RS232 series bus and Intranet.The system s hardware VAC800 is composed of MSP430F149 mixed-signal processors produced by TI and UA7000A network model.MSP430F149 has advantages of ultra-low-power and high-integration.The Ion-pump Power Supply control system has the characteristics of strong function,simple structure,high reliability,strong resistance of noise,no peripheral chip,etc.Visual studio 2005 is used to design the system s softwa...中文文摘：论述了通过RS-232总线和Intranet网络,来实现对远端的离子泵电源的监测与控制。系统硬件VAC800由TI公司的MSP430F149混合信号处理器和UA7000A网络模块构成。MSP430F149具有超低功耗和高集成度等优点,利用它构建的离子泵电源监控系统功能强大,结构简单,可靠性高,抗干扰能力强。系统软件采用visual studio 2005设计。本监控系统能够很好地完成对加速器离子泵电源监视与控制。

基于分布式内存数据库的HIRFL-CSR真空监控系统

This paper introduced a real-time vacuum monitor system based on multilayer Web architecture for HIRFL-CSR(Heavy Ion Research Facility of Lanzhou & Cooler Storage Ring) project in Lanzhou.It combined with COM/DCOM to develop the application layer,and developed the web layer with ActiveX and Ajax technology.It provided a facility and efficiency method for real-time control.The application shows that this system runs stably and accurately.中文文摘：简要介绍了国家"九五"重大科学工程——兰州重离子加速器冷却储存环(HIRFL-CSR)真空监控系统的总体结构,分析了在Web构架下,基于分布式内存数据库的多层真空监控系统的实现方法。采用分布式内存数据库,解决了基于Web构架的分布式实时应用环境下对系统和网络资源的消耗问题。在软件控制方面采用了统一调度,既简化了软件实现过程,又提高了系统的安全性、高效性和易维护性。该系统已成功运行。

CSR主环磁场电源控制系统研究

CSR控制系统是一个很庞大的系统，对它的控制是由许多分控制系统组成： 真空系统、电子冷却系统、束流诊断系统，CSR高频系统，数据获取系统等。磁 场电源控制系统是CSR控制系统中很重要的一部分，它是一个任意波形发生系统。 在CSR的分控制系统中，所有依赖波形控制的系统都可以由它来控制。波形的形 状由物理人员根据加速器物理要求计算得出。因为加速器运行的所有过程都为电 源所控制，所以我们的控制系统的直接控制对象就是磁场电源。在整个控制系统 中最重要的就是在控制过程中，控制过程波形的同步和控制过程波形的精度，这 是同步加速器控制系统的关键所在。过程波形的同步由同步时序系统控制，这是 CSR主环成功运行的决定条件。 本文对磁场电源控制系统和时序系统分别进行了论述。对磁场电源控制系统， 主要从系统的结构，I/O部件的硬件设计，I/O部件的软件设计这几个方面进行 论述,其中，I/O部件由I/O控制器和DSP处理器组成；对时序系统，论述了设计 原理和具体实现；最后给出了实验平台测试和现场测试的结果。 本文的创新点主要有，在加速器控制领域：（1）采用ARM+DSP的控制方式； （2）同步时序系统的末端定时原理； 从测试结果来看，我们的控制系统不管从结构设计，还是从软硬件设计上都 达到了设计的要求

CSR真空控制系统的研究

本论文主要解决CSR真空系统的控制实现与连锁保护问题。 HIRFL-CSR（Heavy Ion Research Facility at LanZhou-Cooling Storage Ring兰州重离子冷却储存环）是国家重大科学工程。为了保证CSR正常运行，超高真空系统的平均真空度必须达到6×10-9Pa，超高的真空度来之不易，CSR上任何一处真空设备发生故障，就会破坏真空度，所以CSR必须具有响应速度快、安全可靠，稳定性好的真空控制与连锁保护系统。 HIRFL-CSR真空设备有离子泵电源、分子泵、钛升华泵、阀门、真空计等。分子泵只在粗抽时使用，钛升华泵为间歇升华，因此不需要监控。需要显示和控制的设备为离子泵电源、真空计和真空阀门。通过对CSR上每个真空计的真空度数据的监测和真空阀门状态的采集，一旦真空度降低到一定阈值，立即关闭相应位置阀门（保护真空）,并给出故障报警，从而实现真空系统的连锁保护。 真空控制系统以嵌入式处理器ARM、复杂可编程逻辑器件CPLD和微控制器MSP430为核心，实现了远程数据采集、数据显示和自动控制等功能。本系统可以进行现场监控与调试，也可以通过集成的100Mbps以太网接口电路进行远程监测与控制，CSR上各处真空度和真空阀门状态自动传送到中央控制中心，中控中心也可以发送命令查询当前真空设备状态和各种读数。 本文主要介绍了基于ARM、CPLD和MSP430的嵌入式真空控制系统的设计与实现。内容主要包括(1)系统各部分硬件电路设计与真空控制功能实现 ，硬件系统调试 。(2)嵌入式uClinux操作系统构建和在其上进行的应用程序，设备驱动程序，串行通信程序的开发。（3）CPLD的VHDL程序和MSP430的C430程序设计。 本文目的是解决CSR真空控制系统问题，但对于许多远程数据采集与控制等问题的解决有重要参考价值