异构数据源的信息集成系统

异构数据源的信息集成系统

吴学玲[1]2005年在《基于Web Services和元数据的信息集成技术研究》文中认为随着市场竞争的加剧及经济全球化的发展,虚拟企业、协同设计、网络化制造、企业动态联盟等虚拟系统将是未来企业的主要组织形式。信息集成是这些虚拟系统有效运作的前提和基础,构建适用于虚拟系统的信息集成平台是企业信息化建设研究的热点。 本论文围绕虚拟系统信息集成的体系架构及其查询处理和优化设计进行了研究,论文的主要工作如下: 1、在分析国内外研究现状及研究方法的基础上,研究了基于Web Services和元数据的虚拟系统信息集成框架,分析了该框架的层次结构及共享信息的服务发布方案。该框架不仅能满足虚拟系统动态、松耦合及可扩展性的要求,而且克服了传统基于CORBA的信息集成方法的局限,具有跨平台、跨防火墙及不同组件互操作的能力。 2、对传统的异构数据源封装方法Mediator/Wrapper进行改进,以Web Services服务注册机制代替虚拟视图法,对包装器的设计增加Web Services服务封装及服务发布功能,在此基础上构建了适用于虚拟系统信息集成的异构数据源透明访问体系架构,实现了信息集成系统中共享服务的灵活调用。 3、对信息集成系统中的关键结构——查询处理器、数据源包装器、查询优化器进行了详细的设计,研究了基于Web Services的查询分解算法及查询优化策略,进一步完善了基于Web Services和元数据的信息集成系统架构。 4、设计了一个基于Web Services的供应商实时查询原型系统,包括系统总体设计、元数据标准的制定、服务描述文档的生成、服务注册中心的数据结构设计,并具体分析了前文提出的查询分解算法及结果整合方法。

吴中华[2]2008年在《装备保障异构数据集成关键技术研究与集成环境设计》文中认为近年来,武器装备保障信息化日益成为军队信息化的热点,是关系着高技术条件下局部战争进程的重要因素。在军队信息化建设过程中,我军虽然陆续建立了一些装备保障信息系统,但这些信息系统之间往往以“信息孤岛”的形式存在,兼容性和互通性非常差。装备保障系统之间要实现对各部门异构数据源的无缝集成,提供给上级统一的模式视图,进而为决定装备保障策略,调度分配保障资源提供重要的参考依据。本文在分析近年来国内外数据集成领域几种主流集成技术的基础上,结合中间件技术和数据仓库技术的优点设计了装备保障信息集成环境的体系结构。在整个集成环境的设计过程中采用了软件工程化的思想,以迭代增量式方法完成集成环境的分析、设计与实现。本文的主要工作包括:(1)分析了装备保障信息的分类和构成,研究了数据集成的集成框架和方法。(2)深入研究了装备保障信息集成环境中的几个关键技术,提出了一种基于组合竞争思想的模式匹配方法寻找模式间的元素关联集合,在此基础上依托扩展超图数据模型和模式自身的约束选择有效的匹配集合,实现映射生成。同时利用有效映射规则将目标模式的查询分解成源模式上的子查询,最终合并子查询结果作为查询答案。(3)设计了模块组成和集成过程模型,实现了集成环境的关键技术,给出了主要的类图、部分关键功能的顺序图和流程图,完成了数据集成环境的设计与开发。最后给出了一个实例,以不同部门的装备信息数据库作为异构数据源,应用装备保障数据集成环境实现了跨部门装备实力统计工作。

谭狄溪[3]2004年在《基于本体的异构数据源的集成研究》文中提出随着企业信息化的发展,大量的信息系统被开发和实施。由于管理的职能部门分割和技术上的发展不同步等缘故,这些信息系统相互之间存在信息有效流转的屏障,因而产生所谓的“信息孤岛”问题。因此怎样克服异构信息系统之间的这道屏障,达成对信息的集成和整合成为解决问题的关键。 通过查阅大量文献,论文从企业和技术两个维度归纳综述了目前的集成解决方案,尤其是对目前比较常见的“语法”集成的解决方案进行了比较深入的探讨研究,同时对这些解决方案在“语义”集成上面的不足也进行了分析。在此基础之上,提出了一种层次结构的能有效解决”语义”异构的解决方案。在该方案里面,通过XML和本体论分别实现对底层异构数据源的“语法保真”和“语义保真”。 论文对本体的集成和XML Schemata的集成进行了深入的研究。对于底层概念模式和背景知识的获取,本体的构建,及本体的集成方法等进行了详尽的阐述,并通过本体对XML文档进行标注和添加语义信息。其中在对XML Schemata进行集成时,有效的引进一种标准的概念描述模型,并且对该概念模型上的集成算法进行了具体的描述。论文最后对西部某铜业集团中的异构销售数据进行了语义集成的实证研究。

唐友军[4]2008年在《一个公安异构数据集成系统的设计与实现》文中研究表明在公安信息化的过程中,由于各种历史条件的限制,公安各业务部门根据据自身的信息需求和特定的应用选择了各自的软硬件环境。从而使得在公安内部存在多种不同类型的硬件平台、操作系统、数据库管理系统等。这种按功能和部门组织数据的方式必将形成了一个个的“信息孤岛”和各部门之间数据的异构。本文研究基于XML的数据集成及应用,它从数据集成的任务和需要解决的关键问题出发,提出了一种基于XML的数据集成体系结构。该体系结构结合了其它基于XML的数据集成研究项目的优点,采用XML Schema和XQuery作为异构数据源的公共数据模型和全局查询语言,利用中间件实现全局模式与局部模式之间的通信,达到关系数据源之间的集成。论文以公安系统数据现状和对数据集成的要求为基础,进行基于XML数据集成的研究,重点解决公安领域数据模式的异构问题和查询语言的转换问题。要分析比较已有数据集成方法和体系结构特征的基础上,设计了基于XML的公安信息数据集成平台框架,采用虚拟视图的方法,用XML描述局部数据源视图。这样就隐藏了各个系统的局部特性,提高了平台的透明性。为了保证公安内部数据的安全,本系统除了常规的安全措施,如防火墙、入侵检测等手段外,还建立了一套安全控制体系,确保数据完整,并以数据库和USB Key数字认证来鉴别访问者的身份。数据库和USB Key数字认证之间通讯由SSL加密技术来保证其安全性。最后,通过测试,该系统具有良好的安全性与可用性,基本满足了我部门公安数据异构集成系统的需求。

严小泉[5]2009年在《基于XML的异构数据源集成系统框架和关键技术研究》文中指出近年来,随着数据库技术、Web技术的快速发展和信息技术应用的快速深入,大中型企业和公司纷纷建立起庞大且复杂的IT信息集成系统,同时也累积了大量的满足各自业务需求的数据源。通过改造和升级原有系统已不能满足全球化公司飞速发展的业务需求,重新开发新系统需要耗费过多的人力和财力,而且会丢失原有的数据信息。企业对这些异构数据源系统的整合需求持续增强,数据源集成就成为了企业信息化过程中亟需解决的关键问题。异构数据源集成的目的是提供给用户访问多种数据源的统一接口、一个集成处理多种数据源、整合多个数据查询结果的信息交互处理平台,从而屏蔽它们的平台、系统环境、内部数据结构等方面的异构性,使得用户不必考虑数据源的位置、数据抽取和合成等问题,就可实现数据集成、共享和有效一致的信息查询。XML已经成为互联网上信息表示和数据交换的一个重要标准。在分析异构数据源集成系统结构的基础上,本文采用Mediator-Wrapper的方式集成异构数据源,它使用XML数据模型作为集成系统的公共数据模型,可以集成包括XML-Enabled关系数据库系统、Html、Excel、Web信息系统、Native-XML数据库等多种异构系统中的数据。为了建立集成系统中不同模式层次之间的联系,本文提出了输出模式到全局模式的全局映射以及局部模式到输出模式的局部映射方法,解决了异构数据集成平台模式与底层数据模式之间的映射问题。查询处理是异构数据源集成系统的关键技术之一,而查询分解和查询优化是集成系统中查询处理的核心技术。本文首先阐述了一种基于Mediator-Wrapper中间层的异构数据源集成系统框架,然后对XQuery查询处理过程特别是查询处理的关键问题,如查询分解和优化技术做了深入研究,提出了一个查询分解算法并结合实例进一步说明了异构数据源集成系统中查询分解和优化的具体实现。

余乐清[6]2011年在《基于XML的多源异构数据集成系统的研究与实现》文中进行了进一步梳理随着Internet的迅速发展,网络上可共享的资源日益增多,对数据的描述千差万别,如何从这些分布的、异构的和独立的数据源中集成数据,同时还要保证这些数据的完整性和一致性就成为一个十分重要的研究课题。针对该问题,本文提出了一个以XML作为数据交换格式,结合Mediator/Wrapper体系结构并通过语义缓存来实现查询优化的多源异构数据集成系统。论文首先介绍了异构数据集成的相关技术,接着对整个研究工作做了具体介绍:对现有数据集成方法进行分析,提出了可扩展的异构数据库集成系统,并给出了其体系结构图与各模块分析;采用XML作为中间数据转换格式,将局部数据源转换成XML数据进行集成,屏蔽了底层数据源的异构性,为用户提供统一和透明的访问接口;采用XQuery作为全局模式上的查询语言,便于查询分解和转换成SQL语句;基于语义缓存技术对查询进行优化,提高了查询响应速度;将各个数据源封装成Web服务,屏蔽掉数据源的平台差异,使集成系统具有松耦合、易扩展的良好特性。最后,通过实验对本文提出的系统进行了验证,实验结果证明了该集成系统的可行性和正确性。

韩民智[7]2008年在《基于WebService的动态可调整的异构数据集成》文中进行了进一步梳理随着计算机应用的发展及网络的普及,企业对于异构数据集成的需求越来越强烈,而且集成的对象不仅局限于传统的数据库系统中的结构化数据,而且还包括XML等半结构化和非结构化数据。人们也更加重视异构数据集成的研究和实现。我们首先介绍了异构数据集成的研究背景,国内外研究现状等信息。接着在研究一些数据模型的基础上,提出了一种基于XML的实体节点数据模型(XML-based EntityNode Data Model)(简称XEDM)。然后在分析研究现有的异构数据集成系统架构的基础上,采用中介器/包装器模式,在异构数据源之上提供一层Web Service,来完成对数据源的操作。在集成过程中,使用了四层架构:源模式层,局部模式层,全局模式层,用户模式层。各架构层之间有叁层转换,源模式层到局部模式层的转换是基于源模式层的Web Service,转换为统一的数据模式XEDM;局部模式到全局模式的转换通过模式融合和冲突解决来实现的;全局模式到用户模式层的转换是根据用户权限和实时情况动态调整的。文章还详细介绍了集成引擎和数据集成过程,查询引擎及查询的优化处理等内容。最后给出了系统的详细设计与实现的情况。我们在异构数据集成方面所做的研究工作对于解决异构数据源的动态加入和删除方面有很大的帮助。到目前为止,我们己经在异构数据集成的数据模型、体系结构、系统的设计与实现等方面取得了阶段性的成果。不足的是在数据模式集成的过程中还需要人的参与来识别语义等价的实体和消除模式之间的冲突。在此基础上我们对下一阶段研究工作的目标和重点做出了展望。

文岐兴[8]2013年在《面向教务管理领域的异构数据库集成技术研究》文中认为高校教学管理信息化是改革和提高高校教学管理水平的有效途径之一。目前许多高校的开发了基于不同平台的数据库管理信息系统,而这些信息系统形成了大量异构的数据库系统。如何实现异构数据源信息的有效共享并合理处理数据,已经成为高校教务管理急需解决的问题。针对上述存在的问题,首先介绍了异构数据库集成的相关理论以及当前比较流行的几种异构数据库的解决方案,并分析了各自的优缺点,在此基础上阐述了异构数据库集成需要解决的若干技术问题,包括元数据、XML、关系模式与XML模式之间的模式映射和模式集成。针对高校教务管理的多个异构数据库之间的数据集成需求,提出了基于用户层、管理层和数据层叁层架构模式的异构数据库集成技术方案。在元数据的基础上借鉴中间件技术实现了异构数据库的集成,同时借助XML技术进行数据格式的转换和对异构数据库的包装,使用JAVAEE技术对整个异构数据库集成技术方案进行流程整合和程序监控。在所提出的异构数据库集成技术方案基础上,实现了广西艺术学院学生综合信息查询的实现方案,分析了该方案的模块组成。它包括用户层、管理层和数据层,其中管理层模块主要由查询管理器模块、包装器模块、元数据模块、结果处理器模块等构成,详细阐述了管理层各模块的功能和技术实现过程。通过对广西艺术学院教务管理的分析,结合教务管理的特点,对各个异构数据库建立统一的逻辑视图,通过元数据、XML技术、中间件技术为教务管理人员提供统一的查询接口,屏蔽广西艺术学院各个异构数据源的位置存放信息、内部数据表结构和不同操作系统平台、不同数据库平台的差异,为教务管理提供统一的数据源查询接口和操作界面。最后通过分析对比实验数据,表明所提出的异构数据库集成的技术方案具有良好的稳定性、可靠性以及较快的查询速度;在性能方面,对比本集成技术方案在使用和未使用查询优化功能模块时的查询响应时间,结果表明使用该模块能够降低系统响应时间降低,更好的满足实际的需求。

吕媛媛[9]2010年在《基于本体的物流信息集成系统的研究》文中研究表明随着计算机和网络技术的迅速发展,尤其是XML及其相关技术的发展和成熟,异构数据集成已逐渐成为研究的热点之一。同时企业在信息化建设中构建的各种各样的应用系统,由于彼此缺乏有效的协作,数据之间的交换性和共享性差,成为了一座座的“信息孤岛”。如何对现有系统的数据实现集成,是目前信息集成面临的重要问题。本文研究了目前异构数据集成的现状以及数据集成和本体的相关背景知识,介绍了本体的基本概念及理论,本体构建的准则、方法、语言、工具等相关技术,阐述了基于本体的信息集成的集成方法,提出了基于本体的物流信息集成框架的叁层体系结构,并对用户查询过程进行了详细说明。其次,详述了对关系数据库与XML文件数据源集成构建本体和本体间映射的方法。并以异构物流系统中运输工具记录单为例进行本体构建说明,详细阐述物流本体的构建过程。最后,基于本体的物流信息集成系统建立在两个异构的物流信息系统上,采用集成框架的3层体系结构,实现对两种异构信息系统的语义集成。该原型系统集成关系数据库及XML文件,为用户前台界面的操作,提供语义层次上一致的信息。

房立芳[10]2010年在《基于本体的异构数据集成与融合方法研究》文中指出整合分布异构数据资源、实现数据共享,为管理决策提供更加完整和可靠的数据服务支持,是当前及未来各领域深化信息系统建设发展的重要课题和方向。而从各种分布、异构数据源中抽取数据,并进行数据变换、数据合并和数据融合等加工处理,则是数据集成处理的一项最基本任务。本文在充分研究现有数据集成方法和数据融合方法的基础上,结合课题组提出的“基于数据服务匹配的数据集成系统”框架体系,对其中“异构数据集成处理与数据服务管理”平台部分,进行了重新优化设计和改写,并增加了可针对不同数据源数据的融合处理模块。主要工作和贡献如下:1.重新优化设计和改写了课题组原有的“异构数据集成处理与数据服务管理”平台。目前该平台已经能够初步工作,它实现了对异构数据源的统一查询接口,不仅能以直观、可视化的方式,定义数据集成处理需求,用类似图元绘图的方法将从多个数据源抽取数据、变换数据、合并数据等处理步骤,定义到一个数据集成处理描述包(DIPSP)中;而且可实现DIPSP包的数据服务单元封装、注册和数据服务响应执行。2.在深入研究了国内外现有融合方法的基础上,提出了一种基于关键属性的知识融合方法,并将该方法应用到数据集成处理系统中,改善对异构数据进行自动合并处理的合理性。有关实验测试表明,此方法可以有效识别并融合异构数据源中存在的冲突实例,可以在更高层次上提高数据集成效果。

参考文献:

[1]. 基于Web Services和元数据的信息集成技术研究[D]. 吴学玲. 西南交通大学. 2005

[2]. 装备保障异构数据集成关键技术研究与集成环境设计[D]. 吴中华. 国防科学技术大学. 2008

[3]. 基于本体的异构数据源的集成研究[D]. 谭狄溪. 中南大学. 2004

[4]. 一个公安异构数据集成系统的设计与实现[D]. 唐友军. 同济大学. 2008

[5]. 基于XML的异构数据源集成系统框架和关键技术研究[D]. 严小泉. 江南大学. 2009

[6]. 基于XML的多源异构数据集成系统的研究与实现[D]. 余乐清. 西安电子科技大学. 2011

[7]. 基于WebService的动态可调整的异构数据集成[D]. 韩民智. 上海交通大学. 2008

[8]. 面向教务管理领域的异构数据库集成技术研究[D]. 文岐兴. 广西大学. 2013

[9]. 基于本体的物流信息集成系统的研究[D]. 吕媛媛. 山东科技大学. 2010

[10]. 基于本体的异构数据集成与融合方法研究[D]. 房立芳. 中国科学技术大学. 2010

标签:;  ;  ;  ;  ;  ;  ;  ;  ;  ;  

异构数据源的信息集成系统
下载Doc文档

猜你喜欢