计算机与现代化

• 数据库与数据挖掘 • 上一篇    下一篇

基于数据虚拟化技术的多来源数据集成方法

  

  1. (1.中国电子科技集团公司第十五研究所系统八部,北京100083;2.中国电子科技集团公司第十五研究所系统一部,北京100083)
  • 收稿日期:2019-03-30 出版日期:2019-11-15 发布日期:2019-11-15
  • 作者简介:张子晔(1995-),女,天津人,硕士研究生,研究方向:计算机软件开发及数据集成,E-mail: 18810934029@163.com; 刘玉龙(1981-),男,研究员级高级工程师,硕士,研究方向:大型信息系统架构设计和项目管理,E-mail: lyl_nci@126.com; 呼北(1994-),男,硕士研究生,研究方向:计算机应用技术,E-mail: hubei004@sohu.com。
  • 基金资助:
    国家重点研发计划资助项目(2018YFC0831202)

Multi-source Data Integration Method Based on Data Virtualization Technology

  1. (1. The Eigth System Department of the 15th Research Institute of China Electronics Technology Group Corporation, Beijing 100083, China;
    2. The First System Department of the 15th Research Institute of China Electronics Technology Group Corporation, Beijing 100083, China)
  • Received:2019-03-30 Online:2019-11-15 Published:2019-11-15

摘要: 司法业务数据存储没有统一的格式标准,各机关在进行数据查询访问时存在数据孤岛现象。为解决数据访问之间的异构性,本文提出一种基于数据虚拟化的多来源司法数据集成方法,通过数据虚拟化技术建立元数据映射关系,利用中间件构成数据交换中心,实现多机关多类型司法数据集成。利用改进的K-means聚类算法对虚拟对象元数据进行聚簇,缩短数据访问时间,提高司法数据查询效率。本文方法可以忽略数据存储异构性的影响,实现各司法机关无障碍数据访问通道。

关键词: 数据虚拟化, 中间件, 元数据, 改进的K-means聚类算法

Abstract: There is no uniform format standard for judicial business data storage, and there exists data islands in each organization’s data query and access. In order to solve the heterogeneity between data access, this paper proposes a multi-source judicial data integration method based on data virtualization, which establishes metadata mapping relationship through data virtualization technology, and uses middleware to form a data exchange center to realize multi-organ and multi-type judicial data integration. The improved K-means clustering algorithm is used to cluster virtual object metadata, shorten data access time and improve judicial data query efficiency. The proposed method can ignore the influence of data storage heterogeneity and realize accessible data access channels of various judicial organs.

Key words: data virtualization, middleware, metadata, improved K-means clustering algorithm

中图分类号: