计算机与现代化

• 数据库与数据挖掘 • 上一篇    下一篇

元数据驱动的分布式数据资源管理技术

  

  1. (1.东华软件股份公司,北京100190; 2.河南省交通通信中心,河南郑州450016)
  • 收稿日期:2018-09-06 出版日期:2019-04-08 发布日期:2019-04-10
  • 作者简介:焦利(1974-),男,河北邯郸人,高级工程师,博士,研究方向:互联网技术,智慧城市,智慧交通,项目管理,E-mail: jiaoli@189.cn。
  • 基金资助:
    河南省综合交通出行信息共享应用科技示范工程资助项目(豫财-2018-48)

Metadata Driven Distributed Data Resource Management Technology

  1. (1. DHC Software Co. Ltd., Beijing 100190, China; 2. Henan Provincial Traffic Communication Center, Zhengzhou 450016, China)
  • Received:2018-09-06 Online:2019-04-08 Published:2019-04-10

摘要: 采用元数据驱动方法,研究分布式数据资源管理,实现数据的统一组织,提供高效数据共享服务。在对数据进行分类分析基础上,基于元数据定义和管理,开展分布式数据管理的数据检索和缓存。突破分布式数据资源管理关键技术瓶颈,构建分布式资源全局目录,实现目录服务,进行高效传输的数据缓存管理,减少处理、采集、分发的延时。提供基于多副本的动态自适应数据调度方案,解决分布式数据资源管理的数据选择和动态变化问题。

关键词: 分布式数据资源管理, 元数据, 全局目录, 数据缓存, 自适应数据调度

Abstract: By metadata driven method, the distributed data resource management technology is studied. The data unified organization is implemented. The high effective data sharing services are provided. After analyzing and classifying data, based on metadata definition and management, the data is indexed and cached in distributed data management. The key technologies are studied, including the distributed resource global directory construction for directory service, the high speed transportation in data cache management for reducing delay of dealing, collecting, and dispatching data. The dynamical and adaptive data scheduling way based on multi-backup is provided for resolving the data selection and dynamical refresh in distributed data resource management.

Key words: distributed data resource management, metadata, global directory, data cache, adaptive data scheduling

中图分类号: