基于Greenplum的铁路数据共享平台设计

作     者：舒雨姗 唐伟忠 庞伟赟 曹海鹏 李汶鞠 SHU Yushan;TANG Weizhong;PANG Weiyun;CAO Haipeng;LI Wenju

作者机构：中国铁路兰州局集团有限公司信息技术所兰州730000 

出 版 物：《铁路计算机应用》 (Railway Computer Application)

年 卷 期：2024年第33卷第6期

页      面：57-66页

学科分类：08[工学] 081203[工学-计算机应用技术] 082303[工学-交通运输规划与管理] 0835[工学-软件工程] 0823[工学-交通运输工程] 0812[工学-计算机科学与技术（可授工学、理学学位）] 

基　　金：中国铁路兰州局集团有限公司科技研究开发计划课题(2023078-1) 

主　　题：数据资产管理 数据共享 数据集成应用 数据目录 数据仓库 分布式任务调度 可视化 

摘      要：实现铁路既有信息系统数据共享,加快数据集成应用开发,是我国铁路信息化建设继续深入推进的必由之路。文章针对铁路企业既有数据资产来源广、数据源类型多种多样等特点,基于分布式数据仓库Greenplum,开发了适用于集中存储和管理铁路企业多源异构数据的数据共享平台。平台提供数据目录管理、数据采集、数据共享、运行监控管理与数据安全防护等功能,实现对铁路多源异构数据的自动采集、处理及规范化集中存储。平台采用高可靠、易扩展的架构设计及可视化技术,为平台管理员提供简便易用的可视化配置与运行管理工具,为铁路企业应用开发单位提供便捷高效、稳定可靠、安全合规的数据共享服务,较好地满足铁路企业数据集成应用开发的需要,也为铁路企业大数据应用构建起坚实的基座。该平台已在中国铁路兰州局集团有限公司启动试运行,创建了企业既有信息系统数据资产目录,已采集76种业务数据,为十多个信息系统提供稳定、高效的数据共享服务。