基于大数据平台化的ETL可复用框架设计
Design and implementation of ETL general framework based on Big Data作者机构:长春电子科技学院吉林长春130000
出 版 物:《无线互联科技》 (Wireless Internet Technology)
年 卷 期:2021年第18卷第18期
页 面:66-67页
学科分类:12[管理学] 1201[管理学-管理科学与工程(可授管理学、工学学位)]
摘 要:为了在大数据处理下提高ETL开发效率、任务维护及监控能力、减少人工操作、在多种相似数据存储过程中共享ETL过程,文章提出一种基于大数据平台化的ETL可复用框架。根据ETL工作原理、数据存储过程以及任务特点,在任务调度开发、数据存储过程方面进行了改进,以配置文件方式进行自动化开发模式,从而构建基于大数据平台化ETL可复用框架。