基于Winsock的分布式数据处理技术

作     者：张磊 ZHANG Lei

作者机构：福建省基础地理信息中心福建福州350003 

出 版 物：《地理空间信息》 (Geospatial Information)

年 卷 期：2022年第20卷第7期

页      面：61-64,137页

学科分类：07[理学] 070503[理学-地图学与地理信息系统] 0705[理学-地理学] 

主　　题：Winsock VB GDAL 分布式 

摘      要：针对地理信息数据量快速增长带来的处理效率问题,从Winsock通信技术着手,提出了一种基于Winsock的分布式数据处理技术。从程序架构、通信模块、处理模块、可扩展性等方面设计灵活的C/S程序,将局域网中多台计算机组建成工作群,以服务器端发布任务指令、多个客户端接收并执行任务指令的方式进行分布式数据处理,从而快速提升数据处理效率;然后以常用的遥感影像处理NDVI和NDWI计算为例,采用GDAL开源库开发数据处理模块,模拟单机作业和多机分布式协同作业进行数据处理效率测试。实验结果表明,采用分布式协同作业方式的数据处理效率明显提升。该项技术的开发难度低,且具有较好的可扩展性,可为今后大数据量数据处理提供新思路。