测绘科学

2014, v.39;No.191(05) 13-17

[打印本页] [关闭]
本期目录(Current Issue) | 过刊浏览(Past Issue) | 高级检索(Advanced Search)

地理国情大数据基本统计的多进程并行计算
Multi-process parallel computing of basic statistics under Big Data of national geographic conditions

董春;袁卫平;亢晓琛;张玉;乔庆华;

摘要(Abstract):

地理国情监测数据具有精度高、数据量大等特性,随着新型硬件构架(单机多核、集群等)计算机资源能力的不断升级,传统的数据处理技术和串行计算技术难以满足高精细化地理国情大数据处理的需求。对此,本文提出了一种基于TPL和管道技术的多进程并行计算方法。通过实例验证,在同一台计算机上该方法比串行方法的计算效率提高了12倍;并且在此基础上,实现了计算节点的负载均衡及可扩展,满足了多核应用,有效地提高了地理国情监测大数据处理的实际效率。

关键词(KeyWords): 地理国情基本统计;并行计算;大数据;多进程;管道技术

Abstract:

Keywords:

基金项目(Foundation): 国家科技支撑计划项目(2012BAH28B03)

作者(Author): 董春;袁卫平;亢晓琛;张玉;乔庆华;

Email:

DOI: 10.16251/j.cnki.1009-2307.2014.05.003

扩展功能
本文信息
服务与反馈
本文关键词相关文章
本文作者相关文章
中国知网
分享