基于云架构的地质测绘管理系统构建 |
您所在的位置:网站首页 › mapreduce的功能 › 基于云架构的地质测绘管理系统构建 |
papers 技术创新与交流 ADHESION 基于云架构的地质测绘管理系统构建 董 晋 ( 中晋环境科技有限公司,太原 030000 ) 摘 要: 为了解决地质测绘工作中所产生的海量数据, 运用我国的大数据技术, 建议构建基于 Hadoop 架构 的地质测绘管理系统。为了该系统的作用能够充分实现, 在系统中运用 Hadoop 框架的思想和技术, 该系统 由存储层、 物理层和数据层等 7 层所组成, 应用 HDFS 文件管理子系统对大量数据进行集中管理; 为了提升 该系统的运算效果和速度, 采用 MapReduce 框架模型来实现大规模数据集的并行运算。构建完成后将该系 统进行部署测试, 测试结果显示系统逻辑明晰、 易于实现, 能够在地质测绘工作中发挥实用价值。 关键词: Hadoop 框架; HDFS ; 地质测绘管理 中图分类号: P623 ; P208 文献标识码: A 文章编号: 1001-5922 ( 2021 ) 03-0166-05 Construction of Geological Surveying and Mapping Management System Based on Cloud Architecture Dong Jin ( Zhongjin Environmental Technology Co., Ltd., Taiyuan 030000, China ) Abstract : In order to solve the massive data generated in geological surveying and mapping work, using the big da⁃ ta technology in China, it is suggested to build a geological mapping management system based on Hadoop architec⁃ ture.In order to fully realize the function of the system, the idea and technology of Hadoop framework are used in the system.The system is composed of 7 layers including storage layer, physical layer and data layer.The HDFS file management subsystem is used for centralized management of large amount of data;In order to improve the opera⁃ tion effect and speed of the system,MapReduce framework model is used to realize the parallel operation of large- scale data sets.After the construction is completed,the system is deployed and tested, the test results show that the system logic is clear,easy to implement,can play a practical value in geological surveying and mapping work. Keywords : Hadoop framework; HDFS; geological mapping management 随着地质测绘工作的开展和深入,对于如何提升 测绘工作中的检索效率和对产生的大量数据进行管 理,是测绘工作中需要解决的问题。我国常用依托关 系型数据库对测绘工作中产生的数据进行管理,再对 数据检索系统和管理模块进行构建,进而提高数据的 存储。在地质测绘工作中,包括了关系型数据和各类 异构数据。对此,传统的测绘数据管理方法在如今的 测绘界已不适用。在云计算技术兴起的当下, Hadoop 框架不仅能够存储大量数据,也能储存种类不同的数 据,因此成为了当前的应用热点。例如潘云 ( 2020 ) 和王永才 ( 2020 ) 会将 Hadoop 框架运用与系统构建 以及数据挖掘工作中,以此来提升挖掘数据的效率和 系统的运行效率。不难看出, Hadoop 技术逐渐受到 了人们的关注,因此本文以 Hadoop 为前提,提出了 收稿日期: 2020-11-30 作者简介: 董 晋 ( 1982- ) |
今日新闻 |
推荐新闻 |
CopyRight 2018-2019 办公设备维修网 版权所有 豫ICP备15022753号-3 |