大数据技术在环境信息中的应用
DOI:
作者:
作者单位:

作者简介:

通讯作者:

中图分类号:

基金项目:

国家水体污染控制与治理科技重大专项(2012ZX07505003)


Application of Big Data Technology to Environment Information
Author:
Affiliation:

Fund Project:

  • 摘要
  • |
  • 图/表
  • |
  • 访问统计
  • |
  • 参考文献
  • |
  • 相似文献
  • |
  • 引证文献
  • |
  • 资源附件
  • |
  • 文章评论
    摘要:

    在“辽河流域水环境管理技术综合示范”项目中, 随着时间的累积, 环境监测数据处理系统采集到的数据量越来越大.然而目前辽宁省环境监测数据处理系统无法有效处理日益增长的海量数据.研究运用大数据技术, 改进环境监测数据处理系统中的数据中心.利用HDFS强大的数据存储、管理功能, 以应对数据量的增长, 利用MapReduce及Hadoop其他相关工具, 快速处理海量数据, 降低数据规模, 最后将数据存储到数据库中.

    Abstract:

    With the accumulation of time, data collected by environmental monitoring data processing system is more in the project of "Comprehensive Demonstration of Water Environment Management about Liao He River". However, Liaoning province environmental monitoring data processing system cannot effectively deal with massive data growing. In this paper, we study and use big data technology. After that, we improve the data center of the environmental monitoring data processing system. We can use HDFS powerful function of data storage and management to cope with the growth of the massive data and take advantage of MapReduce and other Hadoop related tools, rapidly processing massive data and reducing the data size. Finally, the data will be stored in the database.

    参考文献
    相似文献
    引证文献
引用本文

李安增,王宁,王常权,邱燕.大数据技术在环境信息中的应用.计算机系统应用,2015,24(1):60-64

复制
分享
文章指标
  • 点击次数:
  • 下载次数:
  • HTML阅读次数:
  • 引用次数:
历史
  • 收稿日期:2014-04-21
  • 最后修改日期:2014-05-19
  • 录用日期:
  • 在线发布日期: 2015-01-23
  • 出版日期:
文章二维码
您是第位访问者
版权所有:中国科学院软件研究所 京ICP备05046678号-3
地址:北京海淀区中关村南四街4号 中科院软件园区 7号楼305房间,邮政编码:100190
电话:010-62661041 传真: Email:csa (a) iscas.ac.cn
技术支持:北京勤云科技发展有限公司

京公网安备 11040202500063号