一种利用并发提高数据处理吞吐率的模型
DOI:
CSTR:
作者:
作者单位:

作者简介:

通讯作者:

中图分类号:

基金项目:

广东省科技计划项目:基于无线通信技术的地面气象探测站网的研究与开发(项目编号:2005B60401024)


Real-Time and Large Throughput Data Processing System Using Concurrency
Author:
Affiliation:

Fund Project:

  • 摘要
  • |
  • 图/表
  • |
  • 访问统计
  • |
  • 参考文献
  • |
  • 相似文献
  • |
  • 引证文献
  • |
  • 资源附件
  • |
  • 文章评论
    摘要:

    针对分布式组网终端集中式数据采集与处理系统实时性高、数据吞吐量大、周期性强等特点,引入了一种利用并发机制的大吞吐量实时数据处理模型,在讨论模型基本结构和原理的基础上,深入研究了决定模型数据吞吐效率和时效性能的并发缓存机制和算法设计。利用该模型实现的数据采集处理系统在基于GPRS组网的1500个自动气象站数据采集与处理业务应用中,性能稳定可靠,能够满足对周期性大批量实时“浪涌”数据进行实时快速处理的要求,大大提高了数据处理的吞吐效率。

    Abstract:

    Data acquiring and processing from distributed terminal unit by network are usually real-time, large throughput and periodic, so data acquisition, processing and result should be done within data output period in high-efficiency. A real-time and large throughput data processing model using concurrency is built for this given application. The working principle and basic structure for the model are discussed in detail, also concurrency for the model and corresponding key buffer which concurrent threads put data into and gets data out are analyzed in particular. As is used in observation application networked by 1500 automatic weather stations, which has indicated that the model is capable in processing periodic surge observation data and has higher data throughput, as well as implements high speed and accurate results, high stability and reliability.

    参考文献
    相似文献
    引证文献
引用本文

周钦强.一种利用并发提高数据处理吞吐率的模型.计算机系统应用,2010,19(11):190-194

复制
分享
文章指标
  • 点击次数:
  • 下载次数:
  • HTML阅读次数:
  • 引用次数:
历史
  • 收稿日期:2010-03-04
  • 最后修改日期:2010-03-31
  • 录用日期:
  • 在线发布日期:
  • 出版日期:
文章二维码
您是第位访问者
版权所有:中国科学院软件研究所 京ICP备05046678号-3
地址:北京海淀区中关村南四街4号 中科院软件园区 7号楼305房间,邮政编码:100190
电话:010-62661041 传真: Email:csa (a) iscas.ac.cn
技术支持:北京勤云科技发展有限公司

京公网安备 11040202500063号