生物数据分析平台中的大文件多线程传输方案
作者:
作者单位:

作者简介:

通讯作者:

中图分类号:

基金项目:

国家重点研发计划(2016YFC0901702, 2017YFD0400302, 2016YFC1200804, 2017YFC1201202); 中国科学院战略性先导科技专项(A类) (XDA19050301)


Multi-Thread Transmission Scheme of Large Files in Biological Data Analysis Platform
Author:
Affiliation:

Fund Project:

  • 摘要
  • |
  • 图/表
  • |
  • 访问统计
  • |
  • 参考文献
  • |
  • 相似文献
  • |
  • 引证文献
  • |
  • 增强出版
  • |
  • 文章评论
    摘要:

    随着云计算技术的飞速发展, 越来越多的数据相关服务需要通过云平台来实现. 国家科学微生物数据中心目前已建立了以云计算为基础的生物信息分析的数据平台, 为了解决平台用户进行文件上传时可能面临的效率、安全、稳定等一系列问题, 本文在分片上传、断点续传等技术的基础上, 提出一种根据带宽时延积选择并发线程数的传输方案, 解决了受意外中断时文件需要全部重新上传的问题, 提升了多线程上传时的带宽资源利用效率, 提高了大文件的传输效率.

    Abstract:

    With the rapid development of cloud computing technology, more and more data-related services need to be implemented through cloud platforms. The National Microbiology Data Center has established a data platform for bioinformatics analysis based on cloud computing. To address the problems related to efficiency, security, stability, etc. that users of the platform may face when uploading files, this paper presents a transmission scheme for selecting the number of concurrent threads according to the bandwidth-delay product based on the technologies of piecewise upload and broken-point continuingly-transferring. This scheme solves the problem that all files need to be re-uploaded when accidentally interrupted and improves the utilization efficiency of bandwidth resources during multi threaded upload and the transfer efficiency of large files.

    参考文献
    相似文献
    引证文献
引用本文

史若曦,马俊才,田园静,张荐辕.生物数据分析平台中的大文件多线程传输方案.计算机系统应用,2021,30(9):317-321

复制
分享
文章指标
  • 点击次数:
  • 下载次数:
  • HTML阅读次数:
  • 引用次数:
历史
  • 收稿日期:2020-12-15
  • 最后修改日期:2021-01-18
  • 录用日期:
  • 在线发布日期: 2021-09-04
  • 出版日期:
您是第位访问者
版权所有:中国科学院软件研究所 京ICP备05046678号-3
地址:北京海淀区中关村南四街4号 中科院软件园区 7号楼305房间,邮政编码:100190
电话:010-62661041 传真: Email:csa (a) iscas.ac.cn
技术支持:北京勤云科技发展有限公司

京公网安备 11040202500063号