Hadoop平台分布式SVM算法分类研究
作者:
作者单位:

作者简介:

通讯作者:

中图分类号:

基金项目:


Research on Distributed SVM Classification Based on Hadoop Platform
Author:
Affiliation:

Fund Project:

  • 摘要
  • |
  • 图/表
  • |
  • 访问统计
  • |
  • 参考文献
  • |
  • 相似文献
  • |
  • 引证文献
  • |
  • 资源附件
  • |
  • 文章评论
    摘要:

    随着大数据的发展,分布式支持向量机(SVM)成为该领域研究热点.传统层级分布式SVM算法(Cascade SVM),在Hadoop平台下寻找全局最优支持向量的过程十分缓慢.本文提出了一种改进方法,先将传统的网格法与粒子群(PSO)算法结合,改进了单机PSO算法,再将单机PSO算法与Hadoop平台结合实现了一种新型卫星并行PSO算法(NPP-PSO).实验结果表明,相比于单机SVM算法,本文的分布式SVM算法,在保证了准确率的前提下大幅提高了计算速度;而使用NPP-PSO参数寻优后的分布式SVM,分类准确率相比于分布式SVM算法又有了明显提高.

    Abstract:

    With the development of big data, distributed support vector machine (SVM) has become a hot research topic in this field. The process of finding the global optimal support vector in the Hadoop platform is long under the traditional hierarchical Cascade SVM algorithm. This paper presents an improved method by firstly combining the traditional grid method and the particle swarm optimization(PSO) algorithm to improve the PSO algorithm. And a new satellite parallel PSO algorithm is realized by combining the single machine PSO algorithm and the Hadoop platform (NPP-PSO). The experimental results show that compared with the single SVM algorithm, the distributed SVM algorithm cannot only ensure the accuracy but can also greatly boost the computation speed. With the wide use of NPP-PSO distributed SVM, the classification accuracy has improved significantly.

    参考文献
    相似文献
    引证文献
引用本文

满蔚仕,吉元元. Hadoop平台分布式SVM算法分类研究.计算机系统应用,2017,26(8):141-146

复制
分享
文章指标
  • 点击次数:
  • 下载次数:
  • HTML阅读次数:
  • 引用次数:
历史
  • 收稿日期:2016-11-21
  • 最后修改日期:
  • 录用日期:
  • 在线发布日期: 2017-10-31
  • 出版日期:
文章二维码
您是第位访问者
版权所有:中国科学院软件研究所 京ICP备05046678号-3
地址:北京海淀区中关村南四街4号 中科院软件园区 7号楼305房间,邮政编码:100190
电话:010-62661041 传真: Email:csa (a) iscas.ac.cn
技术支持:北京勤云科技发展有限公司

京公网安备 11040202500063号