首页> 中文期刊> 《长春师范大学学报》 >基于ATM并行化采样优化算法的研究

基于ATM并行化采样优化算法的研究

         

摘要

本文基于企业微博主题分析,提出一种大规模作者主题模型训练的并行化思想,继而提出相应的采样算法,并在此基础之上针对其采样复杂度高的问题提出优化采样算法。同时在Spark大数据平台上设计实现了大规模作者主题模型的并行化采样算法框架,并在此框架上设计实现了此并行化算法。通过实验分析,此并行化采样框架能有效地解决大规模语料的作者主题模型采样问题,由此完成大规模主题分析任务;同时通过性能评估验证了算法有效地提升了采样效率,并且有着较好的数据扩展性。

著录项

相似文献

  • 中文文献
  • 外文文献
  • 专利
获取原文

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号