期刊文献+

基于共享存储和Gzip的并行压缩算法研究 被引量:8

Parallel compression with gzip on shared-memory systems
下载PDF
导出
摘要 Gzip无损压缩算法。尽管gzip算法能够取得很好的压缩比,但它在分析和压缩编码的过程需要进行大量的计算。为了缩短压缩时间,提出了一种基于共享存储的并行压缩策略。采用OpenMP标准和"生产者/消费者"模型实现了gzip的并行压缩版本。在Beowulf集群中的一个SMP节点(双CPU)和曙光天阔服务器(4路双核)上的测试表明,并行化的gzip程序取得了极大的性能提升,尤其是大文件的压缩。 Although the gzip algorithm can achieve very good compression, it requires a great deal of time to analyze and encode data into a smaller form. To solve this problem, a parallel compression policy based on producer/consumer model is described and implemented by the OpenMP standard. The performance of the para-llel implementation is compared to the sequential gzip program running on various shared-memory parallel architectures. Experimental data shows that an encouraging speedup is achieved by using the parallel gzip program, especially for large files.
出处 《计算机工程与设计》 CSCD 北大核心 2009年第4期781-784,共4页 Computer Engineering and Design
基金 国家自然科学基金项目(60303020 60533020) 国家973重点基础研究发展计划基金项目(2005CB321702) 国家863高技术研究发展计划基金项目(2006AA01A102 2006AA01A125) 北京邮电大学网络与交换技术国家重点实验室开放基金项目(2005-05)
关键词 共享存储 并行编程 数据压缩 OPENMP GZIP shared memory parallel programming data compression OpenMP gzip
  • 相关文献

参考文献7

  • 1Shameem A,Jason R.Multi-core programming[M].李宝峰,译.北京:电子工业出版社,2007:139-175. 被引量:1
  • 2Jacob Z,Abraham L.A universal algorithm for sequential data compression [J]. IEEE Transactions on Information Theory, 1977,23(3):337-343. 被引量:1
  • 3Cleary J G,Witten I H.Data compression using adaptive coding and partial string matching[J].IEEE Transactions on Communications, 1984,32(4):396-402. 被引量:1
  • 4Burrows M,Wheeler D J.A block-sorting lossless data compression algorithm[R].Technical Report SRC 124,1994. 被引量:1
  • 5Jeff Gilchrist.Parallel compression with BZIP2[C].Proceedings of the 16th lASTED International Conference on Parallel and Distributed Computing and Systems (PDCS2004). MIT, Cambridge,USA:ACTA Press,2004:559-564. 被引量:1
  • 6Lynn M Stauffer, Daniel S Hirschberg.Parallel text compression-REVISED[R].Technical Report ICSTR-91-44,1993. 被引量:1
  • 7Lynn M Stauffer, Daniel S Hirschberg.Dictionary compression on the PRAM[J].Parallel Processing Letters, 1997,7(3):297-308. 被引量:1

同被引文献48

引证文献8

二级引证文献25

相关作者

内容加载中请稍等...

相关机构

内容加载中请稍等...

相关主题

内容加载中请稍等...

浏览历史

内容加载中请稍等...
;
使用帮助 返回顶部