2013年11月19日星期二

让远程传输大文件变得更快

本邮件内容由第三方提供,如果您不想继续收到该邮件,可 点此退订
让远程传输大文件变得更快  阅读原文»

让远程传输大文件变得更快

我是在两台虚拟机做的测试。

如果用传统SCP远程拷贝,速度是比较慢的,如图:

225134616.jpg

现在采用lz4压缩传输。LZ4是一个非常快的无损压缩算法,压缩速度在单核300MB/S,可扩展支持多核CPU。它还具有一个非常快速的解码器,速度单核可达到和超越1GB/S。通常能够达到多核系统上的RAM速度限制。

225329569.jpg

项目主页:http://code.google.com/p/lz4/

安装(在本地和远程均安装lz4压缩工具)

# wget https://dl.dropboxusercontent.com/u/59565338/LZ4/lz4-r108.tar.gz

# cd lz4-r108/

# make;make install

远程传输

  time tar -c aa.img |pv|lz4 -B4|ssh 192.168.17.129 "lz4 -d |tar -xC /root/"  

225705201.jpg

传输2G的文件,速度是119M/S,花费了17秒传输完毕。

本文出自 "贺春的技术专栏" 博客,请务必保留此出处http://hcymysql.blog.51cto.com/5223301/1328071

分享至 一键收藏,随时查看,分享好友!
昵称:
登录快速注册
内容:

阅读更多内容

没有评论:

发表评论