您好,欢迎访问一九零五行业门户网

让远程传输大文件变得更快

我是在两台虚拟机做的测试。如果用传统scp远程拷贝,速度是比较慢的,如图:现在采用lz4压缩传输。lz4是一个非常快的无损压缩算法,压缩速度在单核300mb/s,可扩
我是在两台虚拟机做的测试。
如果用传统scp远程拷贝,,速度是比较慢的,如图:
现在采用lz4压缩传输。lz4是一个非常快的无损压缩算法,压缩速度在单核300mb/s,可扩展支持多核cpu。它还具有一个非常快速的解码器,速度单核可达到和超越1gb/s。通常能够达到多核系统上的ram速度限制。
项目主页:
安装(在本地和远程均安装lz4压缩工具)
# wget https://dl.dropboxusercontent.com/u/59565338/lz4/lz4-r108.tar.gz
# cd lz4-r108/
# make;make install
远程传输
time tar -c aa.img |pv|lz4 -b4|ssh 192.168.17.129 lz4 -d |tar -xc /root/
传输2g的文件,速度是119m/s,花费了17秒传输完毕。
本文出自 “贺春旸的技术专栏” 博客,请务必保留此出处
其它类似信息

推荐信息