如何做到快速进行服务器间大文件传输


现有两个压缩包,分别18G的代码包和3G的数据库,想传输到另外一台服务器上,方式有两种,rsync和scp,直接传输速度很慢(scp大约2M/s,rsync更慢),问有何更快速传输的处理方式。

Linux tcp

yzxdc 12 years, 11 months ago

首先要看传输速度慢的原因是什么?两台服务器是在局域网里还是跨了公网?路径中是否存在带宽瓶颈?是否有人为限速?最终落实到传输协议上,就只有2个指标:延迟和丢包,仔细查查就能找到原因。如果瓶颈不可克服,那么你想什么技术手段都没用。

通用的建议:如果是局域网,就找找造成延迟升高和丢包率升高的原因是什么,网卡?交换机?电缆?还是因为传输加密造成的服务器负担过重?解决了速度就上去了。如果是公网,就用多线程传输,源服务器跑个httpd或者ftpd,目的服务器主动去拉,开多个线程,有很多工具可以用,比如lftp。

豊総耳机子 answered 12 years, 11 months ago

Your Answer