使用 lftp 来加速 ftp/https 下载速度

admin6个月前笔记59
那么 lftp 的独特之处是什么?
  1. 1、lftp 中的每个操作都是可靠的,即任何非致命错误都被忽略,并且重复进行操作。所以如果下载中断,它会自动重新启动。即使 FTP 服务器不支持 REST 命令,lftp 也会尝试从开头检索文件,直到文件传输完成。


  2. 2、lftp 具有类似 

  3. shell
  4.  的命令语法,允许你在后台并行启动多个命令。


  5. 3.lftp 有一个内置的镜像功能,可以下载或更新整个目录树。还有一个反向镜像功能(mirror -R),它可以上传或更新服务器上的目录树。镜像也可以在两个远程服务器之间同步目录,如果可用的话会使用 FXP。

如何使用 lftp 作为下载加速器

lftp 有 pget 命令,它能让你并行下载。语法是:

lftp -e 'pget -n NUM -c url; exit'

例如,使用 pget 分 5个部分下载 http://kernel.org/pub/linux/kernel/v2.6/linux-2.6.22.2.tar.bz2:

$ cd /tmp 
$ lftp -e 'pget -n 5 -c http://kernel.org/pub/linux/kernel/v2.6/linux-2.6.22.2.tar.bz2'

示例输出:

45108964 bytes transferred in 57 seconds (775.3K/s)
lftp :~>quit

这里:

pget - 并行下载文件
-n 5 - 将最大连接数设置为 5
-c - 如果当前目录存在 lfile.lftp-pget-status,则继续中断的传输
如何在 Linux/Unix 中使用 lftp 来加速 ftp/https下载

再尝试添加 exit 命令:

$ lftp -e 'pget -n 10 -c https://cdn.kernel.org/pub/linux/kernel/v4.x/linux-4.15.tar.xz; exit'
关于并行下载的说明

请注意,通过使用下载加速器,你将增加远程服务器负载。另请注意,lftp 可能无法在不支持多点下载的站点上工作,或者防火墙阻止了此类请求。

其它的命令提供了更多功能。有关更多信息,请参考 lftp 的 man 页面:

man lftp
关于作者

作者是 nixCraft 的创建者,经验丰富的系统管理员,也是 Linux 操作系统/Unix shell 脚本的培训师。他曾与全球客户以及IT、教育、国防和太空研究以及非营利部门等多个行业合作。在 [Twitter][9]、[Facebook][10]、[Google +][11] 上关注他。通过 RSS/XML 订阅获取最新的系统管理、Linux/Unix 以及开源主题教程。


相关文章

虚拟主机解决电信网通间互联互通

电信和网通两大基础网络,人为地割裂了整个中国的网络。无论是选择把网站托管在电信、还是网通,都等于是在拒绝处于另外一个网络中的客户,因为实在太慢了。  那么有什么办法可以解决这个问题呢?目前主流的解决方...

如何使用U盘安装Ubuntu 14.04

如何使用U盘安装Ubuntu 14.04

对于做运维的同学来说U盘装个系统不就是分分钟的事吗,这有什么好说的?U盘安装系统一般就是如下几步:下载系统镜像。通过刻录软件写入U盘。修改BIOS,从U盘引导。喝杯咖啡,愉快的等待安装完成。通常按操上...

分享一条history命令小技巧

在使用linux终端执行bash的时候,发现怎么没有时间标识呢,这以后还怎么查是哪天执行了那条命令呢。这个history的作用就是将bash执行过的所有命令存储到.bash_history文件中,帮助...

Linux系统安全日志详解

Linux系统安全日志详解

1、介绍Linux系统提供了全方位的日志记录。我们登录Linux系统之后做的事情Linux都有相应的日志记录。整个日志系统比较多。这里只介绍和登录比较密切相关的三个日志。secure,btmp和wtm...

cURL 与 wget:到底哪一个才更适合你

cURL 与 wget:到底哪一个才更适合你

当想要直接通过 Linux 命令行下载文件,马上就能想到两个工具:wget 和 cURL。它们有很多一样的特征,可以很轻易的完成一些相同的任务,虽然它们有一些相似的特征,但它们并不...

Linux 上使用 Gmail SMTP 服务器发送邮件通知

Linux 上使用 Gmail SMTP 服务器发送邮件通知

谷歌的 Gmail 服务就是最可靠的 免费 SMTP 服务器 之一。想要从应用中发送邮件通知,你仅需在应用中添加 Gmail 的 SMTP 服务器地址和你的身份凭证即可。使用 Gmail 的 SMTP...

发表评论    

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。