引言curl 是一个软件包,由命令行工具和使用URL语法传输数据的库组成 。
curl 支持多种协议,如DICT、FILE、FTP、FTPS、Gopher、HTTP、HTTPS、IMAP、IMAPS、LDAP、LDAPS、POP3、POP3S、RTMP、RTSP、SCP、SFTP、SMTP、SMTPS、Telnet和TFTP 。
本文用实例深度演示 curl 的详细用法 。
文章插图
下载单个文件下面的命令将获取URL的内容并将其显示在STDOUT中(即在你的终端上) 。
curl URL
要将输出存储到文件中,您可以将其重定向,如下所示 。这还将显示一些额外的下载统计信息 。
curl URL > output.html
将cURL输出保存到文件我们可以使用-o/-O选项将curl命令的结果保存到文件中 。
- -o(小写o)结果将保存在命令行中提供的文件名中 。
- -O(大写O)将采用URL中的文件名,并将其用作存储结果的文件名
curl -o gettext.html URL
现在,页面URL将保存在名为“gettext.html”的文件中 。你还会注意到,当使用-o选项运行curl时,它会显示下载的进度表 。
当你使用curl-O(大写O)时,它会使用URL后缀文件名,并将内容保存在本地 。
注意:当cURL必须将数据写入终端时,它会禁用进度表,以避免打印时的混乱 。我们可以使用‘>’|‘-o’|‘-O’选项将结果移动到文件中 。
一次下载多个页面通过在命令行上指定URL,我们可以一次下载多个文件 。
curl -O URL1 -O URL2
下面的命令将下载a.html和b.html,并将其以对应的名称保存在当前目录下 。
curl -O URL/a.html -O URL/b.html
当我们如上所述从同一服务器下载多个文件时,cURL将会尝试复用该连接 。
使用-L选项跟随请求头HTTP Location默认情况下,cURL不跟随HTTP Location标头 。它也称为重定向 。
当请求的网页移动到另一个位置时,HTTP Location标头将作为响应发送,它将显示实际网页所在的位置 。
例如,当用户在浏览器中键入a.com时,它将自动重定向到b.com 。这是基于HTTP Location标头完成的,如下所示 。
curl a.com302 Moved
302 Moved
The document has movedhere
上述信息也表明请求地址被永久重定向(302)到了其他地址 。我们可以使用-L选项坚持curl遵循重定向,使它下载最终的目标页面 。
curl -L a.com
断点续传使用curl-C选项,您可以继续下载由于某种原因已经停止的下载 。当下载大文件,但网络被中断时,这将很有帮助 。
如果我们使用“-C -”选项,那么cURL将找到断点并开始恢复下载 。
我们还可以给出一个偏移量‘-C<偏移量>’ 。将从源文件的开头跳过给定的偏移量字节 。
下面测试一下 。使用curl开始大文件的下载,然后在下载之间按Ctrl-C组合键停止下载 。
curl -O URL##############42.1%
下面额#表示进度条,下载停止在42.1% 。
使用“curl -C -”,我们可以从前面停止的地方继续下载 。现在,下载进度将从42.1%继续 。
curl -C - -O URL###############42.1%
限制下载速度你可以使用-limit-rate选项限制数据的传输量,将最大传输速率指定为参数 。
curl --limit-rate 50k -O UTL
上述命令将数据传输限制为50kb/秒 。在短时间内,curl可以使用较高的传输速率 。但平均而言,它将达到50kb/秒左右 。可以使用大文件进行速度测试 。
仅当文件在给定时间之前/之后被修改时才下载我们可以使用curl中的-z选项获取在特定时间之后修改的文件 。这对FTP和HTTP都有效 。
curl -z 2012-03-04 URL
上述命令仅当URL文件晚于给定日期和时间时,上述命令才会下载 。
curl -z -2012-03-04 URL
上述命令正好反过来,仅当URL文件早于给定日期时间才进行下载 。
有关日期表达式支持的各种语法,请参考 man curl_getdate 。
在cURL中传递HTTP身份验证有时,网站需要用户名和密码才能查看内容(可以使用.htaccess文件) 。在-u选项的帮助下,我们可以将这些凭据从cURL传递到Web服务器,如下所示 。
curl -u username:password URL
默认情况下,cURL使用基本HTTP身份验证,我们可以使用-ntlm | -digest指定其他身份验证方法 。
从FTP服务器下载资源cURL还可以用于从FTP服务器下载文件 。如果给定的FTP路径是目录,则默认情况下将列出特定目录下的文件 。
- 万用表的主要功能 万用表干什么用的
- 男孩起名常用的字(图文)
- 街头采访你们用的手机是什么品牌的?
- 【爱历史】犀利大王把许叔拖下水,许家渐渐沦陷,先礼后兵这一招用的很好
- 女孩取名用的字(图文)
- 作为一名美食作者,经常有人会问,咦,你的视频都怎么拍的?用的什么设备呢?其实对于
- 余额宝是什么 余额宝干什么用的
- 九贵骨图解
- MacOS常用的五款思维导图软件
- 推荐3个电脑好用的工具也是现在专业人士在用的电脑工具