cURL 命令行工具是一种多功能的数据传输工具，其最常见和强大的用途之一是从互联网下载文件。无论您是作为开发者拉取依赖，还是作为系统管理员获取更新，亦或是作为网络爬虫获取大型数据集，掌握 cURL 下载是必不可少的。
本指南将提供最重要的 cURL 标志的全面解析，涵盖如何管理文件名、处理中断，以及如何使用代理，如 Nstproxy，确保您的下载快速、可靠且无限制。
1. 基础知识：保存下载的文件
默认情况下，cURL 将文件内容直接打印到您的终端标准输出。要将内容保存到文件，您需要使用两个主要选项之一：-O 或 -o。
选项 1：使用原文件名保存 (-O)
-O（大写 O）标志指示 cURL 使用远程文件的名称保存文件。
curl -O https://example.com/assets/large_report.pdf
# 结果：将文件保存为当前目录中的 'large_report.pdf'。选项 2：使用自定义文件名保存 (-o)
-o（小写 o）标志允许您指定下载文件的自定义名称。
curl -o my_custom_report.pdf https://example.com/assets/large_report.pdf
# 结果：将文件保存为当前目录中的 'my_custom_report.pdf'。2. 可靠下载的必要标志
在实际场景中，尤其是处理大文件或不稳定连接时，这些标志是不可或缺的。
处理重定向 (-L)
许多下载链接使用 HTTP 重定向（3xx 状态码）指向最终文件位置。如果没有 -L 标志，cURL 将下载重定向页面内容，而不是文件本身。
curl -L -O https://shorturl.com/file-link
# -L 标志指示 cURL 跟随任何重定向，直到到达最终目的地。恢复中断的下载 (-C -)
如果大容量下载中断（例如，由于网络错误或停电），您可以使用 -C - 标志在不重新开始的情况下恢复下载。这告诉 cURL 自动确定上次下载停止的位置并从该点继续。
curl -C - -O https://example.com/assets/massive_archive.zip
# cURL 检查现有文件的大小并恢复下载。下载多个文件
您可以通过在 -O 标志后列出多个文件来在一个命令中下载多个文件。
curl -O https://example.com/file1.txt -O https://example.com/file2.txt
# 下载 file1.txt 和 file2.txt，并以其原始名称保存。限制下载速度 (--limit-rate)
为了防止下载消耗您所有的带宽或避免触发服务器端限速，您可以限制传输速度。
curl --limit-rate 500K -O https://example.com/big_data.zip
# 将下载速度限制为每秒 500 千字节。静默下载 (-s)
默认情况下，cURL 显示进度条。要抑制此输出并静默运行下载（对脚本有用），请使用 -s 标志。
curl -s -O https://example.com/script.sh
# 下载文件而不显示进度条。3. 通过代理下载文件（Nstproxy 集成）
在进行网络爬虫或市场调研时，您通常需要使用代理来绕过地理限制或 IP 阻塞。Nstproxy 提供高速、可靠的住宅和数据中心代理，非常适合此任务。
要通过代理路由下载，您需要使用 -x 或 --proxy 标志，后面跟上代理详情。
使用经过身份验证的 Nstproxy 住宅代理
我们将使用通用的 Nstproxy 住宅代理端点作为示例：
curl -x http://nstuser:[email protected]:12345 -O http://example.com/file.jpg| 命令部分 | 描述 |
|---|---|
curl -x |
指定请求应通过代理进行路由。 |
http://... |
代理协议（HTTP 对于住宅代理很常见）。 |
nstuser:nstpwd |
您的 Nstproxy 用户名和密码以进行身份验证。 |
@gate.nstproxy.io:12345 |
Nstproxy 网关地址和端口。 |
-O http://... |
要下载的文件 URL。 |
分别处理代理身份验证
如果您的代理需要身份验证，您还可以使用 -U 或 --proxy-user 标志传递凭据，这对于脚本可能更简洁：
curl -x http://gate.nstproxy.io:12345 -U nstuser:nstpwd -O http://example.com/file.jpg4. cURL 与 Wget 下载比较
cURL 和 Wget 是两种流行的命令行文件下载工具，但它们各有不同的优缺点：
| 特性 | cURL | Wget |
|---|---|---|
| 主要重点 | 数据传输（上传/下载），支持多种协议。 | 文件下载和镜像。 |
| 递归下载 | 不支持原生递归下载。 | 对递归下载支持良好（镜像整站）。 |
| 协议支持 | 支持更多协议（HTTP, HTTPS, FTP, FTPS, SCP, SFTP, SOCKS 等）。 | 支持较少协议（HTTP, HTTPS, FTP, FTPS）。 |
| 输出 | 默认打印到标准输出；需要 -O 或 -o 保存。 |
默认保存到文件。 |
| 代理支持 | 优秀，支持通过 -x 和环境变量进行高度配置。 |
优秀，通过环境变量进行配置。 |
对于单文件下载，尤其是与像 Nstproxy 一样的代理结合使用以实现匿名性和速度时，cURL 通常是首选工具，因为它具有灵活性和广泛的协议支持。
结论
cURL 是一个非常强大且灵活的文件下载工具。通过掌握像 -O 保存、-L 跳转和 -C - 续传这样的选项，您可以确保下载的高效和可靠。
当您的下载任务需要绕过限制或处理大量请求时，整合高质量的代理是不可或缺的。Nstproxy 是执行这些任务的最佳代理提供商，提供您执行 cURL 下载所需的速度和匿名性，每次都能成功。
常见问题解答 (Q&A)
Q1: curl -O 和 curl -o 有什么区别？
A: curl -O（大写 O）使用远程服务器的原始文件名保存下载的文件。curl -o（小写 o）允许您指定保存文件的自定义名称。
Q2: 如何使用 cURL 续传下载？
A: 您可以使用 -C - 选项（注意连字符）来续传中断的下载。这告诉 cURL 从中断的地方继续传输，基于部分下载文件的大小。
Q3: 我可以使用 Nstproxy 的 SOCKS5 代理通过 cURL 下载文件吗？
A: 可以。cURL 完全支持 SOCKS5 代理。您可以使用 -x 选项和 socks5:// 协议前缀，例如：
curl -x socks5://nstuser:[email protected]:12345 -O http://example.com/file.jpg
Q4: 为什么我需要代理下载文件？
A: 如果文件源是地理限制（仅在某些国家可用）、如果服务器因之前的活动阻止了您的 IP 地址，或者如果您快速下载多个文件并需要在多个 IP 地址之间分配请求以避免速率限制，您就需要使用代理下载文件。
Q5: 如何使用 cURL 从 FTP 服务器下载文件？
A: cURL 原生支持 FTP。您只需在 URL 中使用 ftp:// 协议。如果需要身份验证，可以将其包含在 URL 中或使用 -u 选项：
curl -u "ftpuser:ftppwd" -O ftp://ftp.example.com/file.zip
参考文献
[1] Nstproxy - 住宅代理: https://www.nstproxy.com/products/residential
[2] Nstproxy - IPV6 代理: https://www.nstproxy.com/products/ipv6
