【转载】curl的简介和使用
本文转载自curl网站开发指南,做了很小的改动，遵从自由转载原则。
What’s curl used for?
curl is used in command lines or scripts to transfer data. It is also used in cars, television sets, routers, printers, audio equipment, mobile phones, tablets, settop boxes, media players and is the internet transfer backbone for thousands of software applications affecting billions of humans daily.
curl是一个被用在命令行或者脚本中，用来传输数据的工具。它还被运用于 🚗 上，📺 上，路由器上，🖨️ 上，音响设备上，📱 上，平板电脑上，机顶盒上，媒体播放器上，以及数以万计，影响着上百万年的人们日常生活的基于网络的软件。
curl 是一种命令行工具，作用是发出网络请求，然后得到和提取数据，显示在”标准输出”（stdout）上面。
它支持多种协议，下面举例讲解如何将它用于网站开发。
一、查看网页源码
直接在 curl 命令后加上网址，就可以看到网页源码。我们以网址 www.sina.com 为例（选择该网址，主要因为它的网页代码较短）：
$ curl www.sina.com
<!DOCTYPE HTML PUBLIC "-//IETF//DTD HTML 2.0//EN">
<html><head>
<title>301 Moved Permanently</title>
</head><body>
<h1>Moved Permanently</h1>
<p>The document has moved <a href="http://www.sina.com.cn/">here</a>.</p>
</body></html>
如果要把这个网页保存下来，可以使用 -o 参数，这就相当于使用 wget 命令了。
$ curl -o [文件名] www.sina.com
二、自动跳转
有的网址是自动跳转的(重定向)。使用 -L 参数，curl 就会跳转到新的网址。
$ curl -L www.sina.com
键入上面的命令，结果就自动跳转为 www.sina.com.cn。
三、显示头信息
` -i `参数可以显示 http response 的头信息，连同网页代码一起。
$ curl -i www.sina.com
HTTP/1.0 301 Moved Permanently
Date: Sat, 03 Sep 2011 23:44:10 GMT
Server: Apache/2.0.54 (Unix)
Location: http://www.sina.com.cn/
Cache-Control: max-age=3600
Expires: Sun, 04 Sep 2011 00:44:10 GMT
Vary: Accept-Encoding
Content-Length: 231
Content-Type: text/html; charset=iso-8859-1
Age: 3239
X-Cache: HIT from sh201-9.sina.com.cn
Connection: close
<!DOCTYPE HTML PUBLIC "-//IETF//DTD HTML 2.0//EN">
<html><head>
<title>301 Moved Permanently</title>
</head><body>
<h1>Moved Permanently</h1>
<p>The document has moved <a href="http://www.sina.com.cn/">here</a>.</p>
</body></html>
` -I `参数则是只显示 http response 的头信息。
四、显示通信过程
` -v `参数可以显示一次 http 通信的整个过程，包括端口连接和 http request 头信息。
$ curl -v www.sina.com
* About to connect() to www.sina.com port 80 (#0)
* Trying 61.172.201.195... connected
* Connected to www.sina.com (61.172.201.195) port 80 (#0)
> GET / HTTP/1.1
> User-Agent: curl/7.21.3 (i686-pc-linux-gnu) libcurl/7.21.3 OpenSSL/0.9.8o zlib/1.2.3.4 libidn/1.18
> Host: www.sina.com
> Accept: */*
>
* HTTP 1.0, assume close after body
< HTTP/1.0 301 Moved Permanently
< Date: Sun, 04 Sep 2011 00:42:39 GMT
< Server: Apache/2.0.54 (Unix)
< Location: http://www.sina.com.cn/
< Cache-Control: max-age=3600
< Expires: Sun, 04 Sep 2011 01:42:39 GMT
< Vary: Accept-Encoding
< Content-Length: 231
< Content-Type: text/html; charset=iso-8859-1
< X-Cache: MISS from sh201-19.sina.com.cn
< Connection: close
<
<!DOCTYPE HTML PUBLIC "-//IETF//DTD HTML 2.0//EN">
<html><head>
<title>301 Moved Permanently</title>
</head><body>
<h1>Moved Permanently</h1>
<p>The document has moved <a href="http://www.sina.com.cn/">here</a>.</p>
</body></html>
* Closing connection #0
如果你觉得上面的信息还不够，那么下面的命令可以查看更详细的通信过程。
$ curl --trace output.txt www.sina.com
或者
$ curl --trace-ascii output.txt www.sina.com
运行后，请打开 output.txt 文件查看。
五、发送表单信息
发送表单信息有 GET 和 POST 两种方法。GET 方法相对简单，只要把数据附在网址后面就行。
$ curl example.com/form.cgi?data=xxx
POST 方法必须把数据和网址分开，curl 就要用到–data参数。
$ curl -X POST --data "data=xxx" example.com/form.cgi
如果你的数据没有经过表单编码，还可以让 curl 为你编码，参数是--data-urlencode。
$ curl -X POST--data-urlencode "date=April 1" example.com/form.cgi
六、HTTP 动词
curl 默认的 HTTP 动词是 GET，使用 -X 参数可以支持其他动词。
$ curl -X POST www.example.com
$ curl -X DELETE www.example.com
七、文件上传
假定文件上传的表单是下面这样：
<form method="POST" enctype='multipart/form-data' action="upload.cgi">
<input type=file name=upload>
<input type=submit name=press value="OK">
</form>
你可以用 curl 这样上传文件：
$ curl --form upload=@localfilename --form press=OK [URL]
八、Referer 字段
有时你需要在 http request 头信息中，提供一个 referer 字段，表示你是从哪里跳转过来的。
$ curl --referer http://www.example.com http://www.example.com
九、User Agent 字段
这个字段是用来表示客户端的设备信息。服务器有时会根据这个字段，针对不同设备，返回不同格式的网页，比如手机版和桌面版。
iPhone4 的 User Agent 是
Mozilla/5.0 (iPhone; U; CPU iPhone OS 4_0 like Mac
OS X; en-us) AppleWebKit/532.9 (KHTML, like Gecko)
Version/4.0.5 Mobile/8A293 Safari/6531.22.7
curl可以这样模拟：
$ curl --user-agent "[User Agent]" [URL]
十、cookie
使用 --cookie 参数，可以让 curl 发送 cookie。
$ curl --cookie "name=xxx" www.example.com
至于具体的cookie的值，可以从 http response 头信息的 Set-Cookie 字段中得到。
` -c cookie-file 可以保存服务器返回的 cookie 到文件， -b cookie-file `可以使用这个文件作为 cookie 信息，进行后续的请求。
$ curl -c cookies http://example.com
$ curl -b cookies http://example.com
十一、增加头信息
有时需要在 http request 之中，自行增加一个头信息。 --header 参数就可以起到这个作用。
$ curl --header "Content-Type:application/json" http://example.com
十二、HTTP 认证
有些网域需要 HTTP 认证，这时 curl 需要用到 --user 参数。
$ curl --user name:password example.com