curl命令详解
curl命令作用
curl命令是一个功能强大的网络工具，它能够通过http、ftp等方式下载文件，也能够上传文件，同时支持HTTPS等众多协议，还支持POST、cookies、认证、从指定偏移处下载部分文件、用户代理字符串、限速、文件大小、进度条等特征。其实curl远不止前面所说的那些功能，大家可以通过man curl阅读手册页获取更多的信息。类似的工具还有wget。curl命令使用了libcurl库来实现，libcurl库常用在C程序中用来处理HTTP请求，curlpp是libcurl的一个C++封装，这几个东西可以用在抓取网页、网络监控等方面的开发，而curl命令可以帮助来解决开发过程中遇到的问题。
命令事例详解
一、查看网页源码
直接在curl命令后加上网址，就可以看到网页源码。我们以网址www.sina.com为例（选择该网址，主要因为它的网页代码较短）
curl www.baidu.com
如果要把这个网页保存下来，可以使用-o参数，这就相当于使用wget命令了。
curl -o [文件名] www.baidu.com
二、自动跳转 有的网址是自动跳转的。使用-L参数，curl就会跳转到新的网址。curl -L http://item.taobao.com/item.htm?id=25823396605 键入上面的命令，结果就自动跳转为http://detail.tmall.com/item.htm?id=25823396605
三、显示头信息 -i 参数可以显示http response的头信息，连同网页代码一起。（-I 参数则是只显示http response的头信息。）
curl -i www.baidu.com
四、显示通信过程 -v 参数可以显示一次http通信的整个过程，包括端口连接和http request头信息。命令：curl -v www.baidu.com
五、发送表单信息 发送表单信息有GET和POST两种方法。GET方法相对简单，只要把数据附在网址后面就行: curl baidu.com/form.cgi?data=xxx
POST方法必须把数据和网址分开，例如：curl -d "method=searchone&module=seller&user_name=wb-liqiu&nickname=dd" -H"Host:fmp.view.lz.taobao.com" "10.235.160.141:8082/api.php"
六、文件上传 假定文件上传的表单你可以用curl这样上传文件，命令：curl --form upload=@localfilename --form press=OK http://www.baidu.com
七、Referer字段 有时你需要在http request头信息中，提供一个referer字段，表示你是从哪里跳转过来的: curl --referer http://www.baidu.com http://www.baidu.com
八、User Agent字段 这个字段是用来表示客户端的设备信息。服务器有时会根据这个字段，针对不同设备，返回不同格式的网页，比如手机版和桌面版。 iPhone4的User Agent是: “Mozilla/5.0 (iPhone; U; CPU iPhone OS 4_0 like Mac OS X; en-us) AppleWebKit/532.9 (KHTML, like Gecko) Version/4.0.5 Mobile/8A293 Safari/6531.22.7”。curl可以这样模拟： curl --user-agent "[User Agent]" [URL]
九、cookie 使用--cookie参数，可以让curl发送cookie。curl --cookie "name=xxx" www.baidu.com 至于具体的cookie的值，可以从http response头信息的Set-Cookie字段中得到。也可以例如：curl -c ./cookie.txt http://www.baidu.com
十、增加头信息 有时需要在http request之中，自行增加一个头信息。--header参数就可以起到这个作用。curl --header "xxx: xxxxxx" http://baidu.com
十一、HTTP认证 有些网域需要HTTP认证，这时curl需要用到--user参数：curl --user name:password baidu.com
<html> <meta http-equiv="refresh" content="0;url=http://www.baidu.com/"> </html>
十二、设置代理缓存 -x<ip:port>
curl -L -x127.0.0.1:13128 http://detail.tmall.com/item.htm?id=25823396605
