网络应用（6）：http报文结构与curl的使用

http是一个协议，协议就是约定、规定，先不管为什么这么约定有什么高深的东西，为了解决具体问题，我们先要能使用协议，理解协议中对我们有用的那部分数据，是的，我们不是研究生，更不是纯研究，所有的研究都要由具体的问题来驱动。

那这里的具体问题是什么？就是看懂http的请求跟回复啊，就像写某某申请一样，你不理申请最终怎么传递出去，你先要知道以什么格式来写，对方回复后你怎么看明白它，这才是基本的。所以，http的请求格式跟回复格式，其实也只是形式上的东西，形式是多变而不稳定的，更不是什么深奥的东西，它只是表达了一些内容。

那就来看看http请求与响应的形式上的东西吧。

本文介绍http请求与响应的报文结构，以及curl的使用。

先抓个包来直观看一下，在百度的搜索框中，敲入“helloworld”并回车，这时会发起一个http请求，用charles来抓包（为什么用它？因为我介绍过！），可以看到这样的请求与响应的信息：

从数据包来看，有一个GET方法，返回了200的状态码，等等。但这里混合了请求与响应的信息，如果分开来看，请求与响应各自有什么数据组织结构呢？

（1）请求报文

http请求数据，使用的结构是这样的：

小程引用网上的一张图，这张图描绘了这个结构：

参照上图，请求行是这个样子：

注意，请求行一般不包括host的地址，而host地址存放在请求头中。

然后是请求头，分为多行，每一行是一个键值对（key: value的格式），比如请求头是这个样子的：

最后是请求体，一般来说GET方法是不带请求体的，因为所有内容都放到请求行（特别是url中）或请求头中了，一般来说POST方法需要带请求体，比如在iTunes下载一个APP时，POST请求数据是这样的：

不要觉得好新奇，又是请求行、请求头又是请求体的，这都只是规则，形式上的东西，以这种形式传递了内容。

（2）响应报文

响应数据的结构，也可以分三部分：

这里给一个响应实例：

响应行，也叫状态行，包括http的版本、状态码与状态描述。

响应头跟请求头一样，由一行一行的key-value构成。

响应体一般就是请求方想要的数据了，但响应体不一定会存在，比如HEAD请求方法时不返回响应体（这时响应行就是请求方想要的）。

规则上是这样的，响应/请求行就是一行，响应/请求头就是key-value的集合，响应/请求体就是各种格式的数据（xml、gif、png等格式）。

http请求与响应数据，还有其它的一些知识，比如GET与POST的区别、返回404/403/303表示什么意思，等等，这个谁用谁查，不细说。

但我想说一个工具，一个可以发起http请求的工具，好用，就是curl。

（3）curl的使用

小程使用的是macos，mac自带了curl工具。

curl的功能也算强大的，提供了系列的选项，这里只介绍一些常规的使用方式。

get请求，与保存

curl www.baidu.com
curl "http://172.17.21.197:54321?pa1=hello"
// 保存，下载
curl -o file.html www.baidu.com
curl -o i.jpg http://img3.douban.com/lpic/s4549903.jpg
// -A 仿造ie与运行平台
curl -A "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.0)" www.baidu.com
// -e 仿造入口链接（即referer，用于盗链）
curl -A "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.0)" -e "www.google.com" www.baidu.com
// -x 使用代理
curl -x a.b.c.d:54321 http://google.com
// -D 保存cookie到文件
curl www.baidu.com -o aa.txt -D cookie.txt
// -b 读取文件并当作cookie数据来请求
curl www.baidu.com -b cookie.txt
// -H 设置请求头，这里设置了cookie跟ua
curl -H "Cookie: install_id=14621691626; sid_guard=\"0eb878191489e4247f643672c932c814|1504782359|2592000|Sat\054 07-Oct-2017 11:05:59 GMT\"; \n User-Agent: xxx/1.5.6 (iPhone; iOS 10.2; Scale/2.00)" "https://xxx.yy.com/..."

post

// -d 请求体
curl -d "user=nickwolfe&password=12345" http://www.linuxidc.com/login.cgi
curl -d "key=jet" 192.168.2.32:54321

post，以表单的方式（multipart/form-data）

// "file"为key名，随便起，后面为文件路径（包括文件包）
curl -F "file=@./myfile.ok" "http://172.17.xx.xx:54321"

总结一下，本文介绍了http请求与响应报文的数据结构，也介绍了用于发送http请求的工具curl的使用。文章的目的，一方面是让你巩固http报文的结构（其实这只是形式的东西，不要太在意），另一方面掌握一个便利的发送http请求的工具（这个就很实用了）。