简述HTTP协议&使用curl命令
一、关于请求
1.1 HTTP请求包括的部分
客户端发送一个HTTP请求到服务器到请求消息包括下列格式：
- 请求行（request line）
- 请求头部（header）
- 空行
- 请求数据
图示：
请求格式
文字版
- 请求行的一般格式： GET /index.html HTTP/1.1
-
第一个字段为请求动作类型：
GET 代表请求的操作，表示要求服务器返回资源的表示；
POST 主要是向服务器发送表单数据
HEAD 表示只需要文件的首部
PUT 表示向服务器上传资源
PATCH 表示整体更新 -
第二个字段，标识服务器上所请求的资源的相对URL，必须要以
/开头，Web浏览器在发送请求的时候会自动加上服务器的主机名。 -
第三个字段，客户端理解的协议版本；
每一个HTTP请求不管是客户端还是服务器端均都要以两个回车换行结束.
在发送HTTP请求的时候，可以附加额外的基本信息：key：value -
一个常见的发送HTTP格式（一般服务器最重要的工作就是处理发送格式中的第一行数据）：
-
GET /index.html HTTP/1.1
Host:www.server.com 这个主要就是指定服务器的名
User-Agent: curl/7.54.0
Accept:text/html,text/plain
Content-Type（内容类型）: application/x-www-form-urlencoded
这里是回车（\n）
- Host（主机）: 1.2.3.4（key1，2，3，4，..... = value 回车）
- Accept（文件类型）: html, xhtml, xml
- User-Agent（用户代理）: curl/7.54.0
- Content-Type（内容类型）： application/x-www-form-urlencoded
1.2 如何用Chrome开发者工具查看 HTTP 请求内容
- 打开 谷歌浏览器
- 地址栏输入网址（例如：https://www.baidu.com）
- 按F12， 在Network 点击，查看 request，点击「view source」
-
可以看到请求的前三部分了
image.png
image.png
-
如果有请求内容的第四部分（POST），那么在 FormData 或 Payload 里面可以看到。
image.png
二、关于响应
1.1 HTTP响应包括的部分
- HTTP响应也由四个部分组成，分别是：状态行、消息报头、空行和响应正文。
图示：
image.png
- Content-Type(内容类型): text/html;charset=utf-8
- Content-Length(下载字节长度): 122
- Date(返回当日的日期和时间): Sat, 31 Dec 2005 23:59:59
2.2 如何用Chrome开发者工具查看 HTTP 请求内容
-
打开 Chrome
-
输入网址
-
选中第一个响应
-
查看 Response Headers，点击「view source」
-
你会看到响应的前两部分
image.png
-
查看 Response 或者 Preview，你会看到响应的第 4 部分
image.png
三、实例
下面实例是一点典型的使用GET来传递数据的实例：
- 客户端请求：
GET /hello.txt HTTP/1.1
Host: www.example.com
User-Agent: curl/7.16.3 libcurl/7.16.3 OpenSSL/0.9.7l zlib/1.2.3
Accept-Language: en, mi
- 服务端响应:
HTTP/1.1 200 OK
Date: Mon, 27 Jul 2009 12:28:53 GMT
Server: Apache
Last-Modified: Wed, 22 Jul 2009 19:15:56 GMT
ETag: "34aa387-d-1568eb00"
Accept-Ranges: bytes
Content-Length: 51
Vary: Accept-Encoding
Content-Type: text/plain
- 输出结果：
Hello World! My payload includes a trailing CRLF.
三、如何使用 curl 命令
请求：使用curl -s -v -H "xxx:xxx" -- https://www.baidu.com 来在Bash里创造一个请求，并得到响应。（curl默认的HTTP动词是GET，使用-X参数可以支持其他动词。）
-s：简短的信息
-v：>表示请求，<表示响应
-H：添加一个响应头。
请求与响应截图：
image.png
接下来用其他参数测试：curl -X POST -d "1234567890" -s -v -H "Frank: xxx" -- "https://www.baidu.com"测试
image.png
语法
# curl [option] [url]
参数
curl的参数很多，这里只是常见的几种
-v/--verbose 小写的v参数，用于打印更多信息，包括发送的请求信息，这在调试脚本是特别有用。
-m/--max-time <seconds> 指定处理的最大时长
-H/--header <header> 指定请求头参数
-s/--slient 减少输出的信息，比如进度
--connect-timeout <seconds> 指定尝试连接的最大时长
-x/--proxy <proxyhost[:port]> 指定代理服务器地址和端口，端口默认为1080
-T/--upload-file <file> 指定上传文件路径
-o/--output <file> 指定输出文件名称
-d/--data/--data-ascii <data> 指定POST的内容
--retry <num> 指定重试次数
-e/--referer <URL> 指定引用地址
-I/--head 仅返回头部信息，使用HEAD请求
