美文网首页
HTTP之请求与响应

HTTP之请求与响应

作者: TravisW | 来源:发表于2018-07-23 17:49 被阅读0次

    1. 请求

    1.1 请求的格式

    1 动词 路径 协议/版本
    2 Key1: value1
    2 Key2: value2
    2 Key3: value3
    2 Content-Type: application/x-www-form-urlencoded
    2 Host: www.baidu.com
    2 User-Agent: curl/7.54.0
    3
    4 要上传的数据

    请求最多包含四部分,最少包含三部分。(也就是说第四部分可以为空)
    第三部分永远都是一个回车(\n)
    动词有 GET POST PUT PATCH DELETE HEAD OPTIONS 等
    这里的路径包括「查询参数」,但不包括「锚点」
    如果你没有写路径,那么路径默认为 /
    第 2 部分中的 Content-Type 标注了第 4 部分的格式

    1.2 用Chrome发请求

    1. 右键 -> 检查


    2. 以打开百度为例,在地址栏输入www.baidu.com,回车

    3. 依次点开Network -> 百度 -> Headers -> Request Headers -> view source


    4. 这样就可以看到打开百度所发送请求的头部信息了


    2. 响应

    2.1 响应的格式

    1 协议/版本号 状态码 状态解释
    2 Key1: value1
    2 Key2: value2
    2 Content-Length: 17931
    2 Content-Type: text/html
    3
    4 要下载的内容

    响应也包括四部分
    状态码反映了响应状态,参考资料
    Content-Type 标注了第 4 部分的格式,且遵循 MIME 规范

    2.2 用Chrome查看响应

    1. 右键 -> 检查
    2. 以打开百度为例,在地址栏输入www.baidu.com,回车
    3. 依次点开Network -> 百度 -> Headers -> Response Headers -> view source


    4. 点击Response可以查看具体响应的内容


    3. curl命令

    • cURL命令是一个利用URL规则在命令行下工作的文件传输工具。它支持文件的上传和下载,所以是综合传输工具,但按传统,习惯称curl为下载工具。作为一款强力工具,curl支持包括HTTP、HTTPS、ftp等众多协议,还支持POST、cookies、认证、从指定偏移处下载部分文件、用户代理字符串、限速、文件大小、进度条等特征。做网页处理流程和数据检索自动化,curl可以祝一臂之力。

    • 语法

    curl(选项)(参数)
    
    • 选项
    选项 功能
    -a/--append 上传文件时,附加到目标文件
    -A/--user-agent <string> 设置用户代理发送给服务器
    -anyauth 可以使用“任何”身份验证方法
    -b/--cookie <name=string/file> cookie字符串或文件读取位置
    --basic 使用HTTP基本验证
    -B/--use-ascii 使用ASCII /文本传输
    -c/--cookie-jar <file> 操作结束后把cookie写入到这个文件中
    -C/--continue-at <offset> 断点续转
    -d/--data <data> HTTP POST方式传送数据
    --data-ascii <data> 以ascii的方式post数据
    --data-binary <data> 以二进制的方式post数据
    --negotiate 使用HTTP身份验证
    --digest 使用数字身份验证
    --disable-eprt 禁止使用EPRT或LPRT
    --disable-epsv 禁止使用EPSV
    -D/--dump-header <file> 把header信息写入到该文件中
    --egd-file <file> 为随机数据(SSL)设置EGD socket路径
    --tcp-nodelay 使用TCP_NODELAY选项
    -e/--referer 来源网址
    -E/--cert <cert[:passwd]> 客户端证书文件和密码 (SSL)
    --cert-type <type> 证书文件类型 (DER/PEM/ENG) (SSL)
    --key <key> 私钥文件名 (SSL)
    --key-type <type> 私钥文件类型 (DER/PEM/ENG) (SSL)
    --pass <pass> 私钥密码 (SSL)
    --engine <eng> 加密引擎使用 (SSL). "--engine list" for list
    --cacert <file> CA证书 (SSL)
    --capath <directory> CA目录 (made using c_rehash) to verify peer against (SSL)
    --ciphers <list> SSL密码
    --compressed 要求返回是压缩的形势 (using deflate or gzip)
    --connect-timeout <seconds> 设置最大请求时间
    --create-dirs 建立本地目录的目录层次结构
    --crlf 上传是把LF转变成CRLF
    -f/--fail 连接失败时不显示http错误
    --ftp-create-dirs 如果远程目录不存在,创建远程目录
    --ftp-method [multicwd/nocwd/singlecwd] 控制CWD的使用
    --ftp-pasv 使用 PASV/EPSV 代替端口
    --ftp-skip-pasv-ip 使用PASV的时候,忽略该IP地址
    --ftp-ssl 尝试用 SSL/TLS 来进行ftp数据传输
    --ftp-ssl-reqd 要求用 SSL/TLS 来进行ftp数据传输
    -F/--form <name=content> 模拟http表单提交数据
    --form-string <name=string> 模拟http表单提交数据
    -g/--globoff 禁用网址序列和范围使用{}和[]
    -G/--get 以get的方式来发送数据
    -H/--header <line> 自定义头信息传递给服务器
    --ignore-content-length 忽略的HTTP头信息的长度
    -i/--include 输出时包括protocol头信息
    -I/--head 只显示请求头信息
    -j/--junk-session-cookies 读取文件进忽略session cookie
    --interface <interface> 使用指定网络接口/地址
    --krb4 <level> 使用指定安全级别的krb4
    -k/--insecure 允许不使用证书到SSL站点
    -K/--config 指定的配置文件读取
    -l/--list-only 列出ftp目录下的文件名称
    --limit-rate <rate> 设置传输速度
    --local-port<NUM> 强制使用本地端口号
    -m/--max-time <seconds> 设置最大传输时间
    --max-redirs <num> 设置最大读取的目录数
    --max-filesize <bytes> 设置最大下载的文件总量
    -M/--manual 显示全手动
    -n/--netrc 从netrc文件中读取用户名和密码
    --netrc-optional 使用 .netrc 或者 URL来覆盖-n
    --ntlm 使用 HTTP NTLM 身份验证
    -N/--no-buffer 禁用缓冲输出
    -o/--output 把输出写到该文件中
    -O/--remote-name 把输出写到该文件中,保留远程文件的文件名
    -p/--proxytunnel 使用HTTP代理
    --proxy-anyauth 选择任一代理身份验证方法
    --proxy-basic 在代理上使用基本身份验证
    --proxy-digest 在代理上使用数字身份验证
    --proxy-ntlm 在代理上使用ntlm身份验证
    -P/--ftp-port <address> 使用端口地址,而不是使用PASV
    -q 作为第一个参数,关闭 .curlrc
    -Q/--quote <cmd> 文件传输前,发送命令到服务器
    -r/--range <range> 检索来自HTTP/1.1或FTP服务器字节范围
    --range-file 读取(SSL)的随机文件
    -R/--remote-time 在本地生成文件时,保留远程文件时间
    --retry <num> 传输出现问题时,重试的次数
    --retry-delay <seconds> 传输出现问题时,设置重试间隔时间
    --retry-max-time <seconds> 传输出现问题时,设置最大重试时间
    -s/--silent 静默模式。不输出任何东西
    -S/--show-error 显示错误
    --socks4 <host[:port]> 用socks4代理给定主机和端口
    --socks5 <host[:port]> 用socks5代理给定主机和端口
    --stderr <file>
    -t/--telnet-option <OPT=val> Telnet选项设置
    --trace <file> 对指定文件进行debug
    --trace-ascii <file> Like --跟踪但没有hex输出
    --trace-time 跟踪/详细输出时,添加时间戳
    -T/--upload-file <file> 上传文件
    --url <URL> Spet URL to work with
    -u/--user <user[:password]> 设置服务器的用户和密码
    -U/--proxy-user <user[:password]> 设置代理用户名和密码
    -w/--write-out [format] 什么输出完成后
    -x/--proxy <host[:port]> 在给定的端口上使用HTTP代理
    -X/--request <command> 指定什么命令
    -y/--speed-time 放弃限速所要的时间,默认为30
    -Y/--speed-limit 停止传输速度的限制,速度时间
    • 示例
    1. 简单下载页面
    curl https://www.baidu.com
    
    1. get请求
    curl -s -v -H "dog: black"  https://www.baidu.com
    

    查看到请求信息如下


    其中 -s 即silent,不显示进度
    -v为显示请求详细信息
    -H为加入头部信息,必须是"key: value"的格式,可以添加host、cookie等key
    1. post请求
    curl -X POST -s -v -H "xx: xxx" https://www.baidu.com
    

    -X为添加命令,这里添加post命令

    还可以用-d上传数据

    curl -X POST -d "hello world" -s -v -H "xx: xxx" https://www.baidu.com
    

    相关文章

      网友评论

          本文标题:HTTP之请求与响应

          本文链接:https://www.haomeiwen.com/subject/wskjmftx.html