「docker实战篇」python的docker爬虫技术-fid

原创文章，欢迎转载。转载请注明：转载自IT人故事会，谢谢！
原文链接地址：「docker实战篇」python的docker爬虫技术-fiddler抓包软件详细配置（七）

挑选常用的功能给各位老铁介绍下。

fiddler

• 第一次进入fiddler

fiddler会请求fiddler的官网，检查更新操作

• 布局分布

工具栏

• File -capture traffic

开启爬虫

• File -new Viewer

新建立一个窗口

• File - save

保存all session，request方式，reponse的方式zip方式，text的文本形式。

保存后的压缩包文件。

• File - load Archive

加载已经压缩后的文件。

加载后，可以通过comments来识别，有序列号

• File - Recent Archives

保存的历史。列表的形式，保存到哪里了。

• File - Import sessions

导入从抓包工具的信息

• File - export sessions

选择工具导出指定抓包工具的数据

• Edit-Copy

• Edit-Remove

删除拦截的session列表内容

• Edit-mark

标记颜色，取消标记

• Edit-Find sessions

查找对应的session信息

• Tools-Options

设置Options，常规的设置，https证书设置，代理的监听设置，打开文本设计。

从哪里进行抓包

监听的端口代理端口是什么

image.png

• Tools - WinINET-Options

网络设置

• Tools - Clear WinINET Cache，Clear WinINET Cokkies

清空网络连接的缓存 和 Cookies

• Tools - TextWizard

编码转换工具

• Tools - HOSTs

主机的host设置

• Rules - Hide Image Requests

勾选后，隐藏抓包中的图片，不显示在列表中

• Rules - Hide Connects

隐藏其他的连接

• Rules - Automatic Breakpoints

请求前断点，请求后断点。这是修改网页信息的利器

• Rules - User-Agents

设置请求的User-Agents

• Rules - Performance

请求的模式。速度快慢的选择

• 快捷方式

  
  

Go的话，如果增加断点可以使用。

Stream 流模式：实时返回（更接近浏览器本身的行为）

Decode 全部请求统一编码

Keep All sessions 就是每次最多显示多少个请求，这个根据机器的性能。性能比较好的，可以全部显示。

点击any process 拖到到想要捕获的浏览器。可以实现过滤请求。

查看功能会话数量比较多。可以查找，过滤并用不同颜色去标示。

保存按钮对检测的会话进行保存。

保存截图当我们点击后会有个倒计时，计时后帮我们截图。

计时器

快速启动浏览器：选择ie 和chrome

clear cache；清除浏览器的缓冲。

textWizard:编码和解码的一些内容。对文本信息进行解码。base64

urlencode，urldecode

tearoff:浮窗

msdn搜索；.net开发

请求列表中的含义

• 请求列表

  
  

• 标识符

• http状态码

  
  

• 请求头

• 响应头

PS： fiddler的基本界面的所有功能都介绍完毕，其实如果熟悉http协议的很容易上手的，很多老铁http协议只局限在302，440，500这很不应该。