测试开发技术网站
博客
设计
设计
开发
Python
测试
unittest
运维
Linux基础应用
CI/CD
CI/CD
数据库
数据库
云计算
云计算
云原生
云原生
爬虫
爬虫
数据分析
数据分析
人工智能
人工智能
登录
注册
爬虫----Fiddler如何将抓到的每个包(会话)自动到保存到不同的txt文件中
收藏本文
作者:redrose2100 类别: 日期:2023-03-13 02:34:04 阅读:948 次 消耗积分:0 分
[【原文链接】爬虫----Fiddler如何将抓到的每个包(会话)自动到保存到不同的txt文件中](http://devops-dev.com/article/557) (1)打开Fiddler后,点击【规则】-【自定义规则】 ![](https://redrose2100.oss-cn-hangzhou.aliyuncs.com/img/3100c62c-c0f9-11ed-a0bd-0242ac110004.png) (2)此时会打开脚本文件窗口,如下所示 ![](https://redrose2100.oss-cn-hangzhou.aliyuncs.com/img/491a1218-c0f9-11ed-a0bd-0242ac110004.png) (3)然后按Ctrl+F搜索 OnBeforeResponse 方法 ![](https://redrose2100.oss-cn-hangzhou.aliyuncs.com/img/205f773c-c103-11ed-a0bd-0242ac110004.png) (4)然后首先在此方法前增加一个生成时间戳字符串的方法,用于后面保存文件的文件名 ```js static function format(dat){ //获取年月日,时间 var year = dat.getFullYear(); var mon = (dat.getMonth()+1) < 10 ? "0"+(dat.getMonth()+1) : dat.getMonth()+1; var day = (dat.getDay() +1) < 10 ? "0"+(dat.getDay()+1) : dat.getDay()+1; var hour = dat.getHours() < 10 ? "0"+(dat.getHours()) : dat.getHours(); var min = dat.getMinutes() < 10 ? "0"+(dat.getMinutes()) : dat.getMinutes(); var seon = dat.getSeconds() < 10 ? "0"+(dat.getSeconds()) : dat.getSeconds(); var milisec= dat.getMilliseconds() <10 ? "0"+(dat.getMilliseconds()) : dat.getMilliseconds() var newDate = year + mon + day +"_"+ hour + min + seon+"_"+milisec; return newDate; } ``` 如下图所示 ![](https://redrose2100.oss-cn-hangzhou.aliyuncs.com/img/5d39dab2-c103-11ed-a0bd-0242ac110004.png) (5)然后在OnBeforeResponse方法中增加如下一段代码,这里 www.baidu.com 用于过滤要保存的网址的包,保存文件的地方要指定目录以及生成的时间戳组装而成的txt文件名 ```js if (oSession.fullUrl.Contains("www.baidu.com")) { try{ var now = new Date(); //var ts = now.getTime(); var timestamp = format(now) oSession.SaveSession("G:/test/"+timestamp+".txt",false); }catch(err){ var err; } } ``` 如下图所示,比如这里就保存 www.baidu.conm 的包 ![](https://redrose2100.oss-cn-hangzhou.aliyuncs.com/img/cc031df0-c103-11ed-a0bd-0242ac110004.png) (6)然后保存,并将fiddler重启 (7)然后在浏览器请求 https://www.baidu.com/ 网站 ![](https://redrose2100.oss-cn-hangzhou.aliyuncs.com/img/1bc1709e-c104-11ed-a0bd-0242ac110004.png) (8)此时可以看到fiddler抓到了许多包,并且 G:/test/ 目录中保存了一些txt文件 ![](https://redrose2100.oss-cn-hangzhou.aliyuncs.com/img/392bc71a-c104-11ed-a0bd-0242ac110004.png) (9)找一个文件打开,可以看到这里面请求数据和响应数据均保存在文件中 ![](https://redrose2100.oss-cn-hangzhou.aliyuncs.com/img/66b03342-c104-11ed-a0bd-0242ac110004.png) (10)至此就做到了将fiddler中抓的包自动地保存到txt文件中了
始终坚持开源开放共享精神,同时感谢您的充电鼓励和支持!
版权所有,转载本站文章请注明出处:redrose2100, http://blog.redrose2100.com/article/557
上一篇:
爬虫----如何快速将模拟器或者手机终端的网络代理设置为fiddler的监听端口
下一篇:
Python代码集----pathlib应用之获取指定目录下的所有文件
搜索
个人成就
出版书籍
《Pytest企业级应用实战》
测试开发技术全栈公众号
测试开发技术全栈公众号
DevOps技术交流微信群
加微信邀请进群
常用网站链接
开源软件洞察
云原生技术栈全景图
Python语言官方文档
Golang官方文档
Docker官方文档
Jenkins中文用户手册
Scrapy官方文档
VUE官方文档
Harbor官方文档
openQA官方文档
云原生开源社区
开源中国
Kubernetes中文文档
Markdown语法官方教程
Kubernetes中文社区
Kubersphere官方文档
BootStrap中文网站
JavaScript中文网
NumPy官方文档
Pandas官方文档
GitLink确实开源网站
数据库排名网站
编程语言排名网站
SEO综合查询网站
数学加减法练习自动生成网站
Kickstart Generator
文章分类
最新文章
最多阅读
特别推荐
×
Close
登录
注册
找回密码
登录邮箱:
登录密码:
图片验证码:
注册邮箱:
注册密码:
邮箱验证码:
发送邮件
注册邮箱:
新的密码:
邮箱验证码:
发送邮件