Burp入门(3)-爬虫功能介绍

server/2024/12/2 9:46:06/

   声明:学习视频来自b站up主 泷羽sec,如涉及侵权马上删除文章

 感谢泷羽sec 团队的教学
视频地址:burp功能介绍(1)_哔哩哔哩_bilibili

本文介绍burp的主动爬虫和被动爬虫功能。

一、主动爬虫

工作原理:

  • 主动爬虫会像人类用户一样,自动遍历网站的各个页面,但它会主动向目标服务器发送请求以获取页面内容。与被动爬虫不同,主动爬虫会发送额外的请求,比如测试表单、按钮、链接等的响应。
  • 它会通过模拟用户的操作,构造并发起 HTTP 请求,并解析这些响应来进一步发现和探索网页结构。
  • 主动爬虫会逐步获取并记录发现的每个链接、页面、资源等,甚至对页面进行更细粒度的交互,如提交表单、点击按钮等,以发现隐藏的参数和页面。

优点:

  • 能够主动深入网站,发现一些复杂的页面、隐蔽的资源和漏洞。
  • 在对未知或未探索的部分进行测试时比较有效。

缺点:

  • 会对目标服务器产生较大的负载,可能会引起服务器响应慢或触发防火墙/IDS警报。
  • 由于模拟的是用户行为,可能导致不必要的请求和误报。

1.启动 Burp Suite 设置代理抓包

2.点击目标 >  站点地图 > 右键想要爬取的URL > 相关工具 > 发现内容

3.对爬虫程序进行相关配置

(1)可以根据自己的需求配置爬取的内容

(2)点击“会话正在进行”按钮开始进行爬取

(3)爬取的结果可以在站点地图观看

 (4)需要注意的是,爬虫时需要将超时模块中的各选项调大,以免爬虫失败

二、被动爬虫

工作原理:

  • 被动爬虫的工作方式比较温和,它不会主动向目标服务器发送请求,而是通过“监听”流量来收集信息。当你使用 Burp Suite 中的拦截代理(Proxy)功能时,被动爬虫会记录你访问的每个页面和请求。
  • 它利用你与目标网站交互时产生的请求和响应,提取网页的 URL、资源、参数等信息。这意味着,只有你主动浏览网页时,被动爬虫才能收集到相关数据。
  • 被动爬虫的重点是通过分析页面的 HTTP 响应内容、头部信息、JavaScript 等,收集页面上的所有链接和信息。

优点:

  • 对目标服务器没有额外负担,适用于不希望对目标网站产生过多影响的场合。
  • 由于是“被动”方式,通常不易被检测到。

缺点:

  • 只能收集你自己访问过的页面和信息,无法主动发现隐藏的页面或参数。
  • 如果目标页面没有被访问,相关信息就无法被收集。

被动爬虫位于仪表盘中,其可以对网页进行爬虫,并在站点地图中显示出来


http://www.ppmy.cn/server/146679.html

相关文章

List集合的进一步学习:性能优化

|| 持续分享系列教程,关注一下不迷路 || || B站视频教程:墨轩大楼 || || 知识星球:墨轩编程自习室 || 在Java集合框架中,选择合适的集合类型和使用正确的操作…

聊聊Flink:这次把Flink的触发器(Trigger)、移除器(Evictor)讲透

一、触发器(Trigger) Trigger 决定了一个窗口(由 window assigner 定义)何时可以被 window function 处理。 每个 WindowAssigner 都有一个默认的 Trigger。 如果默认 trigger 无法满足你的需要,你可以在 trigger(…) 调用中指定自定义的 tr…

基于卷积网络结构的火灾检测系统实现

1.摘要 本文实现了实现了一个完整的火灾检测工作流,从数据预处理、模型训练到最终的推理和报警功能。首先基于卷积神经网络(CNN)模型,设计实现了一个可分离卷积(SeparableConv2D)和残差连接的卷积神经网络模…

【Git】Git 完全指南:从入门到精通

Git 完全指南:从入门到精通 Git 是现代软件开发中最重要的版本控制工具之一,它帮助开发者高效地管理项目,支持分布式协作和版本控制。无论是个人项目还是团队开发,Git 都能提供强大的功能来跟踪、管理代码变更,并保障…

封闭解(Closed-Form Solution)与复杂数值优化(Complex Numerical Optimization)的比较:中英双语

中文版 什么是封闭解? 在数学和统计学中,封闭解(Closed-Form Solution) 是指通过有限次基本运算(如加减乘除、开方、对数、指数运算等)即可明确表达的解。这意味着,当我们遇到一个数学问题或模…

[免费]SpringBoot+Vue景区订票(购票)系统【论文+源码+SQL脚本】

大家好,我是java1234_小锋老师,看到一个不错的SpringBootVue大景区订票(购票)系统,分享下哈。 项目视频演示 【免费】SpringBootVue景区订票(购票)系统 Java毕业设计_哔哩哔哩_bilibili 项目介绍 现代经济快节奏发展以及不断完善升级的信息…

企业网站面临的爬虫攻击及安全防护策略

在当今数字化时代,企业网站不仅是展示企业形象的窗口,更是进行商业活动的重要平台。然而,企业网站在日常运营中面临着多种类型的爬虫攻击,这些攻击不仅会对网站的正常访问造成影响,还可能窃取敏感数据,给企…

#渗透测试#SRC漏洞挖掘#红蓝攻防#黑客工具之XSStrike介绍01

免责声明 本教程仅为合法的教学目的而准备,严禁用于任何形式的违法犯罪活动及其他商业行为,在使用本教程前,您应确保该行为符合当地的法律法规,继续阅读即表示您需自行承担所有操作的后果,如有异议,请立即停…