文件名称:Web Crawler Security Tool:一个面向信息安全的网络爬虫。-开源
文件大小:9KB
文件格式:GZ
更新时间:2024-06-27 15:38:05
开源软件
最后更新时间为 UTC 2012 年 3 月 26 日 16:25 Web Crawler Security 是一个基于 Python 的自动抓取网站的工具。 它是一个面向渗透测试任务的网络爬虫。 该工具的主要任务是搜索和列出网站中的所有链接(页面和文件)。 爬虫在 v1.0 中被完全重写,带来了很多改进:改进了数据可视化、下载文件的交互选项、提高爬行速度、将找到的文件列表导出到一个单独的文件中(用于爬取一个站点一次,然后下载文件并使用 FOCA 对其进行分析)、生成通用日志格式 (CLF) 的输出日志、管理基本身份验证等等! 许多旧功能已经重新实现,最有趣的是爬虫搜索目录索引的能力。
【文件预览】:
crawler.py