BetaStreetOmnis / WebExtractoLinks
通用爬虫工具,内嵌了google、bing和duckduckgo的搜索引擎,并可以用过requests、selenium或者palywright来爬取页面信息,并能遍历官网所有有效网页,并利用大模型实现整个网站的内容解析及分析,可以用户自动化获取网站信息,提升信息收集效率。
☆22Updated 2 months ago
Alternatives and similar repositories for WebExtracto
Users that are interested in WebExtracto are comparing it to the libraries listed below
Sorting:
- 一款利用爬虫技术实现前端JS加密自动化绕过的爆破登陆渗透测试工具☆341Updated 5 months ago
- ☆192Updated this week
- 思通舆情 是一款开源免费的舆情系统,支持本地化部署。支持对海量的舆情数据进行多维交叉分析和深度挖掘,为用户户提供全面的舆情数据,专业的舆情分析。☆584Updated 2 years ago
- 一个智能的Twitter(X)推文监控系统,结合AI技术自动翻译和生成中文摘要及AI分析,支持钉钉机器人推送,让您及时获取关注领域的最新动态。☆71Updated last month
- 一个轮换代理的图形化代理池程序☆401Updated last month
- FlySecAgent 是一款先进的网络安全智能助手,构建于强大的大语言模型和灵活的 MCP (Model-Controller-Plugin) 架构之上。它旨在通过自然语言交互,为网络安全专业人员和爱好者提供全面的支持。FlySecAgent 不仅能够执行渗透测试任务、查…☆96Updated 5 months ago
- 一款红队在信息收集时规避IP封禁的傻瓜式一键代理池,通过大量代理节点轮询的代理池工具☆214Updated 10 months ago
- 首个由DeepSeek独立开发的AI网络安全工具箱☆631Updated 7 months ago
- API接口管理工具(目前内置微信公众号、微信小程序、企业微信、飞书、钉钉等)☆696Updated last year
- 收集一些红队 Dify Workflow。☆27Updated 6 months ago
- 基于Whisper、deepseek的音视频转写+总结工具☆20Updated 6 months ago
- 角宿武器库官方发布页面☆297Updated 9 months ago
- 更适合中国宝宝体质的GPTHack,免API使用GPT,目前支持3.5☆16Updated last year
- ☆38Updated 8 months ago
- EasyTools 一个简单方便使用的渗透测试工具箱☆153Updated this week
- 星球伴侣(无限下载版) - 知识星球助手☆240Updated 3 years ago
- 网站监测平台。支持分布式监控与测试web项目,拥有接口测试,压力测试,渗透测试,请求调试功能,内置dns查询,证书查询,Whois查询,Ping,扫描等工具☆97Updated 8 months ago
- 自动化漏洞扫描系统,方便安全测试人员在测试过程中,快速对网站进行信息收集、漏洞扫描,系统采用B/S架构,分为源码部署、虚拟机部署、docker部署,项目会持续更新,欢迎在Issues中提出您在使用过程中遇到的问题和需求,如果项目对您有所帮助,欢迎留下宝贵的star,感谢!!…☆238Updated 3 weeks ago
- JackProxy: 一个高性能SOCKS5代理客户端,支持自动代理池管理、负载均衡和连接保持。跨平台 支持(Windows/macOS/Linux),易于配置和使用。☆200Updated 5 months ago
- 漏洞挖掘神器 | 浏览器插件 | 发现页面和JS中的隐藏接口和敏感信息、URL批量打开 & Vulnerability Mining Tool | Browser Plugin | Discover Hidden Interfaces, Sensitive Informat…☆152Updated last month
- 星尘宝库旨在免费为大家提供专业安全趋势研究白皮书、大咖技术分享PPT、行业调研报告、行业技术方案等内容…☆136Updated 5 months ago
- AuditLuma是一个AI+智能体代码审计系统,它利用多个AI代理和先进的技术,包括多代理合作协议(MCP)和Self-RAG(检索增强生成),为代码库提供全面的安全分析,目前已经支持ollama 部署的本地大模型☆121Updated 2 months ago
- ☁️Socks代理池服务端自动化搭建工具☁️☆248Updated last year
- Spiderbuf 是一个专注于 Python 爬虫练习的网站。提供丰富的爬虫教程、爬虫案例解析和爬虫练习题。Python爬虫开发强化练习,在矛与盾的攻防中不断提高技术水平,通过大量的爬虫实战掌握常见的爬虫与反爬套路。 引导式爬虫案例 + 免费爬虫视频教程,以闯关的形式挑…☆112Updated 3 weeks ago
- 二开KillWxapkg,自动化监控实时点击打开的微信小程序进行反编译,辅助小程序渗透测试。 原作者:https://github.com/Ackites/KillWxapkg☆92Updated 8 months ago
- LLM can support pentest, step by step☆127Updated this week
- MCP for Security: A collection of Model Context Protocol servers for popular security tools like SQLMap, FFUF, NMAP, Masscan and more. In…☆19Updated 5 months ago
- Python-django登录接口交互蜜罐☆14Updated last year
- 计算机毕业设计Python+大模型Web漏洞扫描系统 网络安全 信息安全 机器学习 深度学习 大数据毕业设计 数据可视化 Python毕业设计 Python爬虫☆20Updated 11 months ago
- ☆28Updated last year