BetaStreetOmnis / WebExtractoLinks
通用爬虫工具，内嵌了google、bing和duckduckgo的搜索引擎，并可以用过requests、selenium或者palywright来爬取页面信息，并能遍历官网所有有效网页，并利用大模型实现整个网站的内容解析及分析，可以用户自动化获取网站信息，提升信息收集效率。
☆30Updated 5 months ago
Alternatives and similar repositories for WebExtracto
Users that are interested in WebExtracto are comparing it to the libraries listed below
Sorting:
- 一款利用爬虫技术实现前端JS加密自动化绕过的爆破登陆渗透测试工具☆354Updated last month
- 思通舆情 是一款开源免费的舆情系统，支持本地化部署一键安装。支持对海量的舆情数据进行交叉分析和深度挖掘,为用户提供全面的舆情数据,专业的舆情分析，快速的舆情处理等服务,提升企业品牌价值和风控能力。 #舆情系统 #舆情监测 #网络舆情 #开源舆情 #免费舆情 #舆情分析☆225Updated 2 months ago
- 思通舆情 是一款开源免费的舆情系统，支持本地化部署。支持对海量的舆情数据进行多维交叉分析和深度挖掘,为用户户提供全面的舆情数据,专业的舆情分析。☆606Updated 3 years ago
- Spiderbuf 是一个专注于 Python 爬虫练习的网站。提供丰富的爬虫教程、爬虫案例解析和爬虫练习题。Python爬虫开发强化练习，在矛与盾的攻防中不断提高技术水平，通过 大量的爬虫实战掌握常见的爬虫与反爬套路。 引导式爬虫案例 + 免费爬虫视频教程，以闯关的形式挑…☆120Updated 2 months ago
- AGI拓展工具，支持AI搜索&爬虫&数据清洗，开箱即用。tavily、天工、百度百科、百家号、360百科、头条、微信公众号、搜狐百科、腾讯新闻、网易新闻、马蜂窝、小红书☆168Updated 8 months ago
- DocuGen = 你的知识库 + AI大模型 = AI自动生成专业文档☆21Updated this week
- 一个智能的Twitter(X)推文监控系统，结合AI技术自动翻译和生成中文摘要及AI分析，支持钉钉机器人推送，让您及时获取关注领域的最新动态。☆82Updated 5 months ago
- Use the knowledge graph generated by GraphRAG as the external knowledge base for the Dify workflow.☆20Updated 7 months ago
- 把微信的文件传输助手改造成为个人智能碎片信息收集箱，AI分类，AI总结☆12Updated 2 years ago
- 🤖 扣子智能体对接微信 - WeChat Integration with Coze AI 🤖☆37Updated last year
- ☆27Updated last year
- 基于Whisper、deepseek的音视频转写+总结工具☆22Updated 9 months ago
- 收集一些红队 Dify Workflow。☆35Updated 10 months ago
- AiScan-N 来了！这是一款基于人工智能驱动的Ai自动化网络安全（运维）工具，专注于网络安全评估、漏洞扫描、运维、应急响应、渗透测试自动化，Ai大模型工具集【CLI Agent】 ，Ai驱动的安全检测技术，提升安全测试（运维）效率，专为企业和个人用户打造，尤其适合初学者…☆202Updated last week
- AI视频, AI动漫,AI 短剧,AI漫剧自动化生成工具☆198Updated 2 weeks ago
- 首个由DeepSeek独立开发的AI网络安全工具箱☆646Updated 10 months ago
- 自动生成短视频，文章自动成片，多模态混剪，数字人，声音克隆☆13Updated last year
- 自媒体综合运营平台☆44Updated 3 weeks ago
- 星尘宝库旨在免费为大家提供专业安全趋势研究白皮书、大咖技术分享PPT、行业调研报告、行业技术方案等内容…☆140Updated 9 months ago
- 更适合中国宝宝体质的GPTHack，免API使用GPT，目前支持3.5☆16Updated 2 years ago
- 可以在windows任何地方调用AI进行输入☆88Updated 8 months ago
- 一款红队在信息收集时规避IP封禁的傻瓜式一键代理池，通过大量代理节点轮询的代理池工具☆217Updated last year
- FlySecAgent 是一款先进的网络安全智能助手，构建于强大的大语言模型和灵活的 MCP (Model-Controller-Plugin) 架构之上。它旨在通过自然语言交互，为网络安全专业人员和爱好者提供全面的支持。FlySecAgent 不仅能够执行渗透测试任务、查…☆111Updated 8 months ago
- 1.自动注册（自己用/做号商/养满月白号） 2.全自动上传视频（无需手机、自动发布全面提升效率） 3.自动读取粉丝数/播放量（500个号数据统计也一目了然） 4.自定义视频文案（多账号@大号导流） 5.自动批量关注（自己刷千粉号） 6.自动修改头像、ID、签名区文案（矩阵引…☆15Updated 2 years ago
- MCP for Security: A collection of Model Context Protocol servers for popular security tools like SQLMap, FFUF, NMAP, Masscan and more. In…☆19Updated 9 months ago
- 抖音视频自动上传工具，基于Playwright实现，支持自动登录、视频上传、定时发布等功能。☆32Updated 5 months ago
- ☆215Updated this week
- 一个基于PC版的微信机器人，采用hook的形式进行消息拦截，内存信息读取的形式，实现安全工具，安全资讯，安全客，freebuf等安全论坛自动推送以及每 日早报，晚报和娱乐功能，并且还加入当前最火的openai对话功能☆235Updated last year
- 私域宝RPA，是一个兼顾养号和获客为一体的自动化机器人软件，一个软件集合小红书，快手，抖音，微信视频号四大流量平台，包含十大功能截流获客打粉功能。☆117Updated 5 months ago
- 原r3x5ur/unveilr项目，小程序反编译工具☆76Updated 8 months ago