BetaStreetOmnis / WebExtractoLinks
通用爬虫工具，内嵌了google、bing和duckduckgo的搜索引擎，并可以用过requests、selenium或者palywright来爬取页面信息，并能遍历官网所有有效网页，并利用大模型实现整个网站的内容解析及分析，可以用户自动化获取网站信息，提升信息收集效率。
☆25Updated 4 months ago
Alternatives and similar repositories for WebExtracto
Users that are interested in WebExtracto are comparing it to the libraries listed below
Sorting:
- 思通舆情 是一款开源免费的舆情系统，支持本地化部署一键安装。支持对海量的舆情数据进行交叉分析和深度挖掘,为用户提供全面的舆情数据,专业的舆情分析，快速的舆情处理等服务,提升企业品牌价值和风控能力。 #舆情系统 #舆情监测 #网络舆情 #开源舆情 #免费舆情 #舆情分析☆187Updated 2 weeks ago
- Spiderbuf 是一个专注于 Python 爬虫练习的网站。提供丰富的爬虫教程、爬虫案例解析和爬虫练习题。Python爬虫开发强化练习，在矛与盾的攻防中不断提高技术水平，通过大量的爬虫实战掌握常见的爬虫与反爬套路。 引导式爬虫案例 + 免费爬虫视频教程，以闯关的形式挑…☆119Updated 3 weeks ago
- 一款利用爬虫技术实现前端JS加密自动化绕过的爆破登陆渗透测试工具☆348Updated 7 months ago
- 思通舆情 是一款开源免费的舆情系统，支持本地化部署。支持对海量的舆情数据进行多维交叉分析和深度挖掘,为用户户提供全面的舆情数据,专业的舆情分析。☆598Updated 2 years ago
- 一个智能的Twitter(X)推文监控系统，结合AI技术自动翻译和生成中文摘要及AI分析，支持钉钉机器人推送，让您及时获取关注领域的最新动态。☆80Updated 3 months ago
- AGI拓展工具，支持AI搜索&爬虫&数据清洗，开箱即用。tavily、天工、百度百科、百家号、360百科、头条、微信公众号、搜狐百科、腾讯新闻、网易新闻、马蜂窝、小红书☆163Updated 7 months ago
- Python网络爬虫、文件处理、网络编程、数学 基础、英语学习、形式化、云原生、数据分析、程序分析、人工智能、网站开发、设计模式、编程哲学、网络安全、少儿教育、数学建模、量化金融、艺术作图、游戏设计、AIGC、App自动化测试、CUDA编程，自动化和智能化的方方面面实战学习笔…☆36Updated last year
- 🤖 扣子智能体对接微信 - WeChat Integration with Coze AI 🤖☆36Updated 11 months ago
- 获取微信账号信息(昵称/账号/手机/邮箱/数据库密钥/wxid)；PC微信数据库读取、解密脚本；聊天记录查看工具；聊天记录导出为html(包含语音图片)。支持多账户信息获取，支持所有微信版本。☆23Updated last year
- 抖音的评论以及二级评论获取☆152Updated 9 months ago
- DocuGen = 你的知识库 + AI大模型 = AI自动生成专业文档☆19Updated 4 months ago
- 基于Whisper、deepseek的音视频转写+总结工具☆22Updated 8 months ago
- 星球伴侣（无限下载版） - 知识星球助手☆245Updated 3 years ago
- 私域宝RPA，是一个兼顾养号和获客为一体的自动化机器人软件，一个软件集合小红书，快手，抖音，微信视频号四大流量平台，包含十大功能截流获客打粉功能。☆105Updated 3 months ago
- 一个基于PC版的微信机器人，采用hook的形式进行消息拦截，内存信息读取的形式，实现安全工具，安全资讯，安全客，freebuf等安全论坛自动推送以及每日早报，晚报和娱乐功能，并且还加入当前最火的openai对话功能☆235Updated last year
- ☆199Updated this week
- AiScan-N 来了！这是一款基于人工智能的Ai全自动化渗透测试工具，专为企业和个人用户打造，尤其适合初学者（小白）快速上手使用，让你轻松迈入智能安全攻防时代！适用场景 ：如（红队演练、CTF比赛、Web应用渗透测试、内网横向移动、密码破解与暴力攻击、流量分析与威胁检测、…☆149Updated 2 weeks ago
- 一款红 队在信息收集时规避IP封禁的傻瓜式一键代理池，通过大量代理节点轮询的代理池工具☆216Updated last year
- ☆39Updated 10 months ago
- 文字自动生成视频 - 文字生成视频的AI工具软件汇总☆12Updated 7 months ago
- 一个基于 AI 的自动化标书生成工具，作者古德白。一次可以生成20万字的专业标书技术方案。已支持DeepSeek接入，开源免费使用。已打包好exe可执行文件，欢迎下载使用。☆63Updated 8 months ago
- MCP for Security: A collection of Model Context Protocol servers for popular security tools like SQLMap, FFUF, NMAP, Masscan and more. In…☆18Updated 7 months ago
- AI绘画提示词生成器，AI绘画咒语生成，中文提示词工具，AI绘画助手，设计师AI工具，提示词优化器，AI作画提示词，智能提示词生成，提示词模板库，AI绘画教程，设计师工具，创作助手，提示词转换，AI艺术创作，新媒体配图工具，电商主图生成，商业设计工具，插画生成器，概念设计工…☆45Updated 3 months ago
- 在原DatalinkX项目基础上进行了扩展，Flink+大模型（DeepSeek）智能数据中台;☆38Updated 3 months ago
- Plug-and-play Proxy IP Pool with No Environmental Dependencies 无环境依赖开箱即用的代理IP池☆55Updated this week
- 爬取知识星球内容，并制作成PDF电子书。☆81Updated last year
- AI 驱动的流程图生成☆33Updated 3 weeks ago
- Docker一键部署Markdown-Nice，一款支持适配和主题设计的微信公众号Markdown编辑器☆21Updated 9 months ago
- ☆40Updated 8 months ago
- 收集一些红队 Dify Workflow。☆33Updated 8 months ago