BetaStreetOmnis / WebExtractoLinks
通用爬虫工具,内嵌了google、bing和duckduckgo的搜索引擎,并可以用过requests、selenium或者palywright来爬取页面信息,并能遍历官网所有有效网页,并利用大模型实现整个网站的内容解析及分析,可以用户自动化获取网站信息,提升信息收集效率。
☆26Updated 5 months ago
Alternatives and similar repositories for WebExtracto
Users that are interested in WebExtracto are comparing it to the libraries listed below
Sorting:
- 思通舆情 是一款开源免费的舆情系统,支持本地化部署。支持对海量的舆情数据进行多维交叉分析和深度挖掘,为用户户提供全面的舆情数据,专业的舆情分析。☆601Updated 3 years ago
- AGI拓展工具,支持AI搜索&爬虫&数据清洗,开箱即用。tavily、天工、百度百科、百家号、360百科、头条、微信公众号、搜狐百科、腾讯新闻、网易新闻、马蜂窝、小红书☆166Updated 7 months ago
- 思通舆情 是一款开源免费的舆情系统,支持本地化部署一键安装。支持对海量的舆情数据进行交叉分析和深度挖掘,为用户提供全面的舆情数据,专业的舆情分析,快速的舆情处理等服务,提升企业品牌价值和风控能力。 #舆情系统 #舆情监测 #网络舆情 #开源舆情 #免费舆情 #舆情分析☆207Updated last month
- 把微信的文件传输助手改造成为个人智能碎片信息收集箱,AI分类,AI总结☆11Updated last year
- Django使用python-docx-template,并基于word模板来对模板填充数据及图表,自动化生成word报告文档。☆28Updated 5 years ago
- DocuGen = 你的知识库 + AI大模型 = AI自动生成专业文档☆20Updated 2 weeks ago
- ☆27Updated last year
- 一个智能的Twitter(X)推文监控系统,结合AI技术自动翻译和生成中文摘要及AI分析,支持钉钉机器人推送,让您及时获取关注领域的最新动态。☆79Updated 4 months ago
- 一款基于Python和PyQt6开发的智能视频混剪工具,专为短剧创作者设计。利用多种AI大模型实现自动字幕识别、智能混剪、特效添加等功能,并与剪映等主流剪辑软件深度集成。☆187Updated 3 weeks ago
- Spiderbuf 是一个专注于 Python 爬虫练习的网站。提供丰富的爬虫教程、爬虫案例解析和爬虫练习题。Python爬虫开发强化练习,在矛与盾的攻防中不断提高技术水平,通过大量的爬虫实战掌握常见的爬虫与反爬套路。 引导式爬虫案例 + 免费爬虫视频教程,以闯关的形式挑…☆119Updated last month
- ICP_FLASK_YOLOY11是一个基于深度学习的目标检测和图像比对系统,结合了YOLOv11(YOLO系列目标检测)和Siamese网络(图像相似度比对)技术,开发的关于 ICP 域名查询的api接口。。该项目通过深度学习识别验证码,可以自完成验证码的绕过,从而查询域…☆16Updated 11 months ago
- 自动生成短视频,文章自动成片,多模态混剪,数字人,声音克隆☆13Updated last year
- PyWxDump 的超级简化版☆157Updated last year
- 一款利用爬虫技术实现前端JS加密自动化绕过的爆破登陆渗透测试工具☆353Updated 2 weeks ago
- 1.自动注册(自己用/做号商/养满月白号) 2.全自动上传视频(无需手机 、自动发布全面提升效率) 3.自动读取粉丝数/播放量(500个号数据统计也一目了然) 4.自定义视频文案(多账号@大号导流) 5.自动批量关注(自己刷千粉号) 6.自动修改头像、ID、签名区文案(矩阵引…☆15Updated 2 years ago
- 可视化知识星球爬虫与文件下载工具,支持话题采集、评论获取、文件批量下载等功能☆83Updated last week
- 一个基于PC版的微信机器人,采用hook的形式进行消息拦截,内存信息读取的形式,实现安全工具,安全资讯,安全客,freebuf等安全论坛自动推送以及每日早报,晚报和娱乐功能,并且还加入当前最火的openai对话功能☆235Updated last year
- 飞书机器人,定时推送安全咨询!☆12Updated 2 years ago
- 抖音的评论以及二级评论获取☆161Updated 10 months ago
- 企业工商信息接口(包含天眼查、企查查、爱企查、国家企业公示系统平台、快准)☆112Updated 3 years ago
- MCP for Security: A collection of Model Context Protocol servers for popular security tools like SQLMap, FFUF, NMAP, Masscan and more. In…☆19Updated 8 months ago
- 降AIGC率,降低知网、维普、格子达平台的AIGC检测率,降知网AI,降维普AI,降格子达AI。☆56Updated 3 weeks ago
- chataix智能问答系统,汇聚:智能问答,AI绘图,思维导图,白板,各种智能小应用一体化的AI系统☆72Updated 2 years ago
- Miniluma是一个强大的智能代理框架,支持多种LLM提供商(包括DeepSeek和OpenAI),能够通过工具增强、多代理协作和异步处理实现复杂任务的自动化处理。☆23Updated 9 months ago
- Python网络爬虫、文件处理、网络编程、数学基础、英语学习、形式化、云原生、数据分析、程序分析、人工智能、网站开发、设计模式、编程哲学、网络安全、少儿教育、数学建模、量化金融、艺术作图、游戏设计、AIGC、App自动化测试、CUDA编程,自动化和智能化的方方面面实战学习笔…☆36Updated last year
- 收集一些红队 Dify Workflow。☆35Updated 9 months ago
- 微信机器人,ChatGPT机器人,AI智能助手,AI绘画机器人,Midjourney绘画,视频去水印,抖音快手视频无水印下载,群聊管理机器人,智能客服机器人,自动回复机器人,优惠券查询机器人,拼多多优惠券机器人,美团饿了么外卖红包,智能文档对话,全网热点资讯,全网热榜,私域…☆57Updated 4 months ago
- 关于 A visual no-code/code-free web crawler/spider易采集:一个可视化浏览器自动化测试/数据采集/爬虫软件,可以无代码图形化的设计和执行爬虫任务。别名:ServiceWrapper面向Web应用的智能化服务封装系统。☆53Updated this week
- 一个Python编写的脚本运行框架,支持扩展模块。开发远程控制、远程桌面、反弹shell、远控等需求,请选择IceShell☆37Updated last year
- 用来管理Dify多个用户空间和用户☆18Updated 10 months ago