zhaoweilong007 / zhihuCrawlerLinks
基于webMagic爬取知乎数据，并按天定时归档
☆45Updated 8 months ago
Alternatives and similar repositories for zhihuCrawler
Users that are interested in zhihuCrawler are comparing it to the libraries listed below
Sorting:
- 微信公众号爬虫☆168Updated last year
- 获取微博、知乎、百度、抖音等30个平台的热搜，按天归档。☆339Updated last week
- 记录知乎热搜、热门话题、热门视频，每小时更新，按天归档。☆75Updated this week
- 获取知乎、V2EX、微博、贴吧、IT之家、豆瓣、虎扑、天涯、GitHub等网站热门头条的多线程爬虫，使用Flask聚合网站。☆34Updated 2 years ago
- 基于python爬虫+Github Action实现每天早上自动发送科技新闻到邮箱（Using Python web scraping and Github Action to automatically send tech news to email every morn…☆79Updated this week
- 基于Python3爬取知乎每日热点、每小时更新一次，并归档☆22Updated 8 months ago
- 💻桌面字幕——实时语音翻译📢 实时语音识别的效果不错，可以用于在线小语种教学视频。☆64Updated 2 years ago
- 今日头条热搜,知乎热门视频，知乎热搜榜，知乎热门话题，微博热搜榜；记录从 2020-11-29 日开始的热搜。每小时抓取一次数据，按天归档。☆453Updated 9 months ago
- 小红书关键词笔记搜索Python 爬虫 （csv保存）☆75Updated 2 years ago
- 视频转文字☆85Updated 2 years ago
- 爬取知乎个人主页的想法、文篇和回答☆62Updated 8 months ago
- 谷歌浏览器插件: 将掘金、知乎、思否、简书、博客园、微信公众号、开源中国、CSDN的文章转为markdown文档并下载☆120Updated 3 months ago
- 一个新闻政策类爬虫项目，实现上万网站的实时监控、爬取、过滤、存储，具有高可用性和可扩展性。☆39Updated 3 years ago
- 记录微博热搜、热门话题，每小时更新，按天归档。☆64Updated this week
- 知网论文数据爬虫☆61Updated 2 years ago
- 爬取博客园文章/批量导出微信公众号文章/导出知识星球精华主题☆72Updated 2 years ago
- 记录今日头条热门搜索，每小时更新，按天归档。☆60Updated this week
- 一键解析Markdown 目前支持: 微信公众号,知乎,知乎专栏,简书,知否(SegmentFault),掘金,CSDN,V2EX,博客园 , 语雀☆248Updated 2 years ago
- justoneapi数据接口服务。提供：淘宝、小红书、拼多多、同程旅行、京东外卖、抖音（电商）、美团、抖音（视频）、快手、蒲公 英、星图、微信公众号、大众点评、哔哩哔哩、知乎、微博、贝壳、Bigo、Temu、Lazada、Shopee、SHEIN、百度指数、携程、Boss直聘…☆348Updated last week
- rm☆208Updated 4 months ago
- 爬虫管理系统，支持集群，弹性伸缩。支持运行feapder、scrapy、selenium、playwright等各种框架及脚本☆129Updated last year
- 爬虫学习。实战：微博各种类型爬虫，唯品会商品，淘宝商品等☆81Updated 2 years ago
- PDF 批量翻译，翻译后的PDF格式基本不变。导出PDF和Docx。优化并精简了来自于QPromise 的 EasyTrans。优化了通过百度翻译API稳定进行长翻译！☆143Updated last year
- 狠心开源企业级舆情新闻爬虫项目：支持任意数量爬虫一键运行、爬虫定时任务、爬虫批量删除；爬虫一键部署；爬虫监控可视化; 配置集群爬虫分配策略；👉 现成的docker一键部署文档已为大家踩坑☆658Updated 2 years ago
- ☆73Updated last year
- 记录 36Kr、bilibili、GitHub、抖音、掘金、微信读书平台从 2023-10-25 日至今的热点榜。每小时抓取一次数据，按天归档。非当年数据归档到 Releases 中☆301Updated this week
- 知识星球精华整理☆27Updated 6 years ago
- AGI拓展工具，支持AI搜索&爬虫&数据清洗，开箱即用。tavily、天工、百度百科、百家号、360百科、头条、微信公众号、搜狐百科、腾讯新闻、网易新闻、马蜂窝、小红书☆168Updated 8 months ago
- 📖 根据 RSS 订阅源定时抓取前沿 AIGC / GPT / LLM 相关文章，并实时更新至对应网站。来源：机器之心 / 量子位 / 新智元 / 腾讯AI实验室 / PaperWeekly / 我爱自然语言处理 / AIGC研修社 / ChatGPT☆152Updated last year
- ivideo 是一款轻量、强大、好用的视频处理软件。可以满足普通人一般的视频处理需求：压缩视频、转码视频、倒放视频、合并片段、根据字幕裁切片段、自动配字幕、自动剪辑……☆122Updated 3 years ago