cs-magic-open / scrapy-spidersLinks
使用Scrapy爬取主流网站的项目集合,持续更新。
☆10Updated 9 months ago
Alternatives and similar repositories for scrapy-spiders
Users that are interested in scrapy-spiders are comparing it to the libraries listed below
Sorting:
- Python爬虫项目集合☆60Updated 6 years ago
- 基于QQ/微信聊天记录的年度报告,支持群聊,单聊。简单安装客户端,就可以方便生成属于自己的、每个群聊的年度报告。☆24Updated 3 years ago
- 高效微信公众号历史文章和阅读数据爬虫powered by scrapy 微信公众号爬虫 微信采集 公众号采集☆67Updated 6 years ago
- 对淘宝(天猫)的评论爬取并进行简单分析☆27Updated 5 years ago
- [2023.05.09]基于selenium的新浪微博关键字搜索结果全自动爬虫,支持自定义搜素关键字、搜索起始时间、爬取起始页数(以实现中断后接上次继续爬取)。爬取内容包括微博账号、发文时间、发送平台、微博内容、转发次数、评论次数、点赞次数、原博地址。☆32Updated last year
- ☆35Updated 4 years ago
- 知网/万方 论文/期刊批量检索下载☆26Updated 7 years ago
- Stick to doing something interesting and valuable.☆97Updated last year
- 基于Python3爬取知乎每日热点、每小时更新一次,并归档☆23Updated 3 months ago
- 公众号批量导出下载:微信公众号文章列表备份,支持导出HTML,PDF格式,包含阅读数/点赞数/在看数/留言数☆56Updated 3 years ago
- 企查查企业分类信息采集☆43Updated 5 years ago
- 不挂科AI后端是一个基于FastAPI框架构建的Web应用程序,旨在为用户提供一系列智能化的服务,包括视频转PPT、PPT转PDF、PDF和PPT内容解析、考试重点大纲生成、出题、思维导图生成等功能。该后端服务使用了多种Python库,如FastAPI、PyPDF2、pyt…☆13Updated 9 months ago
- 微信公众号爬虫,根据指定公众号名称,爬取该公众号所有文章。☆36Updated 3 years ago
- python办公自动化☆20Updated 4 years ago
- 爬取大众点评中11205条厦门美食商铺信息,其中包含店名、人均消费、所属菜系、所属商圈、详细地址、口味评分、环境评分、服务评分信息。☆19Updated 5 years ago
- 怎么快速在小红书上找到性感美女,短视频,文章,爬虫,airtest,python,poco☆23Updated 4 years ago
- Automatically generate popular videos 自动生成热门视频☆46Updated 3 years ago
- Python + Selenium + Chrome 模拟登陆QQ邮箱,批量下载附件,本地重命名☆85Updated last month
- 封装KimiAI的API,快速调用AI回复☆11Updated last year
- Ajax Hook Demo☆30Updated 5 years ago
- 获取知乎、V2EX、微博、贴吧、IT之家、豆瓣、虎扑、天涯、GitHub等网站热门头条的多线程爬虫,使用Flask聚合网站。☆35Updated 2 years ago
- Various app reverse crawler data interfaces. Tiktok, Xiaohongshu, Kwai, JD, Meituan, Hungry, Popular Comments, douyin xiaohongshu kuaisho…☆14Updated 4 months ago
- 使用Selenium对Boss直聘网站进行爬虫,将招聘信息存入MongoDB,并对岗位要求分词生成词云。☆26Updated 4 years ago
- 微信支付、小程序、python、flask☆22Updated last year
- Wendy是一个Python GUI框架,它允许用HTML、CSS、Javascript、Ajax建立一个应用程序的GUI。 它使用CEF嵌入WxPython窗体,通过Flask启动本地服务器来响应GUI请求。 项目GUI默认使用了流行的AdminLTE模板,您可以随意替…☆18Updated 4 years ago
- 小红书相关爬虫☆89Updated 2 years ago
- 各种爬虫:爱企查爬虫,网上114企业信息爬虫,抖音视频爬虫,wipo爬虫, 专利信息爬虫(patentscope)☆76Updated 3 years ago
- FreeProxy: Collecting free proxies from internet.☆109Updated 3 years ago
- http://zxgk.court.gov.cn/zhzxgk/ 失信被执行人查询,被执行人查询,限制消费,终本案件查询,shixin☆14Updated 5 years ago
- ☆29Updated 9 months ago