cs-magic-open / scrapy-spidersLinks
使用Scrapy爬取主流网站的项目集合，持续更新。
☆10Updated last year
Alternatives and similar repositories for scrapy-spiders
Users that are interested in scrapy-spiders are comparing it to the libraries listed below
Sorting:
- 更新给出selenium库的爬虫，效率很高，且能直接用。 python，大众点评的爬虫，突破反爬，获取关于任意店铺的评论和评分之类的。给出破解css加密的逻辑☆41Updated 5 years ago
- 高效微信公众号历史文章和阅读数据爬虫powered by scrapy 微信公众号爬虫 微信采集 公众号采集☆70Updated 6 years ago
- Ajax Hook Demo☆31Updated 5 years ago
- Python爬虫项目集合☆61Updated 7 years ago
- Wendy是一个Python GUI框架，它允许用HTML、CSS、Javascript、Ajax建立一个应用程序的GUI。 它使用CEF嵌入WxPython窗体，通过Flask启动本地服务器来响应GUI请求。 项目GUI默认使用了流行的AdminLTE模板，您可以随意替…☆18Updated 4 years ago
- 对淘宝（天猫）的评论爬取并进行简单分析☆28Updated 5 years ago
- 使用Selenium对Boss直聘网站进行爬虫，将招聘信息存入MongoDB，并对岗位要求分词生成词云。☆26Updated 4 years ago
- [2023.05.09]基于selenium的新浪微博关键字搜索结果全自动爬虫，支持自定义搜素关键字、搜索起始时间、爬取起始页数（以实现中断后接上次继续爬取）。爬取内容包括微博账号、发文时间、发送平台、微博内容、转发次数、评论次数、点赞次数、原博地址。☆31Updated 2 years ago
- Stick to doing something interesting and valuable.☆97Updated 2 years ago
- Various app reverse crawler data interfaces. Tiktok, Xiaohongshu, Kwai, JD, Meituan, Hungry, Popular Comments, douyin xiaohongshu kuaisho…☆15Updated 9 months ago
- 基于Python3爬取知乎每日热点、每小时更新一次，并归档☆22Updated 9 months ago
- ☆32Updated last year
- 各种爬虫：爱企查爬虫，网上114企业信息爬虫，抖音视频爬虫，wipo爬虫， 专利信息爬虫（patentscope）☆78Updated 4 years ago
- 微信支付、小程序、python、flask☆22Updated 2 years ago
- 企查查企业分类信息采集☆43Updated 5 years ago
- http://zxgk.court.gov.cn/zhzxgk/ 失信被执行人查询，被执行人查询，限制消费，终本案件查询，shixin☆15Updated 5 years ago
- 爬取智联招聘网数据，并对其进行招聘数据可视化，爬虫，Data visualization，Django2，echarts☆137Updated 2 years ago
- CDUTCM；中药识诊--基于小程序的中药材识别软件☆37Updated 6 years ago
- 最快的Python入门教程，包含Python基础、爬虫 、Django、Flask等内容。☆195Updated 4 years ago
- ☆39Updated 4 years ago
- Python调用ffmpeg开源视频处理库，来实现视频批量的处理：水印、背景音乐、剪辑、合并、帧率、速率、分辨率等操作☆118Updated 5 years ago
- 记录知乎热搜、热门话题、热门视频，每小时更新，按天归档。☆75Updated this week
- 一个简单的小红书爬虫实现☆128Updated 6 years ago
- Python爬虫集合，内含各大网站爬虫，应有 尽有，爬虫爱好者不容错过！！！☆85Updated 4 years ago
- 不挂科AI后端是一个基于FastAPI框架构建的Web应用程序，旨在为用户提供一系列智能化的服务，包括视频转PPT、PPT转PDF、PDF和PPT内容解析、考试重点大纲生成、出题、思维导图生成等功能。该后端服务使用了多种Python库，如FastAPI、PyPDF2、pyt…☆15Updated last year
- a collection of awesome Jupyter Notebook, Hub and Lab projects (extensions, kernels, tools). 热门实用的Jupyter Notebook、Hub和Lab项目（扩展、内核、工具等）集合☆98Updated last year
- 记录 微博热搜、热门话题，每小时更新，按天归档。☆64Updated this week
- 基于QQ/微信聊天记录的年度报告，支持群聊，单聊。简单安装客户端，就可以方便生成属于自己的、每个群聊的年度报告。☆26Updated 4 years ago
- ScrapingOutsourcing专注分享爬虫代码 尽量每周更新一个☆176Updated 5 years ago
- 爬取boss直聘招聘信息，爬取boos职位详情、工资、公司地点等信息☆20Updated 5 years ago