Alternatives and similar repositories for weibo_spider-scrapy

Users that are interested in weibo_spider-scrapy are comparing it to the libraries listed below

• gonaxx / weiboSpider
  [2023.05.09]基于selenium的新浪微博关键字搜索结果全自动爬虫，支持自定义搜素关键字、搜索起始时间、爬取起始页数（以实现中断后接上次继续爬取）。爬取内容包括微博账号、发文时间、发送平台、微博内容、转发次数、评论次数、点赞次数、原博地址。
  ☆31Updated 2 years ago
• OrangeySeven / RedbookSpider
  小红书笔记爬虫
  ☆156Updated 3 years ago
• F-debug / NewsSpider
  该项目是基于Scrapy框架的Python新闻爬虫，能够爬取网易，搜狐，凤凰和澎湃网站上的新闻，将标题，内容，评论，时间等内容整理并保存到本地
  ☆39Updated 6 years ago
• BATFOR / RecruitDataVsible
  爬取智联招聘网数据，并对其进行招聘数据可视化，爬虫，Data visualization，Django2，echarts
  ☆136Updated 2 years ago
• datugou / spiders
  各种爬虫：爱企查爬虫，网上114企业信息爬虫，抖音视频爬虫，wipo爬虫， 专利信息爬虫（patentscope）
  ☆76Updated 4 years ago
• zqtz / ecommerce
  爬虫电商项目:用scrapy分布式爬虫框架爬取当当商品信息,用selenium模拟登录淘宝和京东收集商品信息
  ☆13Updated 3 years ago
• Python3Spiders / AllNewsSpider
  澎湃新闻，新浪新闻，腾讯新闻，搜狐新闻，新闻联播，泰晤士报，纽约时报，BBCNews，旨在爬取所有新闻门户网站的新闻，禁止将所得数据商用！
  ☆414Updated 3 years ago
• XWang20 / WeiboCrawler
  无cookie版微博爬虫，可以连续爬取一个或多个新浪微博用户信息、用户微博及其微博评论转发。
  ☆161Updated 3 years ago
• CharesFang / WeiboSpider
  微博爬虫，一个基于Scrapy框架的轻量微博爬虫，Sina Weibo Spider
  ☆137Updated 2 years ago
• LLLzasd / python_spider
  一些 Python 爬虫练习：bilibili用户信息爬取、下载工具、房天下新房二手房redis分布式爬虫、简书全站文章爬取、观察者网站首页新闻爬取、淘宝模拟登陆、淘宝搜索商品信息爬取及可视化展示、知乎问题回答信息爬取\抖音无水印视频下载
  ☆145Updated 10 months ago
• ChangxingJiang / CxSpider
  长行的爬虫集合：微博、Twitter、玩加、知网、虎牙、斗鱼、B站、WeGame、猫眼、豆瓣、安居客、居理新房
  ☆374Updated 4 years ago
• striver-ing / distributed-spider
  通用新闻类网站分布式爬虫
  ☆79Updated 7 years ago
• Micro-sheep / Python-Bilibili
  B站弹幕、评论爬虫+词云生成
  ☆50Updated 5 years ago
• zhaowei1869 / python_spider
  爬虫学习。实战：微博各种类型爬虫，唯品会商品，淘宝商品等
  ☆82Updated last year
• czy1999 / weibo-topic-spider
  微博超级话题爬虫，微博词频统计+情感分析+简单分类，新增肺炎超话爬取数据
  ☆293Updated 5 years ago
• LMFrank / CrawlerProject
  爬虫项目：链家网（普通/scrapy）、虎扑、维基百科、百度地图api、房天下（分布式爬虫）、微信公众号（代理池爬取）
  ☆212Updated 2 years ago
• qinyuenlp / WeiboSpider
  基于selenium的轻量级新浪微博爬虫，可实现：1.后台自动爬取微博搜索结果/2.按时间段爬取搜索结果/3.爬取用户基本信息
  ☆51Updated 5 years ago
• cyhleo / JinRiTouTiaoNews
  scrapy+pyppeteer，爬取今日头条中新闻及热门评论信息。
  ☆12Updated 5 years ago
• charstal / xhs_simple_crawler
  一个简单的小红书爬虫实现
  ☆127Updated 6 years ago
• timmmGZ / Weibo-sentiment-analysis-and-crawler
  情感分析，微博情感分析，微博水军检测，水军检测，营销粉检测，僵尸粉检测，微博爬虫
  ☆74Updated 4 years ago
• langgithub / yuqing_system
  线下爬虫设计 舆情新闻系统 LDA主题分类 关键字提取 实现一个文本分类器
  ☆15Updated 6 years ago
• dataabc / weibo-follow
  爬取关注列表中微博账号的微博
  ☆195Updated 3 weeks ago
• gyqlr / weibo_spider
  微博爬虫，爬去微博语料，情感分析，user-agent池，充足IP，scrapy，mongodb
  ☆16Updated 7 years ago
• blackAndrechen / taobao_crawled
  淘宝爬虫命令行版，指定爬取淘宝商品和评论，利用selenium爬取商品信息，requests爬取评论信息。
  ☆96Updated 5 years ago
• zhaoboy9692 / qccspider
  企查查企业信息爬虫 ，企查查app每日新增企业抓取,可以进行每日的增量抓取、企业数据、工商数据等等。
  ☆332Updated 2 years ago
• fredfeng0326 / Scraping
  京东，淘宝，苏宁，亚马逊爬虫抓取商品信息并分析数据
  ☆187Updated 2 years ago
• Davidchent / David
  知网爬虫cnkispider，输入关键字爬取知网检索数据
  ☆34Updated 7 years ago
• PFFFei / rent
  基于Scrapy和Django的二手房爬虫及可视化
  ☆10Updated 3 years ago
• rio26 / weibo-comments-word-cloud
  微博评论爬虫+评论html tag清洗+中文词云生成
  ☆28Updated 7 years ago
• casual-silva / NewsCrawl
  狠心开源企业级舆情新闻爬虫项目：支持任意数量爬虫一键运行、爬虫定时任务、爬虫批量删除；爬虫一键部署；爬虫监控可视化; 配置集群爬虫分配策略；👉 现成的docker一键部署文档已为大家踩坑
  ☆647Updated last year