Alternatives and similar repositories for weibo_spider-scrapy

Users that are interested in weibo_spider-scrapy are comparing it to the libraries listed below

• gonaxx / weiboSpider
  [2023.05.09]基于selenium的新浪微博关键字搜索结果全自动爬虫，支持自定义搜素关键字、搜索起始时间、爬取起始页数（以实现中断后接上次继续爬取）。爬取内容包括微博账号、发文时间、发送平台、微博内容、转发次数、评论次数、点赞次数、原博地址。
  ☆31Updated 2 years ago
• datugou / spiders
  各种爬虫：爱企查爬虫，网上114企业信息爬虫，抖音视频爬虫，wipo爬虫， 专利信息爬虫（patentscope）
  ☆77Updated 4 years ago
• OrangeySeven / RedbookSpider
  小红书笔记爬虫
  ☆158Updated 4 years ago
• ChangxingJiang / CxSpider
  长行的爬虫集合：微博、Twitter、玩加、知网、虎牙、斗鱼、B站、WeGame、猫眼、豆瓣、安居客、居理新房
  ☆375Updated 4 years ago
• CharesFang / WeiboSpider
  微博爬虫，一个基于Scrapy框架的轻量微博爬虫，Sina Weibo Spider
  ☆139Updated 2 years ago
• LLLzasd / python_spider
  一些 Python 爬虫练习：bilibili用户信息爬取、下载工具、房天下新房二手房redis分布式爬虫、简书全站文章爬取、观察者网站首页新闻爬取、淘宝模拟登陆、淘宝搜索商品信息爬取及可视化展示、知乎问题回答信息爬取\抖音无水印视频下载
  ☆145Updated last year
• zqtz / ecommerce
  爬虫电商项目:用scrapy分布式爬虫框架爬取当当商品信息,用selenium模拟登录淘宝和京东收集商品信息
  ☆13Updated 3 years ago
• XWang20 / WeiboCrawler
  无cookie版微博爬虫，可以连续爬取一个或多个新浪微博用户信息、用户微博及其微博评论转发。
  ☆164Updated 3 years ago
• blackAndrechen / taobao_crawled
  淘宝爬虫命令行版，指定爬取淘宝商品和评论，利用selenium爬取商品信息，requests爬取评论信息。
  ☆96Updated 5 years ago
• langgithub / yuqing_system
  线下爬虫设计 舆情新闻系统 LDA主题分类 关键字提取 实现一个文本分类器
  ☆15Updated 6 years ago
• naiveliberty / DaZhongDianPing
  大众点评(商家信息、评论)爬取
  ☆66Updated 2 years ago
• LMFrank / CrawlerProject
  爬虫项目：链家网（普通/scrapy）、虎扑、维基百科、百度地图api、房天下（分布式爬虫）、微信公众号（代理池爬取）
  ☆212Updated 3 years ago
• striver-ing / distributed-spider
  通用新闻类网站分布式爬虫
  ☆79Updated 7 years ago
• F-debug / NewsSpider
  该项目是基于Scrapy框架的Python新闻爬虫，能够爬取网易，搜狐，凤凰和澎湃网站上的新闻，将标题，内容，评论，时间等内容整理并保存到本地
  ☆39Updated 6 years ago
• cyhleo / JinRiTouTiaoNews
  scrapy+pyppeteer，爬取今日头条中新闻及热门评论信息。
  ☆12Updated 5 years ago
• rio26 / weibo-comments-word-cloud
  微博评论爬虫+评论html tag清洗+中文词云生成
  ☆30Updated 7 years ago
• Python3Spiders / AllNewsSpider
  澎湃新闻，新浪新闻，腾讯新闻，搜狐新闻，新闻联播，泰晤士报，纽约时报，BBCNews，旨在爬取所有新闻门户网站的新闻，禁止将所得数据商用！
  ☆430Updated 3 years ago
• BATFOR / RecruitDataVsible
  爬取智联招聘网数据，并对其进行招聘数据可视化，爬虫，Data visualization，Django2，echarts
  ☆138Updated 2 years ago
• Northxw / Meituan
  美团（美食）店铺信息爬虫
  ☆118Updated 6 years ago
• charstal / xhs_simple_crawler
  一个简单的小红书爬虫实现
  ☆127Updated 6 years ago
• LumingMelody / red_book_spider
  小红书相关爬虫
  ☆89Updated 3 years ago
• gyqlr / weibo_spider
  微博爬虫，爬去微博语料，情感分析，user-agent池，充足IP，scrapy，mongodb
  ☆16Updated 7 years ago
• zhaowei1869 / python_spider
  爬虫学习。实战：微博各种类型爬虫，唯品会商品，淘宝商品等
  ☆81Updated last year
• zhaoboy9692 / qccspider
  企查查企业信息爬虫 ，企查查app每日新增企业抓取,可以进行每日的增量抓取、企业数据、工商数据等等。
  ☆332Updated 3 years ago
• fredfeng0326 / Scraping
  京东，淘宝，苏宁，亚马逊爬虫抓取商品信息并分析数据
  ☆191Updated 3 years ago
• CarryChang / Real_Time_DataMining_Software
  携程/榛果民宿实时评论挖掘软件，包含数据的实时采集/数据清洗/结构化保存/ UGC 数据主题提取/情感分析/后结构化可视化等技术的综合性演示 Demo。基于在线民宿 UGC 数据的意见挖掘项目，包含数据挖掘和 NLP 相关的处理，负责数据采集、主题抽取、情感分析等任务。主要…
  ☆81Updated 4 years ago
• czy1999 / weibo-topic-spider
  微博超级话题爬虫，微博词频统计+情感分析+简单分类，新增肺炎超话爬取数据
  ☆298Updated 5 years ago
• hellokuls / python-course
  最快的Python入门教程，包含Python基础、爬虫、Django、Flask等内容。
  ☆195Updated 4 years ago
• SZFsir / pddSpider
  拼多多爬虫，爬取所有商品、评论等信息
  ☆295Updated 3 years ago
• Northxw / Dianping
  大众点评店铺信息爬虫
  ☆285Updated 3 years ago