Alternatives and similar repositories for weibo_spider-scrapy:

Users that are interested in weibo_spider-scrapy are comparing it to the libraries listed below

• gonaxx / weiboSpider
  [2023.05.09]基于selenium的新浪微博关键字搜索结果全自动爬虫，支持自定义搜素关键字、搜索起始时间、爬取起始页数（以实现中断后接上次继续爬取）。爬取内容包括微博账号、发文时间、发送平台、微博内容、转发次数、评论次数、点赞次数、原博地址。
  ☆29Updated last year
• cyhleo / JinRiTouTiaoNews
  scrapy+pyppeteer，爬取今日头条中新闻及热门评论信息。
  ☆12Updated 4 years ago
• Aoshika123 / TaoBao-Reptile
  对淘宝（天猫）的评论爬取并进行简单分析
  ☆27Updated 4 years ago
• F-debug / NewsSpider
  该项目是基于Scrapy框架的Python新闻爬虫，能够爬取网易，搜狐，凤凰和澎湃网站上的新闻，将标题，内容，评论，时间等内容整理并保存到本地
  ☆37Updated 5 years ago
• Davidchent / David
  知网爬虫cnkispider，输入关键字爬取知网检索数据
  ☆33Updated 7 years ago
• MaxwellJack / pinglun_spyder
  关于百度旅游、大众点评、驴妈妈、猫途鹰、携程的评论爬虫
  ☆22Updated 6 years ago
• naiveliberty / DaZhongDianPing
  大众点评(商家信息、评论)爬取
  ☆63Updated last year
• IshtarTang / weibo_spider
  新浪微博爬虫，保存一个用户发过的所有内容，保存包括原链接、正文、评论等（微博换新UI后已无法使用，主页有匹配新UI的项目可以用那个）
  ☆19Updated 3 years ago
• LLLzasd / python_spider
  一些 Python 爬虫练习：bilibili用户信息爬取、下载工具、房天下新房二手房redis分布式爬虫、简书全站文章爬取、观察者网站首页新闻爬取、淘宝模拟登陆、淘宝搜索商品信息爬取及可视化展示、知乎问题回答信息爬取\抖音无水印视频下载
  ☆128Updated 2 months ago
• realzhengyiming / Spider_of_keywordRank
  搜索引擎关键词排位爬虫，包括百度，搜狗，360的搜索引擎关键词排位爬虫，关键词从百度热词中取得，排位分别从三个搜索引擎中抓取。
  ☆19Updated 5 years ago
• Henryhaohao / Aqistudy_Weather
  Aqistudy_Weather加密破解Aqistudy中国城市空气质量在线检测平台
  ☆16Updated 6 years ago
• timmmGZ / Weibo-sentiment-analysis-and-crawler
  情感分析，微博情感分析，微博水军检测，水军检测，营销粉检测，僵尸粉检测，微博爬虫
  ☆68Updated 4 years ago
• Randy-whiteSugar / LagouSpider_Scrapy
  使用Scrapy编写的拉勾网爬虫，添加了代理IP池、增量爬取机制
  ☆11Updated last year
• jasonren0403 / news_hotspot_crawler
  基于scrapy的中国国内各大新闻网站内容爬虫
  ☆26Updated 3 years ago
• Artificialimbecile / WeiboSpider
  爬取微博用户关注列表，生成好友关系网，绘制社交关系图谱
  ☆40Updated 2 years ago
• guoxw / wenshu-
  裁判文书数据-增量更新
  ☆38Updated 4 years ago
• niuniuJQKKK / zhihu_crawler
  本程序支持关键词搜索、热榜、用户信息、回答、专栏文章、评论等信息的抓取
  ☆27Updated 2 years ago
• blackAndrechen / taobao_crawled
  淘宝爬虫命令行版，指定爬取淘宝商品和评论，利用selenium爬取商品信息，requests爬取评论信息。
  ☆91Updated 4 years ago
• qinyuenlp / WeiboSpider
  基于selenium的轻量级新浪微博爬虫，可实现：1.后台自动爬取微博搜索结果/2.按时间段爬取搜索结果/3.爬取用户基本信息
  ☆49Updated 5 years ago
• Gordon-Deng / CrawlWeiBo
  Python爬取微博，采集的数据属性如下：微博内容，是否原创，转发内容，发布时间，转发数，评论数，点赞数，设备源，微博ID。对于抓取到的页面源码分析不同属性对应的标签分别提取数据。最后将采集到的数据保存为csv格式，供数据分析使用。
  ☆33Updated 5 years ago
• mizhicangyue / weixin-spider
  微信公众号爬虫，公众号历史文章，文章评论，文章阅读及在看数据，可视化web页面，可部署于Windows服务器。基于Python3之flask/mysql/redis/mitmproxy/pywin32等实现，高效微信爬虫，微信公众号爬虫，历史文章，文章评论，数据更新。
  ☆10Updated 5 years ago
• XWang20 / WeiboCrawler
  无cookie版微博爬虫，可以连续爬取一个或多个新浪微博用户信息、用户微博及其微博评论转发。
  ☆154Updated 2 years ago
• longxiaofei / dianping
  大众点评商家评论爬虫
  ☆48Updated 5 years ago
• Sumsky21 / Pa-Wordcloud
  一个基于关键词爬虫生成词云的网络内容可视化工具，可爬取百度、谷歌、必应、知乎、微博、微信公众平台
  ☆35Updated 5 years ago
• kingking888 / CommNewsExtractor
  通用文章提取，正文，标题，时间，作者，图片，音视频，联系方式等
  ☆23Updated 2 years ago
• datugou / spiders
  各种爬虫：爱企查爬虫，网上114企业信息爬虫，抖音视频爬虫，wipo爬虫， 专利信息爬虫（patentscope）
  ☆71Updated 3 years ago
• xiaoxiong74 / Spiders
  微博关键词搜索爬虫、微博爬虫、链家房产爬虫、新浪新闻爬虫、腾讯招聘爬虫、招投标爬虫
  ☆36Updated 6 years ago
• Micro-sheep / Python-Bilibili
  B站弹幕、评论爬虫+词云生成
  ☆49Updated 4 years ago
• dataaug / zhihu-spider
  知乎爬虫，用于爬取问题和对应的回答
  ☆28Updated 2 years ago
• GaoakaJie / WeiboSpider_forComments_Reposts_Attitudes
  本项目是一个微博爬虫项目，旨在通过微博的mid获取到其对应的所有点赞、转发、评论与二级评论的相关数据。
  ☆52Updated 2 years ago