Alternatives and similar repositories for crawers

Users that are interested in crawers are comparing it to the libraries listed below

• dingmyu / weibo_analysis
  The python crawler which automatically crawls the original microblogs and pictures of the specified user, analyzes the microblogs, and di…
  ☆146Updated 6 years ago
• DWJWendy / Weibo_Spider
  微博爬虫：输入对应的爬取账号ID，爬取微博内容/时间/微博名/转发数/点赞数/评论数
  ☆43Updated 7 years ago
• blackAndrechen / taobao_crawled
  淘宝爬虫命令行版，指定爬取淘宝商品和评论，利用selenium爬取商品信息，requests爬取评论信息。
  ☆95Updated 5 years ago
• starFalll / Spider
  新浪微博爬虫(Sina weibo spider)，百度搜索结果 爬虫
  ☆195Updated 2 years ago
• maoqyhz / TextCharactervVisualization
  Simple examples of text data visualization. 文本人物可视化，词云、人物关系图谱
  ☆112Updated 8 years ago
• haibincoder / ToutiaoCrawler
  今日头条爬虫，主要爬取关键词搜索结果，包含编辑距离算法、奇异值分解、k-means聚类。
  ☆72Updated 6 years ago
• HEUDavid / WeiboSpider
  微博爬虫 有问题欢迎提出来
  ☆17Updated 6 years ago
• sixs / wenshu_spider
  中国裁判文书网爬虫(2018-08-28更新)
  ☆348Updated 2 years ago
• Y1ran / Weibo_Light_Spyder_2019
  微博轻量级爬虫-2019可用-可扩展
  ☆49Updated 6 years ago
• Python3WebSpider / Weibo
  Weibo Spider Using Scrapy
  ☆137Updated 7 years ago
• qiuqingyu / CNKICrawler
  中国知网爬虫
  ☆157Updated 8 years ago
• xqtbox / AutoHomeSpider_Scrapy
  爬取汽车之家的口碑数据，并破解前端js反爬虫措施分析
  ☆62Updated 8 years ago
• qinyuenlp / WeiboSpider
  基于selenium的轻量级新浪微博爬虫，可实现：1.后台自动爬取微博搜索结果/2.按时间段爬取搜索结果/3.爬取用户基本信息
  ☆51Updated 5 years ago
• gaussic / weibo_wordcloud
  根据关键词抓取微博数据，再生成词云
  ☆220Updated 7 years ago
• Albert-W / python_crawler
  It's designed to be a simple, tiny, pratical python crawler using json and sqlite instead of mysql or mongdb. The destination website is…
  ☆49Updated 5 years ago
• longxiaofei / dianping
  大众点评商家评论爬虫
  ☆49Updated 5 years ago
• terry2tan / weiboCAR
  【爬虫】基于Scrapy开发的微博（评论、转发、点赞）爬虫，可以批量抓取。
  ☆28Updated 8 years ago
• kaito-kidd / douban-group-spider
  爬取豆瓣小组帖子的爬虫。
  ☆161Updated 2 years ago
• TM0831 / Spiders
  各种大小爬虫集合
  ☆240Updated 5 years ago
• Jacen789 / HotNewsAnalysis
  利用文本挖掘技术进行新闻热点关注问题分析
  ☆166Updated 6 years ago
• dataabc / weiboPR
  用python判断微博用户的影响力
  ☆53Updated 9 years ago
• zhangslob / awesome_crawl
  腾讯新闻、知乎话题、微博粉丝，Tumblr爬虫、斗鱼弹幕、妹子图爬虫、分布式设计等
  ☆297Updated 4 months ago
• kwsy / FictionAnalysis
  对小说文本进行分析，提炼小说剧情内容和人物关系
  ☆87Updated 6 years ago
• liuhuanyong / BaiduIndexSpyder
  self complemented BaiduIndexSpyder based on Selenium , index image decode and num image transfer，基于关键词的历时百度搜索指数自动采集
  ☆42Updated 7 years ago
• Liangchengdeye / DaZhongdianping
  ☆105Updated 4 years ago
• yinzishao / NewsScrapy
  基于scrapy的新闻爬虫
  ☆101Updated 5 years ago
• ashora / SocialListening
  依据香港中文大学设计的规则系统，先用小样本评论建立初始关键词库，再结合18种句式逐条匹配评论，能够快速准确地识别评论对象及情感极性。经多次迭代优化关键词库后，达到较高准确率的基础上，使用Tableau进一步分析数据，识别出客户集中关注的商品属性、普遍好评差评的商品属性；通过…
  ☆56Updated 8 years ago
• zyingzhou / music163-spiders
  网易云音乐歌曲评论爬虫
  ☆271Updated 6 years ago
• blmoistawinde / hello_world
  博客文章开源代码分享区
  ☆126Updated 4 years ago
• liuhuanyong / WeiboIndexSpyder
  self complemented WeiboIndexSpyder based on Selenium ，新浪微博指数(微指数)采集，包括综合指数，移动端指数，PC端指数
  ☆31Updated 7 years ago