Alternatives and similar repositories for crawers

Users that are interested in crawers are comparing it to the libraries listed below

• starFalll / Spider
  新浪微博爬虫(Sina weibo spider)，百度搜索结果 爬虫
  ☆195Updated 2 years ago
• maoqyhz / TextCharactervVisualization
  Simple examples of text data visualization. 文本人物可视化，词云、人物关系图谱
  ☆111Updated 7 years ago
• haibincoder / ToutiaoCrawler
  今日头条爬虫，主要爬取关键词搜索结果，包含编辑距离算法、奇异值分解、k-means聚类。
  ☆72Updated 6 years ago
• blackAndrechen / taobao_crawled
  淘宝爬虫命令行版，指定爬取淘宝商品和评论，利用selenium爬取商品信息，requests爬取评论信息。
  ☆94Updated 5 years ago
• Northxw / Dianping
  大众点评店铺信息爬虫
  ☆285Updated 3 years ago
• sixs / wenshu_spider
  中国裁判文书网爬虫(2018-08-28更新)
  ☆344Updated 2 years ago
• gaussic / weibo_wordcloud
  根据关键词抓取微博数据，再生成词云
  ☆220Updated 7 years ago
• Jacen789 / HotNewsAnalysis
  利用文本挖掘技术进行新闻热点关注问题分析
  ☆163Updated 6 years ago
• 1YCxZ / Fake-review-generation
  无监督中文仿真评论自动生成。 Unsupervised Automatic Generation of Chinese Fake Reviews.
  ☆84Updated 6 years ago
• dataabc / weiboPR
  用python判断微博用户的影响力
  ☆53Updated 9 years ago
• longxiaofei / dianping
  大众点评商家评论爬虫
  ☆48Updated 5 years ago
• DWJWendy / Weibo_Spider
  微博爬虫：输入对应的爬取账号ID，爬取微博内容/时间/微博名/转发数/点赞数/评论数
  ☆42Updated 7 years ago
• Liangchengdeye / DaZhongdianping
  ☆105Updated 4 years ago
• xqtbox / AutoHomeSpider_Scrapy
  爬取汽车之家的口碑数据，并破解前端js反爬虫措施分析
  ☆62Updated 8 years ago
• dingmyu / weibo_analysis
  The python crawler which automatically crawls the original microblogs and pictures of the specified user, analyzes the microblogs, and di…
  ☆146Updated 6 years ago
• liuhuanyong / BaiduIndexSpyder
  self complemented BaiduIndexSpyder based on Selenium , index image decode and num image transfer，基于关键词的历时百度搜索指数自动采集
  ☆42Updated 7 years ago
• stanleylsx / app_comments_spider
  爬取百度贴吧、TapTap、appstore、微博官方博主上的游戏评论(基于redis_scrapy)，过滤器采用了bloomfilter。
  ☆55Updated 6 years ago
• heloowird / weibo_crawler
  收集新浪微博数据
  ☆87Updated 5 years ago
• realzhengyiming / Spider_of_keywordRank
  搜索引擎关键词排位爬虫，包括百度，搜狗，360的搜索引擎关键词排位爬虫，关键词从百度热词中取得，排位分别从三个搜索引擎中抓取。
  ☆18Updated 5 years ago
• ashora / SocialListening
  依据香港中文大学设计的规则系统，先用小样本评论建立初始关键词库，再结合18种句式逐条匹配评论，能够快速准确地识别评论对象及情感极性。经多次迭代优化关键词库后，达到较高准确率的基础上，使用Tableau进一步分析数据，识别出客户集中关注的商品属性、普遍好评差评的商品属性；通过…
  ☆54Updated 7 years ago
• liuhuanyong / WeiboIndexSpyder
  self complemented WeiboIndexSpyder based on Selenium ，新浪微博指数(微指数)采集，包括综合指数，移动端指数，PC端指数
  ☆31Updated 7 years ago
• lucasxlu / JiaYuan
  user profile of jiayuan.com
  ☆40Updated 8 years ago
• blmoistawinde / hello_world
  博客文章开源代码分享区
  ☆126Updated 4 years ago
• DesertsX / gulius-projects
  收录古柳（DesertsX）的一些小项目
  ☆282Updated 6 years ago
• qinyuenlp / WeiboSpider
  基于selenium的轻量级新浪微博爬虫，可实现：1.后台自动爬取微博搜索结果/2.按时间段爬取搜索结果/3.爬取用户基本信息
  ☆51Updated 5 years ago
• qiuqingyu / CNKICrawler
  中国知网爬虫
  ☆156Updated 8 years ago
• Henryhaohao / Wenshu_Spider
  Wenshu_Spider-Scrapy框架爬取中国裁判文书网案件数据(2019-1-9最新版)
  ☆197Updated 6 years ago
• xiaosimao / wx_code
  公众号文章代码
  ☆62Updated 6 years ago
• TTyb / Baiduindex
  百度指数-图像识别抓取，逻辑不难，代码写得渣渣
  ☆172Updated 7 years ago
• kwsy / FictionAnalysis
  对小说文本进行分析，提炼小说剧情内容和人物关系
  ☆87Updated 6 years ago