Alternatives and similar repositories for NCspider:

Users that are interested in NCspider are comparing it to the libraries listed below

• build2last / EC-Master
  电商爬虫与观点挖掘 Crawler:selenium+phantomJS. NLP: NLTK + jieba. 施工中...
  ☆15Updated 6 years ago
• hailong0707-zz / spider_news_all
  Scrapy Spider for 各种新闻网站
  ☆108Updated 9 years ago
• backto17 / SinaHouseCrawler
  基于scrapy,scrapy-redis实现的一个分布式网络爬虫,爬取了新浪房产的楼盘信息及户型图片,实现了常用的爬虫功能需求.
  ☆40Updated 8 years ago
• multiangle / Distributed_Microblog_Spider
  分布式新浪微博爬虫
  ☆31Updated 8 years ago
• xqtbox / AutoHomeSpider_Scrapy
  爬取汽车之家的口碑数据，并破解前端js反爬虫措施分析
  ☆62Updated 7 years ago
• bowenpay / weibo-spider
  微博爬虫。通过调用weibo api，而非暴力爬取的方式获取信息。
  ☆32Updated 8 years ago
• guiyang882 / NewsSearch
  主要使用python+Scrapy框架去抓取新闻网站
  ☆25Updated 8 years ago
• lcdevelop / page-classify
  机器学习文本分类器
  ☆46Updated 8 years ago
• da2vin / Spider_index
  爬取百度指数和阿里指数，采用selenium，存入hbase，验证码自动识别，多线程控制
  ☆32Updated 8 years ago
• tankle / newscrawler
  新闻网站爬虫,目前能够爬取网易，新浪，qq，搜狐等三家网站的新闻页面，并保存到本地。
  ☆35Updated 9 years ago
• Johnson0722 / News_scrapy_redis
  ☆31Updated 6 years ago
• llfccc / qichachaSpider
  企查查的scrapy爬虫实践
  ☆12Updated 8 years ago
• wanghuafeng / sina_spider
  新浪爬虫(新浪微博爬虫，新浪微博评论，新浪每日持续更新新闻，新浪新闻爬虫)
  ☆9Updated 6 years ago
• wanghuafeng / baidu_spider
  百度爬虫：热词，词频，音乐，poi信息
  ☆22Updated 10 years ago
• xianhu / PSpiderDemos
  demos based on PSpider
  ☆17Updated 6 years ago
• hk029 / LagouSpider
  【图文详解】scrapy爬虫与动态页面——爬取拉勾网职位信息（1）
  ☆82Updated 8 years ago
• sunshinenum / sina_news
  基于Scrapy的爬虫，爬取新浪新闻，数据库使用mysql和mongoDB附带master分支docker镜像。
  ☆19Updated 8 years ago
• brady-chen / tbNews
  金融新闻增量式聚焦爬虫
  ☆21Updated 7 years ago
• yanshengli / sina_weibo_crawler
  利用urllib2加beautifulsoup爬取新浪微博
  ☆69Updated 9 years ago
• ffgg1452 / weibo
  sina weibo capture and sentiment classification
  ☆53Updated 8 years ago
• LKI / wescraper
  依赖Scrapy和搜狗搜索微信公众号文章
  ☆46Updated 8 years ago
• Germey / Weibo
  Weibo Spider
  ☆49Updated 7 years ago
• shanelau / weibo_comment
  新浪微博的评论数据抓取和分析
  ☆94Updated 10 years ago
• YijunRan / Opinion-leaders-mining
  本文提出一种基于应答关系来挖掘QQ群中意见领袖的方法，该方法首先构建回应词词库，然后基于Aho-Corasick算法来匹配聊天文本中的回应词数据，构建出用户应答关系的网络结构，最后使用社交网络中重要节点识别的方法来发现意见领袖。该方法对QQ群中的意见领袖发现具有较高的准确率…
  ☆21Updated 8 years ago
• mazzzystar / BaiduCrawler
  Sample of using proxies to crawl baidu search results.
  ☆118Updated 7 years ago
• HuangFJ / text-similarity
  《知网》中文词语语义相似度算法
  ☆41Updated 11 years ago
• KeithYue / weibo-keywords-crawler
  Crawl the related sina weibo content using the keywords, and save the results to txt file for future use.
  ☆18Updated 8 years ago
• Vespa314 / douban_scrapy
  将会陆续添加豆瓣里面各种信息的爬虫代码和分析
  ☆25Updated 10 years ago
• intfloat / sina-weibo-crawler
  方便扩展的新浪微博爬虫
  ☆64Updated 6 years ago
• yinzishao / NewsScrapy
  基于scrapy的新闻爬虫
  ☆100Updated 4 years ago