Alternatives and similar repositories for NCspider:

Users that are interested in NCspider are comparing it to the libraries listed below

• da2vin / Spider_index
  爬取百度指数和阿里指数，采用selenium，存入hbase，验证码自动识别，多线程控制
  ☆32Updated 8 years ago
• lcdevelop / page-classify
  机器学习文本分类器
  ☆46Updated 8 years ago
• build2last / EC-Master
  电商爬虫与观点挖掘 Crawler:selenium+phantomJS. NLP: NLTK + jieba. 施工中...
  ☆15Updated 6 years ago
• backto17 / SinaHouseCrawler
  基于scrapy,scrapy-redis实现的一个分布式网络爬虫,爬取了新浪房产的楼盘信息及户型图片,实现了常用的爬虫功能需求.
  ☆40Updated 8 years ago
• guiyang882 / NewsSearch
  主要使用python+Scrapy框架去抓取新闻网站
  ☆25Updated 8 years ago
• multiangle / Distributed_Microblog_Spider
  分布式新浪微博爬虫
  ☆31Updated 8 years ago
• bowenpay / weibo-spider
  微博爬虫。通过调用weibo api，而非暴力爬取的方式获取信息。
  ☆32Updated 8 years ago
• ffgg1452 / weibo
  sina weibo capture and sentiment classification
  ☆53Updated 8 years ago
• intfloat / sina-weibo-crawler
  方便扩展的新浪微博爬虫
  ☆64Updated 5 years ago
• hailong0707-zz / spider_news_all
  Scrapy Spider for 各种新闻网站
  ☆107Updated 9 years ago
• Johnson0722 / News_scrapy_redis
  ☆31Updated 6 years ago
• YijunRan / Opinion-leaders-mining
  本文提出一种基于应答关系来挖掘QQ群中意见领袖的方法，该方法首先构建回应词词库，然后基于Aho-Corasick算法来匹配聊天文本中的回应词数据，构建出用户应答关系的网络结构，最后使用社交网络中重要节点识别的方法来发现意见领袖。该方法对QQ群中的意见领袖发现具有较高的准确率…
  ☆21Updated 8 years ago
• Wooden-Robot / spider-practice
  ☆20Updated 8 years ago
• tankle / newscrawler
  新闻网站爬虫,目前能够爬取网易，新浪，qq，搜狐等三家网站的新闻页面，并保存到本地。
  ☆34Updated 9 years ago
• boss-mao / scrapy_enterprise_architecture
  python scrapy 企业级分布式爬虫开发架构模板
  ☆93Updated 7 years ago
• wanghuafeng / e-business
  电商爬虫系统：京东，当当，一号店，国美爬虫（代理使用）；论坛、新闻、豆瓣爬虫
  ☆105Updated 6 years ago
• MashiMaroLjc / dudulu
  APIs of text mining
  ☆34Updated 8 years ago
• KeithYue / weibo-keywords-crawler
  Crawl the related sina weibo content using the keywords, and save the results to txt file for future use.
  ☆18Updated 8 years ago
• shipengtaov / weibo_sentiment
  微博粉丝情绪分析
  ☆44Updated 7 years ago
• lining0806 / TextClassify2
  多算法综合的文本分类系统
  ☆24Updated 8 years ago
• tpeng / weibosearch
  A distributed Sina Weibo Search spider base on Scrapy and Redis.
  ☆146Updated 11 years ago
• wanghuafeng / baidu_spider
  百度爬虫：热词，词频，音乐，poi信息
  ☆22Updated 10 years ago
• HuangFJ / text-similarity
  《知网》中文词语语义相似度算法
  ☆41Updated 11 years ago
• dengqiangxi / zhihu_spider
  知乎爬虫，用于爬取用户信息以及用户之间关系。
  ☆33Updated 2 years ago
• wendy1990 / HotTopic_emotion_classification
  基于情感词典的热门话题的情感分析
  ☆8Updated 10 years ago
• terry2tan / weiboCrawler
  命令行微博爬虫工具，可以抓取某条微博的转发、评论、点赞，还可以抓取某个用户发布的所有微博。
  ☆24Updated 8 years ago
• liuhuanyong / WeiboIndexSpyder
  self complemented WeiboIndexSpyder based on Selenium ，新浪微博指数(微指数)采集，包括综合指数，移动端指数，PC端指数
  ☆31Updated 6 years ago
• fankcoder / spider-comments
  ios游戏APP评论爬虫。crawl app comments on amazon && appannie.
  ☆11Updated 8 years ago
• LiuRoy / spider_docker
  为爬虫引用创建container，包括的模块：scrapy, mongo, celery, rabbitmq
  ☆36Updated 8 years ago
• heloowird / weibo_crawler
  收集新浪微博数据
  ☆86Updated 4 years ago