Alternatives and similar repositories for SinaNetSpider:

Users that are interested in SinaNetSpider are comparing it to the libraries listed below

• duoan / codes-scratch-crawler
  读书笔记《自己动手写网络爬虫》，自己敲的代码。主要记录了网络爬虫的基本实现，网页去重的算法，网页指纹算法，文本信息挖掘
  ☆47Updated 10 years ago
• tankle / newscrawler
  新闻网站爬虫,目前能够爬取网易，新浪，qq，搜狐等三家网站的新闻页面，并保存到本地。
  ☆35Updated 9 years ago
• backto17 / SinaHouseCrawler
  基于scrapy,scrapy-redis实现的一个分布式网络爬虫,爬取了新浪房产的楼盘信息及户型图片,实现了常用的爬虫功能需求.
  ☆40Updated 8 years ago
• wanghuafeng / e-business
  电商爬虫系统：京东，当当，一号店，国美爬虫（代理使用）；论坛、新闻、豆瓣爬虫
  ☆106Updated 7 years ago
• QiuMing / zhihuWebSpider
  知乎爬虫，基于webmagic框架 .A java web spider base on webmagic.
  ☆69Updated 8 years ago
• zkqiang / job-spider
  多线程爬取互联网行业常用招聘网站
  ☆29Updated 7 years ago
• JackonYang / renren
  人人网信息抓取与数据挖掘。social network analysis
  ☆96Updated 10 years ago
• gsh199449 / DistributeCrawler
  基于Map/Reduce爬虫,可抽取各大新闻网站的新闻正文并进行分类和聚类
  ☆77Updated 11 years ago
• brantou / crawler
  爬虫, http代理, 模拟登陆!
  ☆108Updated 7 years ago
• dengqiangxi / zhihu_spider
  知乎爬虫，用于爬取用户信息以及用户之间关系。
  ☆33Updated 2 years ago
• killstanding / FinanceCrawler
  金融数据爬虫
  ☆28Updated 9 years ago
• darrenfantasy / image_crawler
  网站图片爬虫(已包含：微博，微信公众号，花瓣网)及免费IP代理 豆瓣电影爬虫
  ☆145Updated 7 years ago
• LiuRoy / github_spider
  使用代理调用github API爬去用户数据
  ☆185Updated 9 years ago
• JFanZhao / spider
  使用java+httpclient+httpcleaner，多线程、分布式爬去电商网站商品信息，数据存储在hbase上，并使用solr对商品建立索引，使用redis队列存储一个共享的url仓库；使用zookeeper对爬虫节点生命周期进行监视等。
  ☆231Updated 4 years ago
• bowenpay / weibo-spider
  微博爬虫。通过调用weibo api，而非暴力爬取的方式获取信息。
  ☆32Updated 8 years ago
• xiaoyang611 / crawler-denfender
  反网页爬虫系统
  ☆39Updated 10 years ago
• LiuXingMing / Tmall1212
  天猫双12爬虫，附商品数据。
  ☆199Updated 8 years ago
• LiuRoy / spider_docker
  为爬虫引用创建container，包括的模块：scrapy, mongo, celery, rabbitmq
  ☆36Updated 9 years ago
• hongyuXie / MachineLearning
  机器学习师从Andrew Ng(吴恩达)，获得在Coursera平台上斯坦福大学Andrew Ng（吴恩达教授）机器学习（Machine Learning）的资格证书，为了有一个平台和大家分享和交流机器学习，因此特地在此进行课程的：笔记整理，重点划分，内置习题，在线习题，…
  ☆71Updated 5 years ago
• A1014280203 / Ugly-Distributed-Crawler
  基于Redis实现的简单到爆的分布式爬虫
  ☆46Updated 7 years ago
• da2vin / Spider_index
  爬取百度指数和阿里指数，采用selenium，存入hbase，验证码自动识别，多线程控制
  ☆32Updated 8 years ago
• luckterry7 / doubanMovieCrawler
  doubanMovieCrawler,for collecting lastest movie
  ☆49Updated 8 years ago
• wanghuafeng / baidu_spider
  百度爬虫：热词，词频，音乐，poi信息
  ☆22Updated 10 years ago
• seawaylee / doubanWebSpider
  豆瓣爬虫 爬取热门标签、图书信息、图书评论 系统架构 Webmagic+SSM+Redis+Mysql+ActiveMQ+Druid
  ☆44Updated 6 years ago
• bcqtt / article-spider
  1、支持网页爬虫 2、多线程、线程池 3、支持全文搜索 4、支持Hadoop分布式平台、HDFS/MapReduce、Zookeeper、HBase 5、支持redis分布式缓存 6、集成微信公众号开发 7、Spring4新特性 8、ActiveMQ 9、Nginx详细配置…
  ☆16Updated 2 years ago
• HunterChao / Dangdang
  scrapy爬取当当网图书数据
  ☆73Updated 8 years ago
• pujinxiao / zhilian
  智联招聘网职位的抓取
  ☆53Updated 7 years ago
• luzhijun / weiboSA
  微博主题搜索分析，上海租房
  ☆115Updated 8 years ago
• forezp / ZhihuSpiderMan
  Python爬虫系列
  ☆163Updated 6 years ago
• linyiqun / opinion-mining-system
  新闻评论观点挖掘系统，粗粒度的分析出新闻网评观点的倾向和走势
  ☆53Updated 9 years ago