rensuperk / javaSpiderLinks
知乎爬虫,各种数据
☆22Updated 8 years ago
Alternatives and similar repositories for javaSpider
Users that are interested in javaSpider are comparing it to the libraries listed below
Sorting:
- 利用spring boot + webmagic 开发的java爬虫系统☆61Updated 8 years ago
- GuozhongCrawler的是一个无须配置、便于二次开发的爬虫开源框架，它提供简单灵活的API，只需少量代码即可实现一个爬虫。其设计灵感来源于多个爬虫国内外爬虫框架的总结。采用完全模块化的设计，功能覆盖整个爬虫的生命周期(链接提取、页面下载、内容抽取、持久化)，支持多线…☆96Updated 10 years ago
- 抓取拉勾，内推，智联招聘，前程无忧等网站的招聘信息，格式化存储，图表化展示。☆68Updated 5 years ago
- 基于WebMagic写的一个csdn博客小爬虫☆91Updated 7 years ago
- 🐝 Web vertical crawler framework for fun☆191Updated last year
- 拉勾网数据爬虫☆32Updated 8 years ago
- 秒杀系统demo，并基于redis进行了简单的并发优化。学习资料：http://www.imooc.com/learn/587☆21Updated 9 years ago
- 基于Spring Cloud微服务架 构的广告系统☆57Updated 3 years ago
- 一个基于webmagic框架二次开发的java爬虫框架实战，已实现能爬取腾讯，搜狐，今日头条（单独集成功能）等资讯内容，配合elasticsearch框架用法，实现了自动爬虫，已投入线上生产使用。☆343Updated 2 years ago
- Java多线程高并发实例☆38Updated 4 years ago
- 搭建一个通用的 Restful API 接口平台，方便用户快速搭建项目，专注于业务，进行 API 接口开发☆64Updated 7 years ago
- 🎊 Design and implement of lightweight crawler framework.☆316Updated 7 years ago
- 面向互联网金融行业的支付系统(模块)☆54Updated 5 years ago
- 实现定时爬取与IP代理池☆150Updated 7 years ago
- 微信小程序-基于SpringBoot的实现Maven聚合,分为core核心模块,service服务模块，gateway对外网关模块，目前已经实现Shrio鉴权jwt监控鉴权,为小程序提供统一规范接口，以及小程序配套后台.☆57Updated 3 years ago
- java常用工具类集合☆112Updated 7 years ago
- 基于事件分发的爬虫框架☆34Updated 3 years ago
- java 实现微信抢红包算法☆76Updated 6 years ago
- 博客园积分前3000名博友，全部文章抓取，存放到mongodb中。☆44Updated 7 years ago
- 使用 SpringBoot2.0+ElasticSearch 实现的开源电影搜索引擎☆87Updated 3 years ago
- 一个SpringMVC4+EasyUI的后台管理系统，已投入生产线上使用。下载导入SQL脚本，开箱即用，五分钟完成部署。☆149Updated 2 years ago
- 使用Java的WebCollector爬虫框架采集网易云音乐5亿首歌☆105Updated 8 years ago
- 豆瓣爬虫 爬取热门标签、图书信息、图书评论 系统架构 Webmagic+SSM+Redis+Mysql+ActiveMQ+Druid☆43Updated 6 years ago
- 爬虫代理IP池服务，可供其他爬虫程序通过restapi获取☆115Updated 3 years ago
- CSDN官网各种信息抓取，采用jsoup/webMagic进行实现，各种爬虫策略的处理，可以很好的进行爬虫学习。【本项目只提供核心爬虫程序，不包含其它业务逻辑处理】【停止维护】☆55Updated 7 years ago
- Java面试题系列☆31Updated 7 years ago
- "奇伢爬虫"是基于sprint boot 、 WebMagic 实现 微信公众号文章、新闻、csdn、info等网站文章爬取，可以动态设置文章爬取规则、清洗规则，基本实现了爬取大部分网站的文章。☆324Updated 8 years ago
- Fastpay的目标是打造一款开源的、轻量级的、微服务化的、可公私有云部署的、可定制化的集成聚合支付和资金清结算于一体的统一支付系统，满足互联网企业业务系统的收款和资金处理等需求。☆51Updated 7 years ago
- 微服务框架☆112Updated last year
- A compact, flexible Java multi-threaded crawler framework (Ai Pa), built-in Jsoup, zero-cost hands-on.一款小巧、灵活的Java多线程爬虫框架（AiPa）内嵌Jsoup 零成…☆80Updated 3 years ago