rensuperk / javaSpiderLinks
知乎爬虫,各种数据
☆22Updated 7 years ago
Alternatives and similar repositories for javaSpider
Users that are interested in javaSpider are comparing it to the libraries listed below
Sorting:
- 利用spring boot + webmagic 开发的java爬虫系统☆61Updated 8 years ago
- 拉勾网数据爬虫☆32Updated 7 years ago
- 抓取拉勾，内推，智联招聘，前程无忧等网站的招聘信息，格式化存储，图表化展示。☆68Updated 5 years ago
- 搭建一个通用的 Restful API 接口平台，方便用户快速搭建项目，专注于业务，进行 API 接口开发☆64Updated 7 years ago
- GuozhongCrawler的是一个无须配置、便于二次开发的爬虫开源框架，它提供简单灵活的API，只需少量代码即可实现一个爬虫。其设计灵感来源于多个爬虫国内外爬虫框架的总结。采用完全模块化的设计，功能覆盖整个爬虫的生命周期(链接提取、页面下载、内容抽取、持久化)，支持多线…☆96Updated 10 years ago
- 微信小程序-基于SpringBoot的实现Maven聚合,分为core核心模块,service服务模块，gateway对外网关模块，目前已经实现Shrio鉴权jwt监控鉴权,为小程序提供统一规范接口，以及小程序配套后台.☆57Updated 3 years ago
- 一个基于webmagic框架二次开发的java爬虫框架实战，已实现能爬取腾讯，搜狐，今日头条（单独集成功能）等资讯内容，配合elasticsearch框架用法，实现了自动爬虫，已投入线上生产使用。☆343Updated 2 years ago
- 爬虫代理IP池服务，可供其他爬虫程序通过restapi获取☆113Updated 3 years ago
- java 实现微信抢红包算法☆76Updated 6 years ago
- 基于Spring Cloud微服务架构的广告系统☆57Updated 3 years ago
- 🐝 Web vertical crawler framework for fun☆191Updated last year
- 这是从慕课网中学习的Java权限管理系统☆25Updated 9 years ago
- 多线程爬虫--抓取淘宝商品详情页URL☆128Updated 6 years ago
- 豆瓣爬虫 爬取热门标签、图书信息、图书评论 系统架构 Webmagic+SSM+Redis+Mysql+ActiveMQ+Druid☆43Updated 6 years ago
- 基于WebMagic写的一个csdn博客小爬虫☆91Updated 7 years ago
- 一个SpringMVC4+EasyUI的后台管理系统，已投入生产线上使 用。下载导入SQL脚本，开箱即用，五分钟完成部署。☆149Updated 2 years ago
- 使用Java的WebCollector爬虫框架采集网易云音乐5亿首歌☆105Updated 8 years ago
- Exception异常管理平台，支持Java、PHP、Python等多种语言☆85Updated 2 years ago
- 🎊 Design and implement of lightweight crawler framework.☆316Updated 7 years ago
- 使用 SpringBoot2.0+ElasticSearch 实现的开源电影搜索引擎☆87Updated 2 years ago
- java crawler framework☆47Updated 3 years ago
- 用于数据迁移、缓存预热，springboot架构。支持数据区间分割、动态调整线程池配置、任务进度实时查看等特性☆45Updated 8 years ago
- 博客园积分前3000名博友，全部文章抓取，存放到mongodb中。☆44Updated 7 years ago
- Fastpay的目标是打造一款开源的、轻量级的、微服务化的、可公私有云部署的、可定制化的集成聚合支付和资金清结算于一体的统一支付系统，满足互联网企业业务系统的收款和资金处理等需求。☆51Updated 7 years ago
- 秒杀系统demo，并基于redis进行了简单的并发优化。学习资料：http://www.imooc.com/learn/587☆21Updated 9 years ago
- Java面试题系列☆31Updated 7 years ago
- 微服务框架☆112Updated last year
- 实现定时爬取与IP代理池☆149Updated 7 years ago
- A Distributed Crawler System Designed By Java.☆212Updated 7 years ago
- "奇伢爬虫"是基于sprint boot 、 WebMagic 实现 微信公众号文章、新闻、csdn、info等网站文章爬取，可以动态设置文章爬取规则、清洗规则，基本实现了爬取大部分网站的文章。☆324Updated 7 years ago