rensuperk / javaSpiderLinks
知乎爬虫,各种数据
☆22Updated 8 years ago
Alternatives and similar repositories for javaSpider
Users that are interested in javaSpider are comparing it to the libraries listed below
Sorting:
- 利用spring boot + webmagic 开发的java爬虫系统☆61Updated 8 years ago
- GuozhongCrawler的是一个无须配置、便于二次开发的爬虫开源框架，它提供简单灵活的API，只需少量代码即可实现一个爬虫。其设计灵感来源于多个爬虫国内外爬虫框架的总结。采用完全模块化的设计，功能覆盖整个爬虫的生命周期(链接提取、页面下载、内容抽取、持久化)，支持多线…☆98Updated 10 years ago
- 一个基于webmagic框架二次开发的java爬虫框架实战，已实现能爬取腾讯，搜狐，今日头条（单独集成功能）等资讯内容，配合elasticsearch框架用法，实现了自动爬虫，已投入线上生产使用。☆343Updated 3 years ago
- 搭建一个通用的 Restful API 接口平台，方便用户快速搭建项目，专注于业务，进行 API 接口开发☆64Updated 7 years ago
- 🐝 Web vertical crawler framework for fun☆191Updated last year
- 一个SpringMVC4+EasyUI的后台管理系统，已投入生产线上使用。下载导入SQL脚本，开箱即用，五分钟完成部署。☆148Updated 3 years ago
- Exception异常管理平台，支持Java、PHP、Python等多种语言☆85Updated 3 years ago
- 基于WebMagic写的一个csdn博客小爬虫☆91Updated 7 years ago
- java 实现微信抢红包算法☆76Updated 6 years ago
- 微信小程序-基于SpringBoot的实现Maven聚合,分为core核心模块,service服务模块，gateway对外网关模块，目前已经实现Shrio鉴权jwt监控鉴权,为小程序提供统一规范接口，以及小程序配套后台.☆57Updated 3 years ago
- 拉勾网数据爬虫☆32Updated 8 years ago
- 基于Spring Cloud微服务架构的广告系统☆57Updated 3 years ago
- The Crawler Proxy IP Pool Component☆65Updated 3 years ago
- 使用Java的WebCollector爬虫框架采集网易云音乐5亿首歌☆106Updated 8 years ago
- A compact, flexible Java multi-threaded crawler framework (Ai Pa), built-in Jsoup, zero-cost hands-on.一款小巧、灵活的Java多线程爬虫框架（AiPa）内嵌Jsoup 零成…☆80Updated 3 years ago
- 爬虫代理IP池 服务，可供其他爬虫程序通过restapi获取☆115Updated 3 years ago
- 🎊 Design and implement of lightweight crawler framework.☆316Updated 7 years ago
- 实现定时爬取与IP代理池☆149Updated 7 years ago
- 整合使用selenium+phantomjs+WebCollector爬取京东数据，并做数据持久化。☆49Updated 8 years ago
- 利用 maven 来构建一个多模块基于 SpringMVC + Spring + MyBatis 三大框架的脚手架，为 Java 初学者了解多模块的 maven 工程做个参考☆55Updated 5 years ago
- 使用 SpringBoot2.0+ElasticSearch 实现的开源电影搜索引擎☆88Updated 3 years ago
- 抓取拉勾，内推，智联招聘，前程无忧等网站的招聘信息，格式化存储，图表化展示。☆68Updated 5 years ago
- 微信公众号文章爬虫☆44Updated 3 years ago
- A Distributed Crawler System Designed By Java.☆214Updated 7 years ago
- 🦅 wx-mp、mall、coupon、payment-gateway、wx-pay、alipay、spring-security、comment、rbac、message / 微信公众号(支持多公众号) / 商城(含订单、优惠券) / 账户体系 / 消息通知 等☆14Updated 3 years ago
- Fastpay的目标是打造一款开源的、轻量级的、微服务化的、可公私有云部署的、可定制化的集成聚合支付和资金清结算于一体的统一支付系统，满足互联网企业业务系统的收款和资金处理等需求。☆51Updated 7 years ago
- 百灵权限管理系统，是一款构建在用户、角色、权限、日志、在线用户、用户下线、系统设置、日志管理之基础上等开源权限管理系统。 当前系统允许通过设置角色对应的权限，而权限通过Shiro可以控制到相应的操作菜单、操作按钮，并通过角色授权给用户在细化后权限范围内进行相关操作；同时，系…☆101Updated 7 years ago
- 龙果充值平台，具备话费充值、流量充值、话费卡兑换功能；可以拓展其他充值兑换业务；也适用于支付、鉴权等业务功能的拓展☆115Updated 3 years ago
- 会员管理系统：包含网站中的会员中心，后台的会员管理功能，提供给其他系统的会员API，以及会员相关的自动化任务。☆96Updated 11 years ago
- 多线程爬虫--抓取淘宝商品详情页URL☆128Updated 6 years ago