xjtushilei / ScriptSpider
A Java componentized distributed crawler framework. 一个Java版本的组件化的分布式通用爬虫
☆163Updated 11 months ago
Related projects ⓘ
Alternatives and complementary repositories for ScriptSpider
- 一个简单易用的爬虫框架,内置代理管理模块,灵活设置多线程爬取☆60Updated 7 years ago
- 温故而知新，分享知识，快乐编码~☆536Updated 7 years ago
- 🐝 Web vertical crawler framework for fun☆189Updated 11 months ago
- 🎊 Design and implement of lightweight crawler framework.☆317Updated 6 years ago
- 这个是我个人网站的项目，欢迎贡献代码，力求能够应用到实际工作中java相关的大多数技术栈。有兴趣请Star一下，非常感谢。qq交流群：587577705 这个项目将不断地更新！生产环境：☆170Updated 4 years ago
- 又一个号称高性能的 java 爬虫工具/爬虫框架☆122Updated 5 years ago
- 设计模式的总结与例子（有XMind，Uml图和详细代码实现说明）☆269Updated 6 years ago
- 这是一个Java程序猿共同打造的Java博客网站。☆236Updated last year
- 基于 JDK8 实现的轻量级 Java Web 框架☆261Updated 8 years ago
- Exception异常管理平台，支持Java、PHP、Python等多种语言☆86Updated last year
- java常用工具类集合☆112Updated 6 years ago
- Mybatis Generator Web Tool. 更加简单便捷的生成Mybatis框架代码☆75Updated 7 years ago
- a simple distributed spider in Java. Java编写的一个简单分布式爬虫☆159Updated 11 years ago
- 新浪微博爬虫，采用Java语言开发，基于HTTPClient 4.0，采用MySQL存储爬取数据，支持多进程并发执行。功能包括：爬取微博、评论、转发、关注列表（层次）。根据数据需求，持续更新...☆353Updated 10 years ago
- 一款仿SpringMVC轻便的mvc开发框架☆66Updated 7 years ago
- Java博客源码☆28Updated 7 years ago
- 使用java+httpclient+httpcleaner，多线程、分布式爬去电商网站商品信息，数据存储在hbase上，并使用solr对商品建立索引，使用redis队列存储一个共享的url仓库；使用zookeeper对爬虫节点生命周期进行监视等。☆231Updated 4 years ago
- spring+springmvc+mybatis+maven+freemarker 能跑通的小例子，尽量通俗易懂☆80Updated 8 years ago
- jdk源码学习笔记，人话翻译☆132Updated 7 years ago
- Easy Spring Boot blog~☆77Updated 6 years ago
- 深入JVM虚拟机全书脑图☆232Updated 6 years ago
- 关于Java Design Pattern (设计模式) 学习积累的例子，是初学者及设计模式巩固的最佳实践。☆166Updated last year
- ☆153Updated 7 years ago
- 基于SpringMVC，Spring，MyBatis实现的秒杀系统（参见慕课网，做了些改动）☆92Updated 7 years ago
- 使用WebMagic抓取招聘信息，并且持久化到Mysql的例子。☆225Updated 8 years ago