bcqtt / article-spiderLinks
1、支持网页爬虫 2、多线程、线程池 3、支持全文搜索 4、支持Hadoop分布式平台、HDFS/MapReduce、Zookeeper、HBase 5、支持redis分布式缓存 6、集成微信公众号开发 7、Spring4新特性 8、ActiveMQ 9、Nginx详细配置 10、OpenCV图像处理技术 11、缓存Ehcache 12、java设计模式练习、Demo
☆16Updated 3 years ago
Alternatives and similar repositories for article-spider
Users that are interested in article-spider are comparing it to the libraries listed below
Sorting:
- ☆43Updated 2 years ago
- 用于数据迁移、缓存预热，springboot架构。支持数据区间分割、动态调整线程池配置、任务进度实时查看等特性☆45Updated 8 years ago
- 爬虫项目源码整理，使用redis进行url缓存，hbase进行详细信息的存储。使用zookeeper进行爬虫线程的状态监控。☆19Updated 10 years ago
- Java高级工程师面试资料☆20Updated 6 years ago
- 一个通用的开源工具集，集Web、Restful服务、分布式服务、分布式数据库、分布式事务、大数据、数据分析、云计算、人工智能、深度学习、机器学习、算法等为一体的通用开源解决方案，持续更新中。。。☆79Updated 3 years ago
- 微信小程序-基于SpringBoot的实现Maven聚合,分为core核心模块,service服务模块，gateway对外网关模块，目前已 经实现Shrio鉴权jwt监控鉴权,为小程序提供统一规范接口，以及小程序配套后台.☆57Updated 3 years ago
- 使用 SpringBoot2.0+ElasticSearch 实现的开源电影搜索引擎☆88Updated 3 years ago
- 一个用Solr做企业应用内的搜索引擎的SpringBoot项目☆22Updated 7 years ago
- 在公司接了一个任务，完成一个项目数据同步的模块。要求是不能操作项目的数据库。怕操作不当，数据丢失。所以想到的方案是使用log4jdbc记录数据源的SQL语句到日志文件。然后按行读取日志文件中的数据，记录读取的Point，以便下次继续读取。读取的数据进入bigqueue队列，…☆12Updated 8 years ago
- 基于 SpringBoot +Spring + SpringMvc+Mybatis+Dubbo 开发分布式REST服务（Goku.Framework.CoreUI.Vue的后台服务）☆35Updated 7 years ago
- springboot2 + mybatis-plus3 +shiro1.4 +layui细颗粒度网站后台用户权限管理系统☆12Updated 7 years ago
- SpringBoot+Solr + webmagic JD商品爬取数据，放入solr中做搜索，学习下solr使用☆44Updated 8 years ago
- 单点登录系统☆26Updated 8 years ago
- 基于Nutch+ElasticSearch+MySQL+SSM的简易搜索引擎☆20Updated 9 years ago
- Java JUC 学习项目 包括各种并发多线程的高级使用。java自带多线程并发锁高级应用☆15Updated 7 years ago
- Spark混合推荐系统大数据监控平台☆12Updated 7 years ago
- 大数据生态圈学习☆18Updated 3 years ago
- 论坛日志分析系统清洗程序(包含IP规则库，UDF开发，MapReduce程序，日志数据)☆33Updated 7 years ago
- 基于springcloud + token + redis + mongodb 的微服务平台☆42Updated 7 years ago
- 基于spark streaming+flume+kafka+hbase的实时日志处理分析系统(分为控制台版本和基于springboot、Echarts等的Web UI可视化版本)☆39Updated 2 years ago
- 简单实用的同步工具，实现mysql数据库中数据定期同步到elasticsearch，只需简单的配置，便能达到非凡的效果，支持elasticsearch 5.X版本☆48Updated 8 years ago
- 实时风控系统，基于spark-streaming、drools、kafka、redis☆54Updated 7 years ago
- java方向书籍的学习，包括《java编程思想》,《实战java虚拟机》（作者：葛一鸣）《java高并发》（作者：葛一鸣）。☆17Updated 7 years ago
- SpringBoot+es+vue搭建博客检索系统☆21Updated 6 years ago
- 电商+大数据+spark机器学习☆17Updated 8 years ago
- 一个集成型框架，包含Redis缓存的自动同步模块，业务规则模块，分库分表模块，及事务、ZK统一配置的支持。☆17Updated 9 years ago
- 百灵权限管理系统，是一款构建在用户、角色、权限、日志、在线用户、用户下线、系统设置、日志管理之基础上等开源权限管理系统。 当前系统允许通过设置角色对应的权限，而权限通过Shiro可以控制到相应的操作菜单、操作按钮，并通过角色授权给用户在细化后权限范围内进行相关操作；同时，系…☆101Updated 7 years ago
- 线程池、任务、任务组、任务池，定时任务的类库☆23Updated 2 months ago
- 分布式大数据SQL查询可视化界面！☆68Updated 10 years ago
- springboot邮件发送☆10Updated 7 years ago