blogchong / mite8-com
数据虫巢官网(mite8.com)站点源码,包括站点基础数据爬取代码,以及重构的NLP分词工具等。
☆48Updated 7 years ago
Alternatives and similar repositories for mite8-com:
Users that are interested in mite8-com are comparing it to the libraries listed below
- 爬虫项目源码整理,使用redis进行url缓存,hbase进行详细信息的存储。使用zookeeper进 行爬虫线程的状态监控。☆19Updated 9 years ago
- 基于zookeeper的分布式配置管理中心,在分布式系统中,配置文件经常多而繁杂,更新容易丢,有了这个组件,可以热更新,并且不会哪台机子上漏了哪个配置。☆35Updated 9 years ago
- jstorm开发demo,小例子☆23Updated 9 years ago
- rank是一个seo工具,用于分析网站的搜索引擎收录排名。☆66Updated 7 years ago
- 基于spark、mahout和spring boot构建的推荐系统☆131Updated last week
- 一个基于Spring Boot的Storm开发手脚架,开箱即用!集成读写Kafka、写Redis、写MySQL示例。☆59Updated 6 years ago
- 蜂巢爬虫系统 是一套只需要定义XPath,就可实现爬取网站,APP的系统, 支持多种解析方式(XPath,正则表达式),多种下载方式(HttpClient库, PhantomJs, Selenium),多种输出方式(Excel,MongoDB)。 可不做任何修改发布到Yar…☆5Updated 7 years ago
- 集群高可用架构整理☆50Updated 8 years ago
- java开发的基于kafka、xlog的web日志实时分析storm topology。☆56Updated 10 years ago
- integration spring-data-elasticsearch into spring web☆24Updated 9 years ago
- 大数据实时计算的基础框架☆49Updated 10 years ago
- 互联网架构 SOA(Dubbo)+配置中心(ZK)+消息中间件MQ(RocketMq)+高速缓存(Redis)互联网架构☆65Updated 7 years ago
- YMP开发框架是一套轻量级的JAVA应用开发框架,具有统一的配置体系结构、系统与业务日志分离、插件化开发模式、简单轻量的MVC和持久化支持等特性;☆33Updated 6 years ago
- a mini blog with NoSql,Dubbo and Spring☆11Updated 11 years ago
- 基于zookeeper的统一配置中心实现☆47Updated 9 years ago
- 简单实用的同步工具,实现mysql数据库中数据定期同步到elasticsearch,只需简单的配置,便能达到非凡的效果,支持elasticsearch 5.X版本☆48Updated 8 years ago
- 调度系统:提供友好的web界面,支持shell和http触发型的任务、工作流(由多个任务构成),支持任务的自依赖配置,支持失败重试、负载均衡。☆30Updated 7 years ago
- java 分布式数据库访问框架,可以结合任何使用PreparedStatement操作的框架。在java jdbc api层实现 分表分库 路由解析的 框架 可以单独或者与用hibernate ibatis spring-jdbc 等框架结合使用,屏蔽api层使用差异,能实…☆85Updated 2 years ago
- Excavator(挖掘机)是一个分布式的Java RMI框架。(求项目使用,有兴趣的可以电邮oldmanpushcart@gmail.com)☆52Updated 2 years ago
- 实时数据分析平台☆41Updated 11 years ago
- 该项目主要是为了熟悉sql的人员能够很方便的进行elasticsearch数据的查询,降低学习成本。☆48Updated 10 years ago
- lucene 实现web项目近实时搜索【solr和NRTManager、SearcherManager】☆65Updated 9 years ago
- 大规模分布式系统的跟踪、监控、告警平台☆55Updated 10 years ago
- storm kafka hdfs examples☆21Updated 8 years ago
- heroUpdated 7 years ago
- A Dapper based Large-Scale Distributed Systems Tracing Infrastructure☆98Updated 8 years ago
- wES is set of open source Java ElasticSearch client and toolkits; Compact, yet highly customizable and powerful.☆27Updated 8 years ago
- 使用 Java 开发的一个任务调度框架,可以远程执行一次性或重复性的JOB,查看任务的执行状态以及任务结果(返回值、执行时间等) 本框架只负责调度,支持集群,任务执行在目标的服务器上,与业务解耦。☆69Updated 8 years ago
- web-sso是一个简约、无状态、易扩展、易伸缩的适合于大型互联网web应用场景的单点登录系统,它功能简单,只实现了统一登录和登出,它最大的特色是将用户状态写入到cookie中,最大程度减少了单点登录服务端的状态,服务端只需要存储公共的应用密钥,将用户凭证的认证分散到各应用…☆24Updated 9 years ago
- Mycat-ConfigCenter☆15Updated 10 years ago