blogchong / mite8-comLinks
数据虫巢官网(mite8.com)站点源码,包括站点基础数据爬取代码,以及重构的NLP分词工具等。
☆47Updated 8 years ago
Alternatives and similar repositories for mite8-com
Users that are interested in mite8-com are comparing it to the libraries listed below
Sorting:
- 知乎爬虫,基于webmagic框架 .A java web spider base on webmagic.☆69Updated 9 years ago
- 基于spark、mahout和spring boot构建的推荐系统☆131Updated 4 months ago
- 舆情搜索服务框架,其中lucene和solr版本为4.8。☆61Updated 9 years ago
- 基于hadoop思维的分布式网络爬虫。☆86Updated 9 years ago
- 集群高可用架构整理☆50Updated 9 years ago
- rank是一个seo工具,用于分析网站的搜索引擎收录排名。☆68Updated 8 years ago
- 个人收集的觉得不错的技术站点或技术博客☆221Updated 7 years ago
- 基于zookeeper的分布式配置管理中心,在分布式系统中,配置文件经常多而繁杂,更新容易丢,有了这个组件,可以热更新,并且不会哪台机子上漏了哪个配置。☆35Updated 9 years ago
- 爬虫项目源码整理,使用redis进行url缓存,hbase进行详细信息的存储。使用zookeeper进行爬虫线程的状态监控。☆19Updated 9 years ago
- jsearch:高性能的全文检索工具包☆93Updated 8 years ago
- jstorm开发demo,小例子☆23Updated 10 years ago
- spring+rabbitmq的简单demo☆40Updated 9 years ago
- J2EE web开发工程框架☆16Updated 6 years ago
- lucene实现web项目近实时搜索【solr和NRTManager、SearcherManager】☆65Updated 10 years ago
- 一个基于Spring Boot的Storm开发手脚架,开箱即用!集成读写Kafka、写Redis、写MySQL示例。☆59Updated 6 years ago
- Learning to write Hadoop examples☆140Updated 7 months ago
- YMP开发框架是一套轻量级的JAVA应用开发框架,具有统一的配置体系结构、系统与业务日志分离、插件化开发模式、简单轻量的MVC和持久化支持等特性;☆33Updated 7 years ago
- java开发的基于kafka、xlog的web日志实时分析storm topology。☆56Updated 10 years ago
- 网络爬虫☆51Updated 11 years ago
- A distributed real-time stock picking system base on flume,kafka,jstorm,esper,and mysql☆160Updated 8 years ago
- storm kafka hdfs examples☆21Updated 8 years ago
- 基于词典的负面舆情信息评分算法。☆26Updated 10 years ago
- 大数据实时计算的基础框架☆49Updated 10 years ago
- integration spring-data-elasticsearch into spring web☆24Updated 9 years ago
- 大规模分布式系统的跟踪、监控、告警平台☆55Updated 11 years ago
- 调度系统:提供友好的web界面,支持shell和http触发型的任务、工作流(由多个任务构成),支持任务的自依赖配置,支持失败重试、负载均衡。☆30Updated 7 years ago
- HtmlExtractor是一个Java实现的基于模板的网页结构化信息精准抽取组件。☆156Updated 7 years ago
- 互联网架构 SOA(Dubbo)+配置中心(ZK)+消息中间件MQ(RocketMq)+高速缓存(Redis)互联网架构☆65Updated 8 years ago
- 简单实用的同步工具,实现mysql数据库中数据定期同步到elasticsearch,只需简单的配置,便能达到非凡的效果,支持elasticsearch 5.X版本☆48Updated 8 years ago
- nutcher是中文的nutch文档,包含nutch的配置和源码解析,持续更新中。☆130Updated 6 years ago