blogchong / mite8-comLinks
数据虫巢官网(mite8.com)站点源码,包括站点基础数据爬取代码,以及重构的NLP分词工具等。
☆47Updated 8 years ago
Alternatives and similar repositories for mite8-com
Users that are interested in mite8-com are comparing it to the libraries listed below
Sorting:
- 基于hadoop思维的分布式网络爬虫。☆86Updated 9 years ago
- 基于spark、mahout和spring boot构建的推荐系统☆131Updated 4 months ago
- 知乎爬虫,基于webmagic框架 .A java web spider base on webmagic.☆69Updated 9 years ago
- rank是一个seo工具,用于分析网站的搜索引擎收录排名。☆67Updated 8 years ago
- 个人收集的觉得不错的技术站点或技术博客☆221Updated 7 years ago
- 爬虫项目源码整理,使用redis进行url缓存,hbase进行详细信息的存储。使用zookeeper进行爬虫线程的状态监控。☆19Updated 9 years ago
- 舆情搜索服务框架,其中lucene和solr版本为4.8。☆61Updated 9 years ago
- 基于zookeeper的分布式配置管理中心,在分布式系统中,配置文件经常多而繁杂,更新容易丢,有了这个组件,可 以热更新,并且不会哪台机子上漏了哪个配置。☆35Updated 9 years ago
- integration spring-data-elasticsearch into spring web☆24Updated 9 years ago
- 网络爬虫☆52Updated 11 years ago
- lucene实现web项目近实时搜索【solr和NRTManager、SearcherManager】☆65Updated 9 years ago
- jsearch:高性能的全文检索工具包☆93Updated 8 years ago
- ☆149Updated 11 years ago
- spring+rabbitmq的简单demo☆40Updated 9 years ago
- 互联网架构 SOA(Dubbo)+配置中心(ZK)+消息中间件MQ(RocketMq)+高速缓存(Redis)互联网架构☆65Updated 7 years ago
- 集群高可用架构整理☆50Updated 9 years ago
- 分布式大数据SQL查询可视化界面!☆68Updated 9 years ago
- 大数据实时计算的基础框架☆49Updated 10 years ago
- storm kafka hdfs examples☆21Updated 8 years ago
- 使用 Java 开发的一个任务调度框架,可以远程执行一次性或重复性的JOB,查看任务的执行状态以及任务结果(返回值、执行时间等) 本框架只负责调度,支持集群,任务执行在目标的服务器上,与业务解耦。☆71Updated 8 years ago
- 一个基于Spring Boot的Storm开发手脚架,开箱即用!集成读写Kafka、写Redis、写MySQL示例。☆59Updated 6 years ago
- A lite distributed Java spider framework :-)☆145Updated 8 years ago
- a simple distributed spider in Java. Java编写的一个简单分布式爬虫☆159Updated 12 years ago
- JOB调度框架☆86Updated 8 years ago
- 社交网络数据抓取,以及CRM系统。☆68Updated 10 years ago
- The Crawler Proxy IP Pool Component☆64Updated 2 years ago
- 基于云计算Iaas平台的企业级云计算,一站式解决方案,http://www.springcloud.cn☆28Updated 9 years ago
- YMP开发框架是一套轻量级的JAVA应用开发框架, 具有统一的配置体系结构、系统与业务日志分离、插件化开发模式、简单轻量的MVC和持久化支持等特性;☆33Updated 7 years ago
- 基于Map/Reduce爬虫,可抽取各大新闻网站的新闻正文并进行分类和聚类☆74Updated 11 years ago
- 各大电商网站数据抓取分析☆32Updated 11 years ago