xjtushilei / InformationSystemModelingLinks
爬取了一些新闻,建立索引!简单分析了一些数据,做了一些前台的可视化工作。This is the "information system modeling" course assignments. Climb up some news, build index! Simple analysis of some of the data, do some of the visual work of the front desk
☆20Updated 6 years ago
Alternatives and similar repositories for InformationSystemModeling
Users that are interested in InformationSystemModeling are comparing it to the libraries listed below
Sorting:
- 大数据平台相关代码(ES/Hive/Hadoop/hdfs/hbase)☆75Updated 3 years ago
- Storm Kafka 流数据 处理系统☆20Updated 7 years ago
- 各大电商网站数据抓取分析☆32Updated 12 years ago
- 基于Map/Reduce爬虫,可抽取各大新闻网站的新闻正文并进行分类和聚类☆74Updated 11 years ago
- 基于ElasticSearch的分布式舆情检索统计服务。☆11Updated last year
- 爬虫项目源码整理,使用redis进行url缓存,hbase进行详细信息的存储。使用zookeeper进行爬虫线程的状态监控。☆19Updated 10 years ago
- 基于词典的负面舆情信息评分算法。☆26Updated 10 years ago
- 基于Nutch+ElasticSearch+MySQL+SSM的简易搜索引擎☆20Updated 9 years ago
- A big data platform for analyzing web access logs☆53Updated 2 years ago
- 日志分析器,仿造elk中logstash的简单Java实现,实现监控目录日志,自动解析存入elasticsearch。☆22Updated 9 years ago
- SpringBoot+Solr + webmagic JD商品爬取数据,放入solr中做搜索,学习下solr使用☆44Updated 8 years ago
- 简单实用的同步工具,实现mysql数据库中数据定期同步到elasticsearch,只需简单的配置,便能达到非凡的效果,支持elasticsearch 5.X版本☆48Updated 8 years ago
- 一个用Solr做企业应用内的搜索引擎的demo;目前仅能实现对MySql数据库表和富文本(pdf、word、excel、ppt等)的全文检索☆33Updated 8 years ago
- 一个基于Spring Boot的Storm开发手脚架,开箱即用!集成读写Kafka、写Redis、写MySQL示例。☆59Updated 6 years ago
- 基于spark、mahout和spring boot构建的推荐系统☆130Updated 2 weeks ago
- 数据虫巢官网(mite8.com)站点源码,包括站点基础数据爬取代码,以及重构的NLP分词工具等。☆47Updated 8 years ago
- 用于数据迁移、缓存预热,springboot架构。支持数 据区间分割、动态调整线程池配置、任务进度实时查看等特性☆45Updated 8 years ago
- 使用 SpringBoot2.0+ElasticSearch 实现的开源电影搜索引擎☆87Updated 3 years ago
- 使用java+httpclient+httpcleaner,多线程、分布式爬去电商网站商品信息,数据存储在hbase上,并使用solr对商品建立索引,使用redis队列存储一个共享的url仓库;使用zookeeper对爬虫节点生命周期进行监视等。☆230Updated 5 years ago
- 基于Hadoop和HBase的大规模海量数据去重☆30Updated 7 years ago
- 分布式数据仓库最佳实践☆57Updated 7 years ago
- 基于Flume、Kafka、SparkSql模拟的实时日志分析系统☆12Updated 9 years ago
- 基于spark streaming+flume+kafka+hbase的实时日志处理分析系统(分为控制台版本和基于springboot、Echarts等的Web UI可视化版本)☆39Updated 2 years ago
- 在公司接了一个任务,完成一个项目数据同步的模块。要求是不能操作项目的数据库。怕操作不当,数据丢失。所以想到的方案是使用log4jdbc记录数据源的SQL语句到日志文件。然后按行读取日志文件中的数据,记录读取的Point,以便下次继续读取。读取的数据进入bigqueue队列,…☆12Updated 8 years ago
- 基于spring boot构建的微服务,服务之间调用日志跟踪,基于spring boot的配置日志输出模式,spring-cloud-starter-feign'的扩展日志输出,请求事件的解析和服务调用轨迹追踪☆22Updated 8 years ago
- 数据仓库KETTLE ETL资源库☆14Updated 10 years ago
- 大规模分布式系统的跟踪、监控、告警平台☆55Updated 11 years ago
- 分布式大数据SQL查询可视化界面!☆68Updated 10 years ago
- 基于wifi抓取信息的大数据查询分析系统☆110Updated 8 years ago
- 电商秒杀平台后台服务☆17Updated 8 years ago