lipengyu / uudatahiveLinks
蜂巢爬虫系统 是一套只需要定义XPath,就可实现爬取网站,APP的系统, 支持多种解析方式(XPath,正则表达式),多种下载方式(HttpClient库, PhantomJs, Selenium),多种输出方式(Excel,MongoDB)。 可不做任何修改发布到Yarn,Docker,Mesos系统中实现分布式。
☆10Updated 9 years ago
Alternatives and similar repositories for uudatahive
Users that are interested in uudatahive are comparing it to the libraries listed below
Sorting:
- spring cloud集成全渠道在线客服以及后台管理系统,所有微服务之间的消息传递采用区块链技术,持续更新中~~目标是:第一阶段:采用spring cloud微服务搭建后台管理系统第二阶段:集成在线客服,采用netty实现websocket长连接第三阶段:集成h5、微信、…☆18Updated 2 years ago
- 中文分词、统计词频、比对文本相似度☆40Updated 6 years ago
- 视频、音频、图片内容识别、语音转写、语音合成 / easy convert video audio image to text, and revert text to audio(base64)☆22Updated 11 months ago
- 爬虫项目源码整理,使用redis进行url缓存,hbase进行详细信息的存储。使用zookeeper进行爬虫线程的状态监控。☆19Updated 9 years ago
- 京东商品推荐系统-数据爬虫☆18Updated 10 years ago
- 基于词典的负面舆情信息评分算法。☆26Updated 10 years ago
- 基于Map/Reduce爬虫,可抽取各大新闻网站的新闻正文并进行分类和聚类☆74Updated 11 years ago
- 全渠道整合智能在线客服系统☆39Updated 8 years ago
- 基于Nutch+ElasticSearch+MySQL+SSM的简易搜索引擎☆20Updated 9 years ago
- 蜂鸟数据分析平台帮助企业快速完成多数据整合,建立统一数据口径,支持自助式数据准备(ETL), 并提供可视化分析,帮助企业构建贴合自身业务的企业洞察,并将数据决策覆盖各层员工及应用场景☆21Updated 6 years ago
- 车联网智能分析系统☆52Updated 8 years ago
- 简单高效的URL关键词提取工具☆15Updated 6 years ago
- Fitting是一个面向大数据的统一的开发框架,由大快搜索主导并完全开源,克服了大数据技术开发涉及技术面广,各组件间缺乏统一规范等问题,能有效降低大数据的学习难度,并提高大数据项目的开发效率并可与开源项目混用。 Fitting遵循Apache2.0开源协议,采用类黑箱框架模…☆179Updated 2 years ago
- 智能客服 基于springboot+swaggger+elasticsearch+mysql☆10Updated 7 years ago
- 此文本分类项目主要面向机器学习初学者和文本分类效果测试者,项目内部含有朴素贝叶斯,余弦定理,逻辑回归多种分类算法以及mm,rmm分词器,同时从某新闻站点爬取了多个分类共6000多篇文章,以及一个中文词典。项目方便自由拓展各种分类器和分词器,并通过组装测试分类效果。☆36Updated 7 years ago
- django+es搭建的前后端分离,唐诗宋词搜索引擎。☆36Updated 3 years ago
- 1、支持网页爬虫 2、多线程、线程池 3、支持全文搜索 4、支持Hadoop分布式平台、HDFS/MapReduce、Zookeeper、HBase 5、支持redis分布式缓存 6、集成微信公众号开发 7、Spring4新特性 8、ActiveMQ 9、Nginx详细配置…☆16Updated 2 years ago
- spark tutorial for big data mining。包括app流量运营分析、als推荐、smote样本采样、RFM客户价值分群、AHP层次分析客户价值得分、手机定位数据商圈挖掘、马尔可夫智能邮件预测、时序预测、关联规则、推荐电影好友等。☆40Updated 3 years ago
- 论坛日志分析系统清洗程序(包含IP规则库,UDF开发,MapReduce程序,日志数据)☆33Updated 7 years ago
- 数据处理平台☆16Updated 8 years ago
- 使用SpringBoot开发的云舒短视频微信小程序(服务端) 分布式Session,模块化开发,容器化部署☆11Updated 5 years ago
- 商品秒杀系统——Java并发实战和并发优化☆12Updated 8 years ago
- JEECMS是一款基于JAVA技术研发的站群管理系统。 1、支持大规模网站群管理; 2、跨站全文检索、数据共享; 3、微官网/手机网站同步建设; 4、高效二次开发的插件化管理 5、支持可视化模板制作;☆26Updated 8 years ago
- 数据分析快速开发平台:包含统一数据访问接口,数据建模,数据治理,数据展现☆23Updated 7 years ago
- java 基于selenium抓取搜狗微信公众号文章☆50Updated 9 years ago
- 微信公众号老人健康管理、在线健康管理、在线医疗管理、微信健康管理、短信及微信推文、冠心病评估,用户端:(身体指标(血压、血糖、体重)发送短信及微信推文、冠心病评估、浏览推文、历史数据、管理员端:添加管理员、管理用户( 信息修改、删除)、查询用户数据(身体指标)、推文添加、最近…☆31Updated 4 years ago
- 规则引擎(drools示例,基于MVEL的规则引擎)☆29Updated 3 years ago
- java爬虫,反爬虫策略、ETL清洗数据,以及spark离线和实时分析新闻并存入ES☆20Updated 6 years ago
- 基于Spring Cloud Alibaba实现分布式广告系统☆48Updated 3 years ago
- 数据可视化, 数据挖掘, 数据处理 ETL分析☆169Updated 3 years ago