lipengyu / uudatahiveLinks
蜂巢爬虫系统 是一套只需要定义XPath,就可实现爬取网站,APP的系统, 支持多种解析方式(XPath,正则表达式),多种下载方式(HttpClient库, PhantomJs, Selenium),多种输出方式(Excel,MongoDB)。 可不做任何修改发布到Yarn,Docker,Mesos系统中实现分布式。
☆10Updated 8 years ago
Alternatives and similar repositories for uudatahive
Users that are interested in uudatahive are comparing it to the libraries listed below
Sorting:
- Fitting是一个面向大数据的统一的开发框架,由大快搜索主导并完全开源,克服了大数据技术开发涉及技术面广,各组件间缺乏统一规范等问题,能有效降低大数据的学习难度,并提高大数据项目的开发效率并可与开源项目混用。 Fitting遵循Apache2.0开源协议,采用类黑箱框架模…☆177Updated 2 years ago
- 本项目目的在于构建一个标准化的NLP处理框架,提供企业级的API,以及各种推荐实现和测试包。 目前国内外有不少NLP语言包,包括中科院、复旦大学的,通过对这些常用NLP软件的封装,可以为企业提供一个可以根据需要来对比和无缝切换底层实现的NLP框架。☆22Updated last year
- spring cloud集成全渠道在线客服以及后台管理系统,所有微服务之间的消息传递采用区块链技术,持续更新中~~目标是:第一阶段:采用spring cloud微服务搭建后台管理系统第二阶段:集成在线客服,采用netty实现websocket长连接第三阶段:集成h5、微信、…☆18Updated 2 years ago
- 视频、音频、图片内容识别、语音转写、语音合成 / easy convert video audio image to text, and revert text to audio(base64)☆22Updated 9 months ago
- 简单高效的URL关键词提取工具☆15Updated 6 years ago
- 基于Nutch+ElasticSearch+MySQL+SSM的简易搜索引擎☆20Updated 8 years ago
- 美团爬虫,优化了部分中断处理,以及IP代理池☆12Updated 4 years ago
- bank银行巡检系统和CRM客户管理系统☆8Updated 8 years ago
- java爬虫,反爬虫策略、ETL清洗数据,以及spark离线和实时分析新闻并存入ES☆20Updated 6 years ago
- 中文分词、统计词频、比对文本相似度☆39Updated 6 years ago
- django+es搭建的前后端分离,唐诗宋词搜索引擎。☆34Updated 3 years ago
- 此文本分类项目主要面向机器学习初学者和文本分类效果测试者,项目内部含有朴素贝叶斯,余弦定理,逻辑回 归多种分类算法以及mm,rmm分词器,同时从某新闻站点爬取了多个分类共6000多篇文章,以及一个中文词典。项目方便自由拓展各种分类器和分词器,并通过组装测试分类效果。☆35Updated 7 years ago
- 天眼查网站批量查询工具☆49Updated last year
- 实现了一整套电商数仓的搭建,包括数据采集平台的搭建,将用户的行为数据分为四层分别分层搭建,并实现业务数据库的分层搭建,针对数据仓库中的数据进行,留存、转化率、复购率、GMV、活跃等报表分析,使用当下主流程数的框架,这个项目采用Apache版本的框架实现,后续会上传CDH版本…☆53Updated 3 years ago
- 品优购网上商城是一个综合性的 B2B2C 平台,类似京东商城、天猫商城。网站采用商家入驻的模式,商家入驻平台提交申请,有平台进行资质审核,审核通过后,商家拥有独立的管理后台录入商品信息。商品经过平台审核后即可发布。 品优购网上商城主要分为网站前台、运营商后台、商家管理后台…☆45Updated 5 years ago
- 一个SpringMVC4+EasyUI的后台管理系统,重新整理简洁版:后台管理系统模板☆27Updated 6 years ago
- 微信小程序-基于SpringBoot的实现Maven聚合,分为core核心模块,service服务模块,gateway对外网关模块,目前已经实现Shrio鉴权jwt监控鉴权,为小程序提供统一规范接口,以及小程序配套后台.☆56Updated 3 years ago
- 全渠道整合智能在线客服系统☆39Updated 7 years ago
- 数据处理平台☆16Updated 8 years ago
- 推荐系统相关代码☆23Updated 10 years ago
- 轻量级规则引擎☆24Updated 7 years ago
- 基于Spring Cloud Alibaba实现分布式广告系统☆47Updated 3 years ago
- 🦅 wx-mp、mall、coupon、payment-gateway、wx-pay、alipay、spring-security、comment、rbac、message / 微信公众号(支持多公众号) / 商城(含订单、优惠券) / 账户体系 / 消息通知 等☆13Updated 3 years ago
- 基于Kettle的MySQL数据库同步☆26Updated 7 years ago
- 使用SpringBoot开发的云舒短视频微信小程序(服务端) 分布式Session,模块化开发,容器化部署☆11Updated 5 years ago
- 由java构建的轻量级消息队列,支持订阅和点对点模式☆33Updated 6 years ago
- 数据库访问中间件,统一的标准sql查询,底层可以是不同的数据库包括mysql、ElasticSearch、kylin、presto等。☆15Updated 7 years ago
- 基于词典的负面舆情信息评分算法。☆26Updated 10 years ago
- 智能客服 基于springboot+swaggger+elasticsearch+mysql☆10Updated 6 years ago
- 基于Map/Reduce爬虫,可抽取各大新闻网站的新闻正文并进行分类和聚类☆76Updated 11 years ago