jangocheng / bdp-base
大数据生态解决方案基础平台: 搜索系统、公共系统、任务管理系统、数据binlog采集、基础爬虫系统、数据传输系统、运维告警系统、APM、报表系统
☆10Updated 4 years ago
Alternatives and similar repositories for bdp-base:
Users that are interested in bdp-base are comparing it to the libraries listed below
- 007 基于网络爬虫技术的新闻分析系统-毕业设计展示 python django vue scrapy jieba nlp 爬虫抓取 新闻列表 新闻详情 新闻分类 新闻摘要抽取 关键词分析 情感分析 朴素贝叶斯算法 词性分析 后台管理新闻数据☆11Updated last year
- 小宝人工智能和量化平台BaoAI后端项目。BaoAI采用前后端分离框架，前端项目baoaifront，后端项目baoaiback。BaoAI是简洁、直观、强大的前端和后端SPA开发框架，支持国际化，以模块为基础，让WEB应用、人工智能和量化系统开发更迅速、更简单。平台包含多…☆34Updated 2 years ago
- django+es搭建的前后端分离，唐诗宋词搜索引擎。☆34Updated 2 years ago
- 传统大数据分析工具以Hadoop、Spark为代表，集成了大量的技术框架， 对用户来说又重又笨又不灵活，难以维护和驾驭，国际和国内的敏捷型BI工具在对接时又面临性能、友好性、定制化能力弱的缺点。本项目独辟蹊径，以阿里开源的DataX为ETL工具，以列式数据库ClickHou…☆64Updated 4 years ago
- BOSS系统是一个数字化运营平台。该系统实现了公司销售人员、渠道代理人员、超级管理员的基本工作，可以维护渠道商机等商业数据，把商业机会数字化，客户跟踪历史记录，批量导入客户信息，多条件筛选，提高工作人员的协作能力，实现总公司、代理、销售三位一体运营,实现数字化运营☆23Updated 7 years ago
- 一个类似抽屉新热榜的新闻聚合分享站点☆14Updated 8 years ago
- 企业级 Spring Cloud Alibaba 微服务脚手架，nacos 配置中心、Oauth2认证与鉴权、Docker 容器化部署，开发环境一键式脚本安装，10分钟即可构建☆19Updated 3 years ago
- 猫头鹰搜索引擎，爬虫，分词，索引，搜索☆27Updated 9 years ago
- 给定文本和图片，自动生成一个相应的含字幕的短视频。完全自动化，可批量生成☆23Updated 7 months ago
- 实现了一整套电商数仓的搭建，包括数据采集平台的搭建，将用户的行为数据分为四层分别分层搭建，并实现业务数据库的分层搭建，针对数据仓库中的数据进行，留存、转化率、复购率、GMV、活跃等报表分析，使用当下主流程数的框架，这个项目采用Apache版本的框架实现，后续会上传CDH版本…☆50Updated 2 years ago
- 生成短视频（翻译字幕，生成AI语音，图片合成动态视频，反向解析视频中单图）☆27Updated last year
- 物业管理APP，前后端分离，基于vue2，uniapp，vue-cli，springboot，springsecurity，mybatisplus，mysql初步实现物业管理APP前端界面，后台管理界面，后台系统☆21Updated 3 years ago
- 搜索引擎关键词排位爬虫，包括百度，搜狗，360的搜索引擎关键词排位爬虫，关键词从百度热词中取得，排位分别从三个搜索引擎中抓取。☆19Updated 5 years ago
- 电商平台API接入(天猫，淘宝，京东，抖音，拼多多，快手，小红书，得物，微信视频号，当当，1688，微店，有赞，快团团，网易考拉等)，通过各平台API将平台订单接 入到自有ERP/WMS等系统，从而实现在自有系统内对订单进行打单发货等操作。☆9Updated 11 months ago
- 本项目为企业工商信息网络爬虫，输入行业关键字，例如“铜箔”，可爬取八方资源网等工商信息网上所有与铜箔有关企业的工商信息。☆23Updated 6 years ago
- 基于scrapy的中国国内各大新闻网站内容爬虫☆26Updated 3 years ago
- 数据采集、数据审核、数据分析平台☆11Updated 2 years ago
- 基于python的二手商品交易平台 python+django开发的供需平台 - 毕业设计 - 课程设计☆33Updated 11 months ago
- 基于关键字的配置化电商爬虫，目前已实现京东和苏宁（淘宝反爬太严重，因为没有使用selenium）☆13Updated 4 years ago
- 一个用Laravel，Vue构建的后台程序，包含登录，后台权限管理，系统配置，图表,日志管理，网站管理，会员管理，财务管理等模块，演示地址：☆15Updated 2 years ago
- 使用scrapy从全国六大较权威的新闻网站(澎湃新闻、新华网、新京报、凤 凰网、光明网、人民网)爬取最近15天内的新闻，利用爬取数据提取省份信息、计算新闻热点值、使用预训练模型生成新闻类别后存入Mysql数据库，网页使用HTML、CSS、JavaScript进行编写，采用开…☆24Updated 2 years ago
- 微信公众号爬虫：服务端公众号文章数据采集☆43Updated 2 years ago
- 使用opnccv做中医舌诊视频、图像诊断的研究☆24Updated 7 years ago
- Python爬虫框架：PySpider，既简单易用又功能强大且带图形界面☆36Updated 3 years ago
- 本文使用Python编写爬虫，通过向端口传送请求并且抓取传输过来的json字符串来获取招聘职位信息，并且分类保存为csv格式的表格文件。最后通过长时间的爬取，最终得到37.7MB的表格数据，共计314093个招聘信息。之后通过SPSS对数据进行预处理和统计，再进行深度数据分…☆36Updated 8 years ago
- 一款发现身边般配情侣、撮合般配陌生人的交友应用。django后台接口☆13Updated 8 years ago
- 其中包括：Python的数据结构和算法相关内容，一个完整的Django的web项目，还有MiniWeb相关内容，和多线程的协程、进程、线程，和网络编程，还有和数据库的交互，比如Mongodb、Mysql、Redis，其中还有PyQt5，还有可视化内容相关，还有整套Pytho…☆17Updated last year
- 企业门户网站☆9Updated 12 years ago