jangocheng / bdp-baseLinks
大数据生态解决方案基础平台: 搜索系统、公共系统、任务管理系统、数据binlog采集、基础爬虫系统、数据传输系统、运维告警系统、APM、报表系统
☆10Updated 4 years ago
Alternatives and similar repositories for bdp-base
Users that are interested in bdp-base are comparing it to the libraries listed below
Sorting:
- 007 基于网络爬虫技术的新闻分析系统-毕业设计展示 python django vue scrapy jieba nlp 爬虫抓取 新闻列表 新闻详情 新闻分类 新闻摘要抽取 关键词分析 情感分析 朴素贝叶斯算法 词性分析 后台管理新闻数据☆13Updated 2 years ago
- 基于python的二手商品交易平台 python+django开发的供需平台 - 毕业设计 - 课程设计☆37Updated last year
- 基于 Scrapy 的新闻智能分类微信小程序，是一个文本分类相关的应用，目的是打造出一个可以对新闻进行智能分类的微信小程序。技术栈：Python + Scrapy + MongoDB + scikit-learn + Flask + 微信小程序，涉及爬虫、文本分类、Web …☆63Updated 6 years ago
- django实现的前后端分离在线教育系统，包含考试和视频点播☆36Updated 2 years ago
- 使用scrapy从全国六大较权威的新闻网站(澎湃新闻、新华网、新京报、凤 凰网、光明网、人民网)爬取最近15天内的新闻，利用爬取数据提取省份信息、计算新闻热点值、使用预训练模型生成新闻类别后存入Mysql数据库，网页使用HTML、CSS、JavaScript进行编写，采用开…☆29Updated 3 years ago
- 定时爬取百度搜索风云榜实时热点.☆35Updated last week
- 小宝人工智能和量化平台BaoAI后端项目。BaoAI采用前后端分离框架，前端项目baoaifront，后端项目baoaiback。BaoAI是简洁、直观、强大 的前端和后端SPA开发框架，支持国际化，以模块为基础，让WEB应用、人工智能和量化系统开发更迅速、更简单。平台包含多…☆35Updated 2 years ago
- 各种爬虫：爱企查爬虫，网上114企业信息爬虫，抖音视频爬虫，wipo爬虫， 专利信息爬虫（patentscope）☆76Updated 3 years ago
- 可视化爬虫自动采集平台☆186Updated 2 years ago
- ElasticSearch+Django+Scrapy搜索引擎☆28Updated 2 years ago
- vue+Python+flask 资产管理系统☆35Updated 2 years ago
- [2023.05.09]基于selenium的新浪微博关键字搜索结果全自动爬虫，支持自定义搜素关键字、搜索起始时间、爬取起始页数（以实现中断后接上次继续爬取）。爬取内容包括微博账号、发文时间、发送平台、微博内容、转发次数、评论次数、点赞次数、原博地址。☆31Updated 2 years ago
- Python网络爬虫与推荐算法新闻推荐平台：网络爬虫：通过Python实现新浪新闻的爬取，可爬取新闻页面上的标题、文本、图片、视频链接（保留排版） 推荐算法：权重衰减+标签推荐+区域推荐+热点推荐☆119Updated 4 years ago
- 该项目是基于Scrapy框架的Python新闻爬虫，能够爬取网易，搜狐，凤凰和澎湃网站上的新闻，将标题，内容，评论，时间等内容整理并保存到本地☆39Updated 6 years ago
- 给定文本和图片，自动生成一个相应的含字幕的短视频。完全自动化，可批量生成☆26Updated last year
- 毕业设计京东商品评论爬虫分析☆14Updated 6 years ago
- Django框架编写的简易个人网盘☆33Updated 2 years ago
- 通用新闻类网站分布式爬虫☆79Updated 7 years ago
- 基于scrapy的中国国内各大新闻网站内容爬虫☆28Updated 3 years ago
- 项目名称：基于Python的疫情实时监控系统。项目基于Python语言、Python的Flask框架和Echarts来做的，涉及的技术有Python网络爬虫；Python与MySQL数据库的交互；Flask框架构建Web项目；Echarts数据可视化显示；Linux部署we…☆31Updated 5 years ago
- 淘宝模拟登录，销售数据，评论数据，商品评分数据爬取（学数据分析的可以用于获取淘宝电商的销售数据，学爬虫的可以参考一下思路和方法），由于评论数据比较大，暂时没办法上传，大家也可以直接用下面的代码爬取☆46Updated 5 years ago
- 这是一个Python FastAPI项目工程库，包含DB、Redis、MongoDB、JSON等工具和基础服务类。☆22Updated 4 years ago
- 爬取智联招聘网数据，并对其进行招聘数据可视化，爬虫，Data visualization，Django2，echarts☆136Updated 2 years ago
- 使用 python 操作大数据的各种组件☆68Updated 2 years ago
- 基于LDA+SVM可拓展的短文本分类。股市舆情监控系统☆28Updated 5 years ago
- 系统从互联网爬取资讯，对热点公共事件进 行检测、聚合和追踪，多维度分析事件内容，监测时间传播路径，分析用户的观点和和情绪，形成摘要、报告、图表等分析结果，实现公共事件的舆情分析可视化系统，提供专业的舆情监测、分析和预警服务☆96Updated 7 years ago
- 网络舆情分析系统☆191Updated 9 years ago
- 高考成绩分析系统☆15Updated 7 years ago
- 音乐推荐系统，python编写，涉及flask框架，scrapy爬虫，MySQL数据库，selenium，chrome driver，使用surprise库协同过滤算法☆85Updated 6 years ago
- 毕设项目--面向短视频的流量数据爬取和分析系统☆36Updated 5 years ago