moyuweiqing / douban-crawler-and-analysisLinks
豆瓣电影爬虫，爬取评论情况并进行分析，使用echart进行可视化
☆12Updated 5 years ago
Alternatives and similar repositories for douban-crawler-and-analysis
Users that are interested in douban-crawler-and-analysis are comparing it to the libraries listed below
Sorting:
- 观察者新闻网爬虫（新闻爬虫），基于python+Flask+Echarts，实现首页与更多新闻页面爬取（Requests+etree+Xpath）+新闻存储(MySQL)+文本分析(Jieba)+可视化(新闻词云，词频统计）。☆103Updated 3 years ago
- 毕业设计京东商品评论爬虫分析☆13Updated 6 years ago
- 基于scrapy爬虫和single-pass聚类算法的微博话题检测系统☆9Updated 5 years ago
- 通过python爬虫获取人民网、新浪等网站新闻作为训练集，基于BERT构建新闻文本分类模型，并结合node.js + vue完成了一个可视化界面。☆43Updated 3 years ago
- 请切换分支到Django-vue！！！毕业设计-中国知网（cnki）爬虫及数据可视化，采用Django和Celery将爬虫内置在网站内，展示实时爬取的数据☆78Updated 4 years ago
- 一个自然语言处理的可视化系统，实现自动生成词云图、文章关键信息提取、多文档主题分布、文本分类等功能，还有一些业务数据的可视化图表展示。☆36Updated 4 years ago
- 计算社会学，爬虫，机器学习，情感分析，疫情舆论☆23Updated 4 years ago
- 爬取新浪微博数据并可视化分析☆41Updated 4 years ago
- 去哪儿网爬虫（景区与景区评论）☆9Updated 6 years ago
- 全唐诗数据挖掘，分析☆86Updated 7 years ago
- 與情分析系统，包括爬虫、数据清洗、文本摘要、主题分类、情感倾向性识别以及分析结果数据可视化☆424Updated 3 years ago
- 基于UIE的舆论情感分析Web系统，前后端分离式架构部署，支持单文本属性级情感分析及上传txt文件进行批量情感分析，并支持分析结果的可视化展示。 技术栈：后端：FastAPI + UIE；前端：Vue + ElementUI + Echarts。☆60Updated 2 years ago
- 关键词：京东商品评论爬虫 苏宁商品评论爬虫 评论情感分析 爬取京东苏宁商品信息（手机 笔记本电脑） 以及商品的评论 然后集成到web上，实现了价格评价的比较 并且对每件商品评论进行了情感分析，绘制了评论的词云☆55Updated 2 years ago
- 微博评论爬取及nlp情感分析☆20Updated 7 years ago
- 京东评论爬虫，包含对数据的采集、清洗、可视化、分析等过程，作为数据库课程设计项目☆308Updated 7 months ago
- 利用Python编程爬虫搜集微博平台上关于大学生网课的评论，使用SPSS、机器学习、自然语言处理等方法，对收集到的文本数据进行分词、数据清洗、词频统计和聚类分析。最后根据所得到的数据进行以及分析，发现目前在线教学 中学生体验的现状、趋势以及一些待解决的问题。☆45Updated 3 years ago
- 携程/榛果民宿实时评论挖掘软件，包含数据的实时采集/数据清洗/结构化保存/ UGC 数据主题提取/情感分析/后结构化可视化等技术的综合性演示 Demo。基于在线民宿 UGC 数据的意见挖掘项目，包含数据挖掘和 NLP 相关的处理，负责数据采集、主题抽取、情感分析等任务。主要…☆78Updated 4 years ago
- 使用scrapy从全国六大较权威的新闻网站(澎湃新闻、新华网、新京报、凤 凰网、光明网、人民网)爬取最近15天内的新闻，利用爬取数据提取省份信息、计算新闻热点值、使用预训练模型生成新闻类别后存入Mysql数据库，网页使用HTML、CSS、JavaScript进行编写，采用开…☆28Updated 2 years ago
- [2023.05.09]基于selenium的新浪微博关键字搜索结果全自动爬虫，支持自定义搜素关键字、搜索起始时间、爬取起始页数（以实现中断后接上次继续爬取）。爬取内容包括微博账号、发文时间、发送平台、微博内容、转发次数、评论次数、点赞次数、原博地址。☆32Updated last year
- Python爬取豆瓣电影top250部 使用flask框架可视化数据☆82Updated last year
- 数据科学基础大作业：实现的技术包括利用python爬虫，爬取关键词搜索的微博正文，特定微博下的评论；预处理微博文本；手写textRank；聚类，kmeans，DBSCAN，层次聚类；情感词典情感分析；pyecharts可视化绘图☆71Updated last year
- 基于淘宝、京东爬虫及商品评论情感分析的商品评价系统☆84Updated 2 years ago
- 练手项目：Comment of Interest 电商文本评论数据挖掘 （爬虫 + 观点抽取 + 句子级和观点级情感分析）☆103Updated 4 years ago
- 实习实训大作业：基于python的电商产品评论数据情感分析☆26Updated 2 years ago
- 微博评论情感分析，爬虫，文本分类，Web。☆46Updated 2 years ago
- 本项目以数据采集、处理、分析及数据可视化为项目流程，实现百万级电影数据离线处理与计算。功能包括python爬虫，Matplotlib、Echarts数据可视化、Mapreduce、hive数据统计、情感分析、词图云、电影票房与评分预测☆211Updated 3 years ago
- 微博爬虫，爬去微博语料，情感分析，user-agent池，充足IP，scrapy，mongodb☆16Updated 6 years ago
- 毕业设计：微博用户情感分析系统Django+vue☆455Updated 5 years ago
- 利用微博热点话题舆情聚类分析☆298Updated 5 years ago
- 一个比较全面的文本挖掘过程。包含了利用机器学习和文本挖掘技术完成情感分析模型搭建；利用情感极性判断与程度计算来判断情感倾向；利用词频和TF-IDF挖掘出正负文本中的关键点情况；利用文 本挖掘相关算法找到平台中用户讨论的集中点。☆37Updated 3 months ago