aFlyBird0 / CnkiSpider
知网爬虫，专利、论文项目。仅供学习交流，严禁盈利
☆39Updated 2 years ago
Related projects: ⓘ
- 知网论文数据爬虫☆47Updated 7 months ago
- 2021最新中国知网Selenium爬虫☆11Updated 2 years ago
- 基于 Scrapy 的新闻智能分类微信小程序，是一个文本分类相关的应用，目的是打造出一个可以对新闻进行智能分类的微信小程序。技术栈：Python + Scrapy + MongoDB + scikit-learn + Flask + 微信小程序，涉及爬虫、文本分类、Web …☆55Updated 5 years ago
- 携程/榛果民宿实时评论挖掘软件，包含数据的实时采集/数据清洗/结构化保存/ UGC 数据主题提取/情感分析/后结构化可视化等技术的综合性演示 Demo。基于在线民宿 UGC 数据的意见挖掘项目，包含数据挖掘和 NLP 相关的处理，负责数据采集、主题抽取、情感分析等任务。主要…☆66Updated 3 years ago
- [2023.05.09]基于selenium的新浪微博关键字搜索结果全自动爬虫，支持自定义搜素关键字、搜索起始时间、爬取起始页数（以实现中断后接上次继续爬取）。爬取内容包括微博账号、发文时间、发送平台、微博内容、转发次数、评论次数、点赞次数、原博地址。☆28Updated 10 months ago
- 知网爬虫cnkispider，输入关键字爬取知网检索数据☆30Updated 6 years ago
- 豆瓣Top250影评爬虫（用于情感分析语料）☆20Updated last year
- 新闻搜索引擎，定时自动爬取各大新闻门户网站，并提供检索功能，对检索话题（关键词）进行热度、新鲜程度的反馈，并返回所有能找到的新闻。（如新浪新闻、网易新闻等，或某垂直领域权威性的网站如经济领域的雪球财经、东方财富等，或者体育领域的腾讯体育、虎扑体育等）☆28Updated last year
- 对淘宝（天猫）的评论爬取并进行简单分析☆26Updated 4 years ago
- 情感分析，微博情感分析，微博水军检测，水军检测，营销粉检测，僵尸粉检测，微博爬虫☆63Updated 3 years ago
- 搜索引擎关键词排位爬虫，包括百度，搜狗，360的搜索引擎关键词排位爬虫，关键词从百度热词中取得，排位分别从三个搜索引擎中抓取。☆18Updated 4 years ago
- 该项目是基于Scrapy框架的Python新闻爬虫，能够爬取网易，搜狐，凤凰和澎湃网站上的新闻，将标题，内容，评论，时间等内容整理并保存到本地☆36Updated 5 years ago
- 微博的爬虫，爬个人主页，用的scrapy 框架☆22Updated 4 months ago
- 系统从互联网爬取资讯，对热点公共事件进行检测、聚合和追踪，多维度分析事件内容，监测时间传播路径，分析用户的观点和和情绪，形成摘要、报告、图表等分析结果，实现公共事件的舆情分析可视化系统，提供专业的舆情监测、分析和预警服务☆75Updated 6 years ago
- 能够采集微博博主,博文,评论,分析博主信息,博文话题等,构建社交网络,同时对数据和网络进行分析的工具.☆19Updated 5 years ago
- 使用scrapy从全国六大较权威的新闻网站(澎湃新闻、新华网、新京报、凤 凰网、光明网、人民网)爬取最近15天内的新闻，利用爬取数据提取省份信息、计算新闻热点值、使用预训练模型生成新闻类别后存入Mysql数据库，网页使用HTML、CSS、JavaScript进行编写，采用开…☆22Updated 2 years ago
- 一个基于关键词爬虫生成词云的网络内容可视化工具，可爬取百度、谷歌、必应、知乎、微博、微信公众平台☆30Updated 4 years ago
- 微博模拟登录+微博关键词爬虫+微博短文本情感语义分析+生成词云☆19Updated 6 years ago
- 基于scrapy的中国国内各大新闻网站内容爬虫☆25Updated 2 years ago
- 爬取微博用户关注列表，生成好友关系网，绘制社交关系图谱☆38Updated last year
- 微博评论情感分析，爬虫，文本分类，Web。☆42Updated last year
- 爬取智联招聘网数据，并对其进行招聘数据可视化，爬虫，Data visualization，Django2，echarts☆122Updated last year
- 【信息检索课程设计】sdu新闻网站全站爬取+索引构建+搜索引擎☆56Updated 3 months ago
- bilibili弹幕分析，包含爬虫、词云分析、词频分析 、情感分析、构建衍生指标，可视化☆150Updated last year
- Python Spider for weibo friends analysis. (Professional Edition) / 微博用户好友人际关系网络深度分析（可使用 Gephi、Tableau 进行数据可视化）。☆31Updated last year
- 基于Python爬虫技术的中国知网(CNKI)文献检索与下载程序，能够便利文献的检索与信息下载！☆13Updated last year
- XiuSearch是一款搜索技术博客的搜索 引擎，当然，如果你将种子网址换成新闻网站，这就是一个新闻搜索引擎，它对于文章搜索来说是通用的。☆50Updated 2 years ago
- selenium裁判文书网爬虫，文书网登录☆35Updated 2 years ago
- 基于selenium的轻量级新浪微博爬虫，可实现：1.后台自动爬取微博搜索结果/2.按时间段爬取搜索结果/3.爬取用户基本信息☆48Updated 4 years ago
- 知乎爬虫，用于爬取问题和对应的回答☆23Updated last year