qiuqingyu / CNKICrawler
中国知网爬虫
☆151Updated 7 years ago
Alternatives and similar repositories for CNKICrawler:
Users that are interested in CNKICrawler are comparing it to the libraries listed below
- 网络爬虫和数据分析，当当、豆瓣、知乎、猫眼、微信公众号、联想官网、今日头条爬虫☆122Updated 5 years ago
- Simple examples of text data visualization. 文本人物可视化，词云、人物关系图谱☆112Updated 7 years ago
- 知网(CNKI)文献下载及文献速览爬虫 (Web Scraper for Extracting Data)☆549Updated 4 months ago
- 中国知网爬虫☆573Updated last month
- 知网爬虫cnkispider，输入关键字爬取知网检索数据☆34Updated 7 years ago
- 新浪微博的爬虫☆81Updated 9 months ago
- 用python判断微博用户的影响力☆52Updated 9 years ago
- 微博超级话题爬虫，微博词频统计+情感分析+简单分类，新增肺炎超话爬取数据☆281Updated 4 years ago
- 徒手实现定时爬取知乎，从中发掘有价值的信息，并可视化爬取的数据作网页展示。☆65Updated 2 years ago
- 基于selenium的轻量级新浪微博爬虫，可实现：1.后台自动爬取微博搜索结果/2.按时间段爬取搜索结果/3.爬取用户基本信息☆51Updated 5 years ago
- 一些 Python 爬虫练习：bilibili用户信息爬取、下载工具、房天下新房二手房redis分布式爬虫、简书全站文章爬取、观察者网站首页新闻爬取、淘宝模拟登陆、淘宝搜索商品信息爬取及可视化展示、知乎问题回答信息爬取\抖音无水印视频下载☆135Updated 2 months ago
- 根据关键词抓取微博数据，再生成词云☆221Updated 7 years ago
- 京东爬虫（大量注释，对刚入门爬虫者极度友好）☆71Updated 5 years ago
- 这是 一个作者毕业设计的爬虫，爬取58同城、赶集网、链家、安居客、我爱我家网站的房价交易数据。☆327Updated 8 years ago
- 新闻爬虫，爬取新浪、搜狐、新华网即时财经新闻。☆185Updated 4 years ago
- 基于微博的数据挖掘与社交舆情分析☆213Updated 6 years ago
- 爬取热门微博评论并进行数据分析、nlp情感分析☆320Updated 6 years ago
- 利用文本挖掘技术进行新闻热点关注问题分析☆161Updated 6 years ago
- A web crawler for Sina, search and retrieve microblogs that contain certain keywords 一个简单的python爬虫实践，爬取包含关键词的新浪微博☆98Updated 6 years ago
- 新浪微博爬虫(Sina weibo spider)，百度搜索结果 爬虫☆194Updated last year
- Python爬取微博，采集的数据属性如下：微博内容，是否原创，转发内容，发布时间，转发数，评论数，点赞数，设备源，微博ID。对于抓取到的页面源码分析不同属性对应的标签分别提取数据。最后将采集到的数据保存为csv格式，供数据分析使用。☆33Updated 5 years ago
- 基于分布式爬虫，采集互联网公开来源的金融类新闻和文档类文本； 基于文本挖掘技术，进行无监督/半监督学习的数据ETL与特征工程； 基于金融数据挖掘技术，进行宏观经济分析，基本面分析与行业分析☆102Updated 6 years ago
- 基于scrapy-redis的分布式新闻爬虫，可同时获取腾讯、网易、搜狐、凤凰网、新浪、东方财富、人民网等各大平台新闻资讯☆44Updated 6 years ago
- 淘宝爬虫命令行版，指定爬取淘宝商品和评论，利用selenium爬取商品信息，requests爬取评论信息。☆93Updated 4 years ago
- 微博内容及评论自动爬取☆45Updated 4 years ago
- scrapy框架爬取51job(scrapy.Spider)，智联招聘(扒接口)，拉勾网(CrawlSpider)☆199Updated last year
- 一个基于关键词爬虫生成词云的网络内容可视化工具，可爬取百度、谷歌、必应、知乎、微博、微信公众平台☆35Updated 5 years ago
- 微博话题关键词,个人微博采集, 微博博文一键删除 selenium获取cookie,requests处理☆31Updated 6 years ago
- 文本分类是指在给定分类体系下 , 根据文本的内容自动确定文本类别的过程。首先我们根据scrapy爬虫根据中国知网URL的规律，爬取70多万条2014年公开的发明专利，然后通过数据清洗筛选出了60多万条含标签数据。通过TF-IDF对60多万条本文进行词频提取，依照词频排序提取…☆106Updated 7 years ago
- 多线程知乎用户爬虫，基于python3☆248Updated last year