MKhaha / governmentcrawler
政府文章爬虫，爬取浙江经济相关网站的文章信息，使用webmagic爬虫框架，并将爬取到的文章信息放入mysql数据库中，使用mybatis作为数据库操作框架。
☆9Updated 7 years ago
Alternatives and similar repositories for governmentcrawler:
Users that are interested in governmentcrawler are comparing it to the libraries listed below
- 天眼查网站批量查询工具☆49Updated last year
- java爬虫，反爬虫策略、ETL清洗数据，以及spark离线和实时分析新闻并存入ES☆21Updated 6 years ago
- (Python/Java)爬虫 + Redis + MySQL实现股票的历史数据查询, 降价通知, 下跌预警, 可视化等功能☆24Updated 4 years ago
- 使用 tensorflow 中的 RNN 相关操作，以《全宋词》为训练数据，训练一 个人工智能写词机。☆13Updated 7 years ago
- 房价数据爬取+分析☆33Updated 8 years ago
- 股票交易数据处理的整个业务流程 数据源--->数据采集--->数据归类--->数据储存--->数据分析--->数据可视化☆31Updated 8 years ago
- 彩票预测☆13Updated 7 years ago
- 通达信java客户端☆30Updated 4 years ago
- 蜂巢爬虫系统 是一套只需要定义XPath，就可实现爬取网站,APP的系统, 支持多种解析方式（XPath,正则表达式），多种下载方式（HttpClient库, PhantomJs, Selenium）,多种输出方式（Excel，MongoDB）。 可不做任何修改发布到Yar…☆10Updated 8 years ago
- 本项目为企业工商信息网络爬虫，输入行业关键字，例如“铜箔”，可爬取八方资源网等工商信息网上所有与铜箔有关企业的工商信息。☆24Updated 6 years ago
- 量化交易网站 java☆11Updated 8 years ago
- 爬取汽车之家与汽车销售网的汽车数据，对数据进行持久化处理存入数据库，搭建一个基于SSM框架的webapp，在app中用echarts插件对数据进行展示。☆7Updated 7 years ago
- 实现文档转换的一个网站，目前支持PDF转Word，对Word文档进行翻译等操作，网站还可以获取网易云热门评论等信息☆12Updated 2 years ago
- 东方财富，量化交易，自动交易☆11Updated 4 years ago
- 微云盘，高仿百度云；使用技术jdbc/servlet/jquery MVC三层架构；同时封装了大量通用工具☆35Updated 5 years ago
- 中文分词、统计词频、比对文本相似度☆38Updated 5 years ago
- 基于scrapy-redis的分布式新闻爬虫，可同时 获取腾讯、网易、搜狐、凤凰网、新浪、东方财富、人民网等各大平台新闻资讯☆44Updated 7 years ago
- 京东商品推荐系统-数据爬虫☆18Updated 10 years ago
- 一个用于爬股票历史数据，并根据历史数据分析挖掘并对未来数据进行预测的项目☆17Updated 7 years ago
- 怪盗キッド（Kaitou Kiddo）☆23Updated 2 years ago
- TuShare是一个免费、开源的python财经数据接口包。主要实现对股票等金融数据从数据采集、清洗加工 到 数据存储的过程，能够为金融分析人员提供快速、整洁、和多样的便于分析的数据，为他们在数据获取方面极大地减轻工作量，使他们更加专注于策略和模型的研究与实现上。☆36Updated 9 years ago
- 股票数据采集、加工、指标量化分析☆66Updated 7 years ago
- 食品安全舆情分析系统（前端展示模块）☆15Updated 9 years ago
- 微信公众号爬虫：服务端公众号文章数据采集☆43Updated 2 years ago
- 新零售大数据平台-运维监控平台的开发☆14Updated 6 years ago
- 飞趣社区做了快两年了，最近也想不到什么新功能去做了，于是想起了开源的事情，我一个人开发终究不能让这个社区走向前方，于是我下定决心开源，开源之前我也蛮纠结的，就像是把自己辛辛苦苦做的东西送给别人了，但是转念一想，也许这会为我的社区向前发展提供助力，不同人的思想或许会激发灵感，…☆42Updated 3 years ago
- 利用HttpClient4+实现网络小说爬虫，可动态添加热门的小说网站☆31Updated 12 years ago
- 金庸小说人物关系挖掘☆51Updated 8 years ago
- 基于Spring boot 实现的股票基金爬虫工具☆32Updated 6 months ago
- Java版本的mitmproxy，对本地浏览器所有的Http(s)请求和响应进行拦截并「重制」；也可充当轻量级B/S版抓包软件；☆44Updated 4 months ago