MKhaha / governmentcrawler
政府文章爬虫,爬取浙江经济相关网站的文章信息,使用webmagic爬虫框架,并将爬取到的文章信息放入mysql数据库中,使用mybatis作为数据库操作框架。
☆9Updated 6 years ago
Related projects ⓘ
Alternatives and complementary repositories for governmentcrawler
- 微博数据展示与舆情监控系统后台API☆63Updated 6 years ago
- 爬虫程序:支持爬取问答类网站(Quora/SO/Yahoo Answer/知乎/百度知道等)、百科类网站(百度百科/中英文维基百科等)、博客类网站(CSDN/Twitter等)☆27Updated 6 years ago
- 股票交易数据处理的整个业务流程 数据源--->数据采集--->数据归类--->数据储存--->数据分析--->数据可视化☆31Updated 7 years ago
- 东方财富,量化交易,自动交易☆11Updated 3 years ago
- 使用 tensorflow 中的 RNN 相关操作,以《全宋词》为训练数据,训练一个人工智能写词机。☆13Updated 6 years ago
- 量化交易网站 java☆11Updated 7 years ago
- 爬取汽车之家与汽车销售网的汽车数据,对数据进行持久化处理存入数据库,搭建一个基于SSM框架的webapp,在app中用echarts插件对数据进行展示。☆7Updated 6 years ago
- (Python/Java)爬虫 + Redis + MySQL实现股票的历史数据查询, 降价通知, 下跌预警, 可视化等功能☆24Updated 3 years ago
- 面向证券信息类专业搜索引擎,基于WEB信息挖掘技术的专业搜索引擎设计与实现并着重分析基于特定主题的爬取方法,通过下载Internet上WEB文档,进行过滤、分词、转换等处理工作,并建立索引数据库,最终可由检索器通过用户输入查询关键字,搜索器支持微博客、短信等内容短小而又不规…☆23Updated 5 years ago
- 大师兄股票实时行情同步工具☆80Updated last year
- 一个用于爬股票历史数据,并根据历史数据分析挖掘并对未来数据进行预测的项目☆17Updated 7 years ago
- 新零售大数据平台-运维监控平台的开发☆14Updated 5 years ago
- 美团爬虫,优化了部分中断处理,以及IP代理池☆11Updated 3 years ago
- 基于python的热门旅游景点爬取与展示系统☆12Updated 3 years ago
- 通达信java客户端☆28Updated 4 years ago
- 中国明星数据爬取。你甚至可以拿到互联网上所有的人之间的关系,接下来你可以自己发挥!基于这些数据,你可以完成更多有趣的事情。比如说社交网络分析,关系网络可视化,算法研究,和其他有意思的事情。Chinese star data crawling. You can even ge…☆27Updated 6 years ago
- 舆情分析平台☆33Updated 7 years ago
- 中文分词、统计词频、比对文本相似度☆37Updated 5 years ago
- 房价数据爬取+分析☆32Updated 7 years ago
- QQ中国象棋(传统版)棋盘识别与自动下棋☆19Updated 10 years ago
- 基于多进程的期货程序化交易系统☆10Updated 3 years ago
- 蜂巢爬虫系统 是一套只需要定义XPath,就可实现爬取网站,APP的系统, 支持多种解析方式(XPath,正则表达式),多种下载方式(HttpClient库, PhantomJs, Selenium),多种输出方式(Excel,MongoDB)。 可不做任何修改发布到Yar…☆10Updated 8 years ago
- 股票数据采集、加工、指标量化分析☆65Updated 6 years ago
- spring cloud集成全渠道在线客服以及后台管理系统,所有微服务之间的消息传递采用区块链技术,持续更新中~~目标是:第一阶段:采用spring cloud微服务搭建后台管理系统第二阶段:集成在线客服,采用netty实现websocket长连接第三阶段:集成h5、微信、…☆16Updated last year
- 食品安全舆情分析系统(前端展示模块)☆15Updated 9 years ago
- 项目中常用的基础功能实现类。如图片处理、文件操作、短信发送、地图定位、距离计算、MD5、二维码生成与解析、在线支付、消息推送、JSON处理等等。☆11Updated 8 years ago
- 金融数据爬虫☆29Updated 8 years ago
- 股票行情--来源恒生,新浪,腾讯,网易☆32Updated 6 years ago
- 视频、音频、图片内容识别、语音转写、语音合成 / easy convert video audio image to text, and revert text to audio(base64)☆21Updated last month
- 微信公众号爬虫:服务端公众号文章数据采集☆43Updated last year
- java爬虫,反爬虫策略、ETL清洗数据,以及spark离线和实时分析新闻并存入ES☆21Updated 5 years ago