flicck / CninfoDistributedSpiderLinks
针对巨潮资讯网上市公司公告的分布式爬虫,采用scrapy和kafka的分布式架构。可以爬取爬取指定上市公司列表、指定时间段内的所有公告并保存PDF。后续会加入搜索引擎功能
☆19Updated 5 years ago
Alternatives and similar repositories for CninfoDistributedSpider
Users that are interested in CninfoDistributedSpider are comparing it to the libraries listed below
Sorting:
- 本项目对美股股票的涨跌进行了研究,从问题出发并提出猜想,然后定义了机器学习的实验任务。 通过多次实验得到实验数据,最终证明了所提出的猜想:中国股市确实和美国股市存在着一定的联系,并且通过这些隐含的联系可以预测某些美国股票的涨跌。☆46Updated 9 years ago
- scrapy+Fiddler+celery+ redis +mysql实现分布式定时启动并异步快速动态爬取股票数据功能☆58Updated 2 years ago
- a crawler for wallstreetcn,finance.sina by Scrapy-新浪财经,同花顺财经,华尔街见闻的爬虫☆31Updated 9 years ago
- 金融问答平台文本数据采集/爬取,数据源涉及上交所,深交所,全景网及新浪股吧☆39Updated 7 years ago
- 利用Scikit Learn对秒级股票数据进行建模预测☆55Updated 6 years ago
- 量化交易经典策略:alpha对冲(股票+期货) ,利用股指期货进行对冲的股票策略☆25Updated 7 years ago
- 金融新闻增量式聚焦爬虫☆20Updated 7 years ago
- 本项目致力于开发各种金融数据处理小工具,以实现基本面分析并提供投资建议☆44Updated 6 years ago
- 极简爬虫工作流☆41Updated 2 years ago
- 使用Tushare下载日线数据并生成K线图☆71Updated 5 years ago
- 主要财经媒体新闻爬虫☆10Updated 4 years ago
- 基于scrapy实现裁判文书网爬虫☆27Updated 4 years ago
- A股tick下载,自动判断交易日历,获取全市场level1数据☆13Updated 3 years ago
- 根据东财股吧爬虫数据进行自然语言分析,展示股市热度☆118Updated 5 years ago
- 股价预测程序,尝试各种模型。☆33Updated 4 years ago
- 搜索引擎关键词排位爬虫,包括百度,搜狗,360的搜索引擎关键词排位爬虫,关键词从百度热词中取得,排位分别从三个搜索引擎中抓取。☆19Updated 5 years ago
- 对于一个板块内的股票使用Kmeans聚类剔除垃圾股,利用遗传算法分析上市公司的财务指标,从基本面的角度得出合理的股票选择模型,帮助投资者在某个板块内确定出选择高收益股票的标准,策略样本外回测计效见backtest.png文件。☆70Updated 4 years ago
- 自动化Tushare数据获取和MySQL储存☆60Updated 3 years ago
- 根据股票帐号,自动下载www.cninfo.com.上对应的企业年报(pdf格式),然后将这些pdf格式的文件转换为txt文件,然后从中提取出有用的信息,进行数据分析和图标展示☆52Updated 8 years ago
- spider and a web application for WanFang scholar website 万方数据爬虫+Web展示+TF-IDF相似度分析☆24Updated 4 years ago
- QATRADER☆28Updated 4 years ago
- A project using pyspider to collect data and NLP techs to analyze the correlation among the data☆59Updated 7 years ago
- 金融财经类新闻文本主题事件提取☆53Updated 2 years ago
- 获取股票期货等数据☆58Updated 5 years ago
- 项目介绍: 智能交互金融智能聊天。具体实现用户在所有关于股票话题的智能问答。其中难点是问题 分类、数据预处理、参数提取。 ☆个人工作: 实现金融智能聊天,实现所有股票问题的精确回答。通过提取通用特征将5亿+条训练语料缩减为10w条,语料内存占用量从10G减少到2M,并将…☆64Updated 5 years ago
- 股票实盘操作训练代码及记录☆38Updated 3 years ago
- 国家企业信用信息官网爬虫,未获取全部企业信息,重点在设计反爬思路☆67Updated 7 years ago
- 用Python分析etf投资记录数据☆22Updated 6 years ago
- 提取金融相关领域研究报告的主要结论(key idea)☆59Updated 7 years ago
- A股股票交易接口整理☆29Updated 6 years ago