flicck / CninfoDistributedSpider
针对巨潮资讯网上市公司公告的分布式爬虫，采用scrapy和kafka的分布式架构。可以爬取爬取指定上市公司列表、指定时间段内的所有公告并保存PDF。后续会加入搜索引擎功能
☆19Updated 5 years ago
Related projects ⓘ
Alternatives and complementary repositories for CninfoDistributedSpider
- a crawler for wallstreetcn,finance.sina by Scrapy-新浪财经，同花顺财经，华尔街见闻的爬虫☆28Updated 8 years ago
- scrapy+Fiddler+celery+ redis +mysql实现分布式定时启动并异步快速动态爬取股票数据功能☆56Updated last year
- 本项目致力于开发各种金融数据处理小工具，以实现基本面分析并提供投资建议☆41Updated 5 years ago
- 本项目对美股股票的涨跌进行了研究，从问题出发并提出猜想，然后定义了机器学习的实验任务。通过多次实验得到实验数据，最终证明了所提出的猜想：中国股市确实和美国股市存在着一定的联系，并且通过这些隐含的联系可以预测某些美国股票的涨跌。☆47Updated 8 years ago
- 利用Scikit Learn对秒级股票数据进行建模预测☆56Updated 6 years ago
- 金融新闻增量式聚焦爬虫☆20Updated 7 years ago
- 搜索引擎关键词排位爬虫，包括百度，搜狗，360的搜索引擎关键词排位爬虫，关键词从百度热词中取得，排位分别从三个搜索引擎中抓取。☆19Updated 5 years ago
- 金融问答平台文本数据采集/爬取，数据源涉及上交所，深交所，全景网及新浪股吧☆39Updated 7 years ago
- 极简爬虫工作流☆41Updated last year
- 一套基于SVM与现代投资组合理论的量化框架☆29Updated 4 years ago
- 重新造轮子构建投资组合框架，适合大类资产配置和股票交易。☆49Updated 6 years ago
- 根据东财股吧爬虫数据进行自然语言分析，展示股市热度☆102Updated 5 years ago
- 量化交易经典策略：alpha对冲(股票+期货) ，利用股指期货进行对冲的股票策略☆22Updated 6 years ago
- self complemented BaiduIndexSpyder based on Selenium , index image decode and num image transfer，基于关键词的历时百度搜索指数自动采集☆41Updated 6 years ago
- 自动化Tushare数据获取和MySQL储存☆59Updated 2 years ago
- 行业轮动(股票)，基于沪深300的行业指数的行业轮动策略☆15Updated 6 years ago
- 股价预测程序，尝试各种模型。☆33Updated 3 years ago
- 基于分布式爬虫，采集互联网公开来源的金融类新闻和文档类文本； 基于文本挖掘技术，进行无监督/半监督学习的数据ETL与特征工程； 基于金融数据挖掘技术，进行宏观经济分析，基本面分析与行业分析☆95Updated 6 years ago
- 基于scrapy实现裁判文书网爬虫☆26Updated 4 years ago
- 提取金融相关领域研究报告的主要结论(key idea)☆60Updated 6 years ago
- self complemented WeiboIndexSpyder based on Selenium ，新浪微博指数(微指数)采集，包括综合指数，移动端指数，PC端指数☆31Updated 6 years ago
- 代码池☆20Updated 2 years ago
- 主要财经媒体新闻爬虫☆10Updated 3 years ago
- 提取财经新闻标题、链接整合排列后写入表格☆44Updated last year
- 金融财经类新闻文本主题事件提取☆51Updated last year
- 凤凰金融量化投资大赛初赛打榜4冠军——代码分享☆24Updated 6 years ago
- 对于一个板块内的股票使用Kmeans聚类剔除垃圾股，利用遗传算法分析上市公司的财务指标，从基本面的角度得出合理的股票选择模型，帮助投资者在某个板块内确定出选择高收益股票的标准，策略样本外回测计效见backtest.png文件。☆65Updated 3 years ago
- This program focused on the core concepts and practice of quantitative investment (multi-factor combination analysis, technical analysis …☆42Updated 4 years ago
- A stock market text sentiment analysis website. A股舆情分析, web-crawler, bayesian algorithm, SQL, django, data-visualization.☆39Updated 4 years ago
- 根据股票帐号，自动下载www.cninfo.com.上对应的企业年报（pdf格式），然后将这些pdf格式的文件转换为txt文件，然后从中提取出有用的信息，进行数据分析和图标展示☆52Updated 7 years ago