雪球组合大数据分析平台构成 snowball_crawler 基于redis+scrapy+mongodb的分布式爬虫,抓取雪球所有的组合持仓、调仓记录以及合约日K线数据，redis负责分布式爬虫调度，数据存储到mongodb中 snowball_analye 数据分析引擎暂定，数据展示采用django。这部分包含数据筛选、清洗，与大盘指数、行业指数的相关性分析等，分析结果以web展示 snowball_quant 基于分析结果的量化交易平台，主要交易品种沪深A股、分级A、分级B

Snowball_crawler使用说明： 组件安装 运行测试