怎样爬取股票的数据库；如何用爬虫抓取股市数据并生成分析报表

一、如何用爬虫抓取股市数据并生成分析报表

推荐个很好用的软件，我也是一直在用的，就是前嗅的ForeSpider软件，我是一直用过很多的采集软件，最后选择的前嗅的软件，ForeSpider这款软件是可视化的操作。
简单配置几步就可以采集。
如果网站比较复杂，这个软件自带爬虫脚本语言，通过写几行脚本，就可以采集所有的公开数据。
软件还自带免费的数据库，数据采集直接存入数据库，也可以导出成excel文件。
如果自己不想配置，前嗅可以配置采集模板，我的模板就是从前嗅购买的。
另外他们公司不光是软件好用，还有自己的数据分析系统，直接采集完数据后入库，ForeSpider内部集成了数据挖掘的功能，可以快速进行聚类分类、统计分析等，采集结果入库后就可以形成分析报表。
最主要的是他采集速度非常快，我之前用八爪鱼的软件，开服务器采，用了一个月采了100万条，后来我用ForeSpider。
笔记本采的，一天就好几百万条。
这些都是我一直用前嗅的经验心得，你不妨试试。
建议你可以下载一个免费版试一试，免费版不限制功能，没有到期时间。

二、如何获取实时的股票数据

要跟供应商协商得到他的接口才能得到实时股票行情数据；
　　股票实时行情，可以通过两个方法来进行查看：　　第一种，在百度搜索页面直接输入股票代码，如：000717，百度输入后，即可在搜索结果中看到，其中分时，就是该股票在当天的实时走向。
　　第二种，通过炒股软件，如东财，同花顺等，在开启后，直接输入，股票代码，如600854，点击回车。
进入的第一个页面就是该股票在当天的实时行情。
　　同时在股票软件的分时成交界面，可以查看到每一分钟的成交价和手数。
股票行情趋势判断必要时也需要结合分时成交界面的数据来进行判断。
　　查看其它股票的行情也是一样的道理，直接键入该股票的代码就可以查看到该股票当天或某个时间段内的行情。
当然，精准的行情走势、趋势，是需要结合多种指标来共同进行分析的。

三、如何批量获取A股所有股票的历史数据

下个软件就可以了，有的软件，比如mc是可以导出历史数据的

四、如何用python抓取股票数据

在 Python的QSTK中，是通过 s_datapath 变量，定义相应股票数据所在的文件夹。
一般可以通过 QSDATA 这个环境变量来设置对应的数据文件夹。
具体的股票数据来源，例如沪深、港股等市场，你可以使用免费的WDZ程序输出相应日线、5分钟数据到  s_datapath 变量所指定的文件夹中。
然后可使用 Python的QSTK中，qstkutil.DataAccess进行数据访问。

五、求教高手，有没有什么方法可以把股票的数据下载到本地数据库？

这个很简单，打开你的看盘软件，选择工具栏，再选择数据下载，可以下载所有数据，具体需要什么时候到什么时候的数据自己设置日期

六、java 如何实现 获取实时股票数据

一般有三种方式：1. 网页爬虫。
采用爬虫去爬取目标网页的股票数据，去GitHub或技术论坛（如CSDN、51CTO）上找一下别人写的爬虫集成到项目中。
2. 请求第三方API。
会有专门的公司（例如百度API市场）提供股票数据，你只需要去购买他们的服务，使用他们提供的SDK，仿照demo开发实现即可。
如下图所示：3.请求第三方WebService接口。
一般用的较多的网站是聚合数据，如下图所示：

七、求教高手，有没有什么方法可以把股票的数据下载到本地数据库？

答：最直观的方法是直接到网站查看股票历史数据然后复制下来，比如到谷歌财经输入相应股票代码，点击“历史价格”，就可以看到该股票历史数据。

参考文档