爬虫股票数据挖掘,用java爬虫抓取股票实时数据

1

券商APP很多,大A的数据也是公开的。程序员在股市中占比也是很大的,相信比别人聪明的也很多喜欢在大A里面拼搏,当然又菜又爱玩的也有很大一部分。

进入正题,除了实时看盘和条件订单,怎么去筛选自己模式内的股票呢。声明一下:投资有风险,谨慎入市。本篇只做爬虫的学习参考。

2

随便打开一个熟悉的网站,这里用雪球作为例子。

爬虫股票数据挖掘,用java爬虫抓取股票实时数据

打开开发者工具,然后找到接口,发现是cookie加密,但是cookie是其他页面返回的。基本上就是没有加密方式来。这样我们就可以获取到当日的实时数据了。

3

直接开始python代码获取cookie。

爬虫股票数据挖掘,用java爬虫抓取股票实时数据

4

cookie加密搞定,接着我们开始获取实时的数据

爬虫股票数据挖掘,用java爬虫抓取股票实时数据

5

然后筛选出我们需要的股票数据。

爬虫股票数据挖掘,用java爬虫抓取股票实时数据

数据还是有很多,再加点条件比如涨停的去掉,st的去掉,科创的,创业板的等等。

仅供学习参考

爬虫股票数据挖掘,用java爬虫抓取股票实时数据

如何用爬虫抓取股市数据并生成分析报表

1. 关于数据采集
股票数据是一种标准化的结构数据,是可以通过API接口访问的(不过一般要通过渠道,开放的API有一定的局限性)。也可以通过爬虫软件进行采集,但是爬虫软件采集数据不能保证实时性,根据数据量和采集周期,可能要延迟几十秒到几分钟不等。我们总结了一套专业的爬虫技术解决方案(Ruby + Sidekiq)。能够很快实现这个采集,也可以后台可视化调度任务。
2. 关于展现
网络股票数据的展现,网页端直接通过HTML5技术就已经足够,如果对界面要求高一点,可以采用集成前端框架,如Bootstrap;如果针对移动端开发, 可以使用Ionic框架。
3. 关于触发事件
如果是采用Ruby on Rails的开发框架的话,倒是很方便了,有如sidekiq, whenever这样子的Gem直接实现任务管理和事件触发。

爬虫股票数据挖掘,用java爬虫抓取股票实时数据

如何使用Python获取股票分时成交数据?

可以使用爬虫来爬取数据,在写个处理逻辑进行数据的整理。你可以详细说明下你的需求,要爬取的网站等等。
希望我的回答对你有帮助

未经允许不得转载:股市行情网 » 爬虫股票数据挖掘,用java爬虫抓取股票实时数据

相关文章

评论 (0)