Python学习大数据 爬虫Python AI Sql

小伙利用Python爬取某公司A股数据,老板竟花重金寻他!

2019-02-11  本文已影响14人  1a076099f916
小伙利用Python爬取某公司A股数据,老板竟花重金寻他!

导语

闲来无事,随手爬点数据顺便简单地可视化分析一波吧。利用Python爬取并简单分析A股公司数据。让我们愉块地开始吧~本文源代码加小编QQ群:700341555获取,还可获取更多Python资料!

小伙利用Python爬取某公司A股数据,老板竟花重金寻他!

开发工具

Python版本:3.6.4

相关模块:

requests模块;

bs4模块;

lxml模块;

pyecharts模块;

wordcloud模块;

jieba模块;

以及一些Python自带的模块。

环境搭建

安装Python并添加到环境变量,pip安装需要的相关模块即可。

数据爬取

目标网站:

http://www.askci.com/reports/

需要爬取的数据如下图所示:

小伙利用Python爬取某公司A股数据,老板竟花重金寻他!

懒得动脑子了,直接借助BeautifulSoup提取的这些数据,简单粗暴,源代码如下:

小伙利用Python爬取某公司A股数据,老板竟花重金寻他!

完整源代码详见相关文件中的Spider.py文件。

运行效果截图如下:

小伙利用Python爬取某公司A股数据,老板竟花重金寻他!

All done~

数据分析

在数据爬取部分,我们共获得了3573条A股公司数据,下面我们就来简单地可视化分析一波吧~

首先让我们来看看A股公司的区域分布吧:

小伙利用Python爬取某公司A股数据,老板竟花重金寻他!

其中A股公司超过三百家的省份有:

接下来再来看看A股公司的收入情况吧:

小伙利用Python爬取某公司A股数据,老板竟花重金寻他!

其中主营业业务收入TOP10为:

小伙利用Python爬取某公司A股数据,老板竟花重金寻他!

再来看看A股公司的员工数量呗:

小伙利用Python爬取某公司A股数据,老板竟花重金寻他!

再来看看A股公司的上市时间分布呗:

小伙利用Python爬取某公司A股数据,老板竟花重金寻他!

其中,2013年上市的公司数量最少(2个);2017年上市的公司数量最多(438个)。

OK,要不我们再来看看A股公司所在的行业类型占比TOP10吧:

小伙利用Python爬取某公司A股数据,老板竟花重金寻他!

Emmmm,很真实。

最后,我们把A股公司主营业务画成词云看看呗:

小伙利用Python爬取某公司A股数据,老板竟花重金寻他!

All done!本部分内容涉及到的所有源代码均在相关文件中的analysis.py文件内。

上一篇下一篇

猜你喜欢

热点阅读