看我用selenium爬百度新闻
2020-06-09 本文已影响0人
缓缓绕青山
闲来无事写了个百度新闻的爬虫,为自己的自媒体文章增加点素材,直接上干货:
自己填写关键字,然后点击获取数据,爬虫会爬取与这个关键字相关的所有新闻资讯标题和链接结果,存入数据库,获取成功之后,可以对所有新闻标题进行关键字提取,分析这个主题的脉络和联系。
1.比如输入降准这个关键字,然后点击获取数据,系统会自动抓取百度资讯与关键字相关的所有资讯数据
获取成功之后,可以获取到所有与降准相关的新闻:
点击查看关键词可以提取所有标题的关键词统计
每个关键词都能搜索关联标题,每个关联标题能够再次提取关键词分析
具体代码结构: