python爬虫学习笔记总（挖坑中...）

什么是Spider

Spider翻译成中文是蜘蛛的意思，如果我们把互联网比喻成一个蜘蛛网的话，spider就是在互联网上的蜘蛛，从网站上的某一页开始，读取网页上的内容，找到在网页上其它链接的地址，寻找下一个网页...。有了spider，我们就可以随意抓取互联网上任何我们感兴趣的东西了。

首先要理解什么是URL

就当大家都理解了