【百科】爬虫

2022-11-30 本文已影响0人盐果儿

爬虫（spider, crawler）：在网络上，各个内容都是相互链接的，比如一个篇文章上有另一个链接，这样就可以通过这个链接链接到另一网页上。既然网络是相互链接的，那么有个程序会沿着网络直接的链接，一层层的爬下去，就好像一只蜘蛛，在网上爬动。于是便有了爬虫的叫法。

随着编程技术的发展，像这样在网上游走的程序越来越容易写，越来多，那么就出现了很多不是在游走于网络的程序，比如从一个网站上下载文章，或者提交一些信息，或者不断地监视某个内容等等，这些都被统称为爬虫。也就是说只有能代替我们进行网络访问的程序都可以称为爬虫。