爬虫是什么原理？怎么能遍历一个网站所有链接？

Answer 1

页面html文档读取,解析读取的html节点

Answer 2

其实就是函数和类。。。

Answer 3

文本遍历，应该懂了吧

Answer 4

换成遍历文件夹，该理解了吧

Answer 5

换叫蜘蛛，你应该理解了吧。。。。

Answer 6

比如爬一个网站，先获得首页内容，然后解析出首页内的所有链接，然后把所有链接的内容获得，再解析页内的链接，以此类推，这是最简单的爬虫原理。你明白了么？