爬虫是什么原理?怎么能遍历一个网站所有链接?

爬虫是什么原理?怎么能遍历一个网站所有链接?

浅沫记忆 发布于 2021-11-24 字数 0 浏览 682 回复 6

如果你对这篇文章有疑问,欢迎到本站 社区 发帖提问或使用手Q扫描下方二维码加群参与讨论,获取更多帮助。

扫码加入群聊

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。

评论(6

输什么也不输骨气 2021-12-01 6 楼

页面html文档读取,解析读取的html节点

只为守护你 2021-11-30 5 楼

其实就是函数和类。。。

冷清清 2021-11-30 4 楼

文本遍历,应该懂了吧

葬花如无物 2021-11-29 3 楼

换成遍历文件夹,该理解了吧

高跟鞋的旋律 2021-11-29 2 楼

换叫蜘蛛,你应该理解了吧。。。。

已下线请稍等 2021-11-24 1 楼

比如爬一个网站,先获得首页内容,然后解析出首页内的所有链接,然后把所有链接的内容获得,再解析页内的链接,以此类推,这是最简单的爬虫原理。你明白了么?