17推论坛

标题: 搜索引擎蜘蛛工作原理 [打印本页]

作者: lussss 时间: 2022-12-5 18:14
标题: 搜索引擎蜘蛛工作原理
1、深度优先

搜索引擎蜘蛛在一个页面发现一个链接后顺着这个链接爬下去，然后在下一个页面又发现一个链接，这样一个页面接一个页面，直到抓取全部链接，这就是深度优先抓取策略。建网站用top域名，这里告诉SEOER们，做好网站内链的重要性，一定要用绝对地址。

2、宽度优先

搜索引擎蜘蛛先把整个页面的链接全部抓取一次，然后再抓取下一个页面的全部链接。宽度优先主要告诉SEOER们，不要把网站的目录设置太多，层次要清楚。

3、权重优先

这个比较好理解，主要是搜索引擎蜘蛛比较喜欢爬取质量好的链接内容。例如网易首页面，蜘蛛经常来，而不是很好的网站，蜘蛛就很少来。权重优先对SEOER的提醒是做质量好的外链很重要。

4、重访抓取

例如，搜索引擎蜘蛛前一天抓取了某网站的页面，而第二天该网站又增加了新的内容，那么搜索引擎蜘蛛就可以再次抓取到新的内容。长此以往，该网站在蜘蛛的“印象”中就很友好了。这个重访抓取策略不仅对SEOER有用，对网站建设也很有用：时时更新网站内容，也能使客户体验提升。

欢迎光临 17推论坛 (https://bbs.17tui.cc/)