0551-62380569

营销之道 干货分享

了解企业动态,分享前沿的营销推广干货,成长路上,我们携手同行
当前位置:主页 > 营销学院 > SEO教程 >
搜索引擎工作的基本之蜘蛛的抓取原理分析
来源:时间:2019-04-20 09:28浏览量:0 次

  上篇《搜索引擎工作的基本原理-蜘蛛的爬行》中我们详细介绍了蜘蛛是如何爬行工作的,现在小编想跟大家聊一下蜘蛛的抓取。

  图二.jpg

  理论上,蜘蛛的爬行可以遍布整个互联网的全部页面,但是实际上,蜘蛛做不到这些,也不需要去做到,因为整个互联网每天出现的新页面是以万亿级计数的,其中有大量的垃圾内容,这里所指的垃圾是指垃圾网站出现大量无关内容,例如相亲网上出现赌博六合彩的信息,出现一两次还可以忍受,出现次数多了会对搜索引擎用户体验造成很大的伤害,严重的影响搜索引擎的盈利。

  既然知道了蜘蛛爬行并不会爬行和抓取所有的页面,我们为了更多页面被收录,就要学着讨好蜘蛛,蜘蛛的使命就是尽量抓取重要页面。我们就在这方面讨好它,凡是方便利于蜘蛛爬行和抓取的行为都是好行为。

  图一.jpg

  蜘蛛的抓取一般喜欢以下几种行为:

  蜘蛛喜欢的行为一:网站和页面的权重尽可能的高,蜘蛛抓取的过程中首先考虑这种网站,因为在蜘蛛看来,质量高、建站时间长的网站才会有比较高的权重。高权重的网站甚至可以达到秒收录的效果。

  蜘蛛喜欢的行为二:页面更新频率要高,如果不经常更新页面,蜘蛛也就没必要经常过来抓取页面内容了,只有我们经常更新,蜘蛛才会更加频繁的光顾我们的网站网页内容。所以网站维护期最好做到每日更新,不仅是原创内容,也可以转载一些时效性强的资讯。

  蜘蛛喜欢的行为三:高质量的内外链建设,高质量的内外链建设能使得蜘蛛的爬行深度增加,要被蜘蛛抓取,就必须有导入链接进页面,否则蜘蛛根本就爬行不到该页面,更不要说抓取以及收录了。这里就是高质量内外链的重要性的体现了,这也是人们常说的“内容为王,外链为后”这句话的依据。蜘蛛的爬行时沿着链接爬行的,如果有高质量的外部链接,蜘蛛爬行的深度会加深,很可能多爬几层,让我们的页面更多的被蜘蛛抓取。

  蜘蛛喜欢的行为四:距离首页点击距离。这里说的距离首页点击距离一般是因为首页的权重最高,蜘蛛爬行到首页次数也最多,每通过一次链接叫一次点击,距离首页点击距离越近代表了页面权越重高,蜘蛛就喜欢这些短距离高权重的页面。页面权重还可以通过URL结构来直观体现,URL结构短、层次浅代表的页面权重就相对高。

  通过了解搜索引擎工作的基本原理-蜘蛛的抓取,就应该明白搜索引擎蜘蛛喜欢什么样的网站,这也就是我们SEO工作人员努力的目标。


[免责声明] 本站部分文章和图片均来自用户分享和网络收集,版权归原作者及原出处所有,仅供学习与参考,请勿用于商业用途,如有侵权请联系本站, 合肥网络公司专注于网络推广,转载请说明出处:www.jiufei.net/study/seo21136.html

售后响应及时

全国7×24小时客服热线

阿里云硬件支持

更安全、更高效、更稳定

价格公道透明

全国统一价,不弄虚作假

合作风险小

重合同讲信誉,无效全额退款

全国客户服务热线(7X24小时)

0551-62380569

Copyright © 2008-2021 安徽省久飞软件工程技术研究中心    ICP备案: 皖ICP备2022014487号
公司地址:合肥市瑶海区和平路周谷堆物流园1号楼(自有物业)   联系电话:0551-62380569    13625515912
友情链接: 合肥网站推广   合肥抖音快手推广   合肥百度优化   网站优化知识   合肥网站建设   合肥网络公司