做好seo的朋友都知道收录量对于一个网站的重要程度，没有收录你有再好的文章也无济于事，正如如今的一句话：互联网行业是酒香也怕巷子深。
网站收录量是与百度蜘蛛爬取网站的频率相关的，所以我们可以判断大概率提升爬虫的抓取量就可以提升网站的收录量。
那么，如何让爬虫对你的网站情有独钟？
1.避免死链接
网站访客或搜索引擎无法通过指定的链接打开页面。打不开网站时，自然会减少网站的客户体验。如果某个网站频繁出现链接无法打开或者访问速度很慢，首先是网站的浏览量会不断下降，其次是搜索引擎的网络爬虫程序也会慢慢的不再光临这个网站。随着而来的快照长时间不更新，收录量下降以及核心关键词排名下降。这是网站运营者不愿意看到的，因此降低网站的死链接数量，就是网站运营及互联网宣传过程中，务必要做的工作之一。通常来说造成死链接的主要内部和外部两个方面的原因，即链接源和链接指向的目标网页，只要能从这两个方面控制好，即可避免死链接出现。
2.设置关键词
网站除了设置头部标题关键词外，还有一些重要的标签需要设置，h1标签是核心，一个网站页面只用一次，用来突出网站最重要的词，网页选用静态页面，有助于促进网站打开速度以及收录。网站的目录框架较好是树状框架，而后也要注意网站导航和链接部分的优化工作。只有让蜘蛛对网站的爬行的更舒服，它才会促进收录。
3.外链非常重要
做网站优化的都明白外链对网站的重要性。与其在一些小平台发外链，还不如选择发高质量外链，这可以给网站引进很多流量。而现在能够发布外链的平台越来越少了，但如果选择一些知名度高，流量高的平台网站进行外链发布，网站排名的提升速度就会很快。高质量外链就要不断地去寻找好的平台，利用这些平台发外链来提升排名。现在常常被使用的平台一般有微博、博客、论坛、问答平台等，这些平台的特点都是流量大，具有高知名度。只要在里面发布一篇文章，就容易获得高关注度，如果被别人转载或者分享对提升网站访问量，提升排名非常有利。
4.提升网站信任度
使蜘蛛更垂青这个网站。网站在建设的时候需要考量到蜘蛛的抓取原则，等网站上线后，企业要做的头件事不是去发外链，而是把网站提交到各大搜索引擎，让网站尽快被收录。接着就是做好网站日常运营工作，通常是指给网站更新内容，企业需要更新原创度高且优质的内容，这样蜘蛛才会受吸引来到网站抓取。蜘蛛都是贪新厌旧的，只有不断更新内容它才会来网站。然后是解决网站打开速度，速度一直是优化中的重要项目。网站只有被打开的快，蜘蛛进来就会快，客户访问网站也会快，减少网站跳出率才能更容易获得蜘蛛的信任。
5.建设网站地图
当企业顺利邀请到蜘蛛来网站作客，那么怎样让蜘蛛能够快速抓取到新内容呢？现在建设网站地图有两个形式，一个是html主要给客户访问时导航的；另一个是xml专门给蜘蛛导航的。这时候就需要建设网站地图，地图就是一个导航引向，带蜘蛛通往不同的网页。网站地图是对整个网站所有栏目的一个分类，所有分类都带有网页网址，蜘蛛到这些网址里爬行可以有效地抓取内容。因为有了网站地图，蜘蛛就不会在网站里迷失方向，每个栏目都有单独的地址可以让蜘蛛更准备到达想去的地方。
总结：关于让爬虫对网站情有独钟，我们就讨论到这里，以上观点仅一家之言，仅供参考。
原文地址：https://www.cnblogs.com/eegewg/p/11666339.html