引蜘蛛的小技巧

到哪里找回呢 · 发表于 2012-08-29 10:27:05

1．网站地图要包含最重要的一些页面
　　如果网站地图包含太多链接，人们浏览的时候就会迷失。因此如果网站页面总数超过了100个的话，就需要挑选出最重要的页面。建议挑选下面这些页面放到网站地图中去：
　　1）产品分类页面
　　2）主要产品页面
　　3）FAQ和帮助页面
　　4）位于转化路径上的所有关键页面，访问者将从着陆页面出发，然后沿着这些页面实现转化。
　　5）访问量最大的前10个页面
　　6）如果有站内搜索引擎的话，就挑选出从该搜索引擎出发点击次数最高的那些页面
　　2．网站地图布局一定要简洁，所有的链接都是标准的HTML文本，并且要尽可能多的包含关键字
　　不要使用图片来做网站地图里的链接，这样蜘蛛就不能跟随了。一定要使用标准的HTML文本来做链接，链接中要包括尽可能多的目标关键字。比如：可以使用“无公害除草剂、杀虫剂和杀菌剂”来代替“我们的产品”为标题。
　　3．尽量在站点地图上增加文本说明
　　增加文本会给蜘蛛提供更加有索引价值的内容，以及有关内容的更多线索。
　　4．在每个页面里面放置网站地图的链接
　　用户一般会期望每个页面的底部都有一个指向网站地图的链接，你可以充分利用人们的这一习惯。如果网站有一个搜索栏的话，那么可以在这个搜索栏的附近增加一个指向网站地图的链接，甚至可以在搜索结果页面的某个固定位置放置网站地图的链接。
　　5．确保网站地图里的每一个链接都是正确、有效的
　　如果在网站地图里出现的链接是坏链和死链，对搜索引擎的影响是非常不好的。如果链接比较少，你可以把所有的链接都点一遍，以确保每一个链接是有效的。如果链接比较多，可以使用一些链接检查工具来检测。
　　6．可以把sitemap写进robots.txt里
　　在引擎爬虫进来抓取网页的时候，会首先查看robots.txt、如果首先把sitemap写进robots.txt里那么在效率上大大提高很多，从而获得SEM的好感。
　　7．根据百虎网络的实战经历，网页能够给搜索者获得良好的体验尤为重要。

zhurongfu9986 · 发表于 2012-08-29 10:36:38

楼主说的有道理，谢谢分享！

啊喔呃 · 发表于 2012-08-29 10:55:51

引蜘蛛要让蜘蛛爬行的更方便顺畅

lmr525 · 发表于 2025-11-10 19:59:43

说得很实在，没有夸大其词，这种真实分享太难得了

w412241071 · 发表于 2026-02-09 03:53:25

学习到了，之前一直没注意过这个点，受教了

贝多芬 · 发表于 2026-02-23 18:19:30

这个分享太实用了，刚好能用到，感谢楼主！

薏米 · 发表于 2026-03-13 13:45:11

完全赞同，我也是这么认为的，英雄所见略同～

和兰花在一起 · 发表于 2026-03-13 19:59:28

楼主太厉害了，整理得这么详细，必须支持

新颖 · 发表于 2026-03-31 02:21:34

楼主辛苦了，整理这么多内容，必须点赞收藏

		自动登录	找回密码
密码			加入怎通

[站长八卦] 引蜘蛛的小技巧

相关帖子

浏览过的版块