|
8 R/ A$ H8 O" f( F 网站地图,又称站点地图,sitemap,它就是一个页面,上面放置了网站上所有页面的链接。大多数人在网
) H* w% ~* v7 `0 w8 u* B: j5 `* F# R 网站地图,又称站点地图,sitemap,它就是一个页面,上面放置了网站上所有页面的链接大多数人在网站上找不到自己所需要的信息时,可能会将网站地图作为一种补救措施搜索引擎蜘蛛非常喜欢网站地图Sitemap 可方便网站管理员通知搜索引擎他们网站上有哪些可供抓取的网页。
8 i7 F7 L5 f; d) E& X% K2 k 简单的是 Sitemap 形式,就是XML 文件,在其中列出网站中的网址以及关于每个网址的其它元数据(上次更新的时间、更改的频率以及相对于网站上其他网址的重要程度为何等),以便搜索引擎可以更加智能地抓取网站。
! B1 ` v9 }- w: p Google、雅虎、和微软都支持一个被称为xml网站地图(xmlSitemaps)的协议,而百度Sitemap是指百度支持的收录标准,在原有协议上做出了扩展百度sitemap的作用是通过Sitemap告诉百度蜘蛛全部的站点链接,优化自己的网站。
* u8 g, r5 d. N) t9 V, W 百度Sitemap分为三种格式:txt文本格式、xml格式、Sitemap索引格式网络抓取工具通常会通过网站内部和其他网站上的链接查找网页Sitemap 会提供此数据以便允许支持 Sitemap 的抓取工具抓取 Sitemap 提供的所有网址,并了解使用相关元数据的网址。 O$ m9 y2 N- n4 ^8 n9 ?0 W
使用 Sitemap协议并不能保证网页会包含在搜索引擎中,但可向网络抓取工具提供一些提示以便它们更有效地抓取网站
! E7 l$ V+ `& j" |- C6 r
5 I3 y; x9 m3 ]+ |5 O. N" o% J& ^8 t, T; Q4 L& z- |
& d% l4 d* y& o* P4 z$ m, ]
: m3 e1 B& E4 k" D; r4 ?% f) x
|