网站地图协议(Sitemaps Protocol),是谷歌,雅虎,微软,ASK等搜索引擎共同遵守的搜索引擎机器人抓取协议,避免了机器人的重复抓取,而且,也避免机器人遗漏了抓取不到的网站死角。
百度虽然不支持该协议,但是你可以通过在robots.txt中添加以下代码行来告诉百度你的网站地图的存放位置。包括XML格式和文本格式的网站地图。
Sitemap:<sitemap_location>
<sitemap_location> 填写 Sitemap 的完整网址
比如:
Sitemap:http://cn.hxw.me/sitemap.xml
Sitemap:http://cn.hxw.me/sitemap.txt
如果有很多个.xml 或 .txt 文件,则先建立一个索引文件,把这些.xml 或 .txt文件的完整网址列在其中。
<sitemap_location> 中填写完整的该索引文件的网址。
因此,百度阿拉丁计划之猜想一,百度可能会官方支持Sitemaps或者类似的协议,并且可能会推出类似于谷歌的网站管理员工具这一平台。
日志- 百度阿拉丁计划之猜想二:整合搜索 » ?
- 百度和搜狐那个更NB? » 一个好域名,会让你赢在起点。
