robots文件添加Sitemap链接的方法

小鹰博客 2017-7-16 17:59:45 网站优化 次阅读 查看评论

robots文件怎么添加Sitemap链接?

sitamap索引的位置最好放在robots.txt的最下面,蜘蛛先遵循前面的原则,再按照网站地图爬取。

User-agent:*

Disallow:/wap/

Sitemap: http://www.0375wg.com/sitemap.xml

更多robots文件的写法查看文章《robots文件的标准写法

打赏

如果文章对你有帮助,请打赏支持!

« 上一篇下一篇 » 标签: SEO  

本文地址:http://www.0375wg.com/post/120.html 出自 小鹰博客 转载请保留出处和文章链接。

评论列表:

说两句吧:

必填

记住我,下次回复时不用重新输入个人信息◎网友评论只代表其个人观点与本站无关。

站内搜索
Tags列表
最近发表
网友评论
网站分类