sitemap就是你网站的地图,告诉搜索引擎你网站有哪些页面可以抓取。很多站长用插件自动生成sitemap,不管什么链接都往里面塞,以为链接越多越好,其实反而会给百度蜘蛛留下坏印象。

我做了这么久站,见过太多无效的sitemap,其实正确的sitemap很简单。
这些链接绝对不能放进sitemap
别觉得“我网站所有链接都放进去才全面”,下面这些链接放进去纯纯浪费蜘蛛抓取时间:
- 已经返回404、已经删除的链接:死链放进去等于告诉蜘蛛“我这里有无效页面”,拉低站点整体质量分。死链应该单独做死链文件提交,不是放sitemap里。
- 被robots.txt屏蔽的链接:你都不让蜘蛛抓了,放sitemap里干嘛?逗蜘蛛玩吗?
- 重复内容页面:比如打印页、移动端和PC端同一个内容的不同URL、带各种参数的列表页,只放规范的canonical地址就行。
- 登录后才能访问的页面、后台路径、会员中心页面:蜘蛛抓不到内容,放进去没用还可能泄露后台地址。
- 搜索结果页、标签页太多重复内容的页面:如果你的标签页内容都是重复的、没有实质内容,别放进去,容易被判定为低质页面。
很多人喜欢用插件生成上万个链接的sitemap,其实里面一半是无效链接,提交了反而不好。
sitemap里应该放什么链接
只放有实质内容、能正常访问、希望被百度收录的链接:
- 网站首页、栏目页、分类页;
- 已经发布的文章页、产品页、内容详情页;
- 重要的专题页、落地页;
- 分页如果内容有差异可以放,如果是重复列表就不用放。
普通博客站sitemap有几百上千个链接很正常,几十万条的那种先看看是不是把没用的参数页都放进去了。
提交sitemap的几个注意事项
- 格式别错:标准的XML格式就行,别搞什么TXT或者HTML格式凑数,百度认XML格式的sitemap最稳。每个链接加上lastmod(最后修改时间),方便蜘蛛判断更新。
- 大小别超限:单个sitemap文件最多放5万个链接,大小不超过10MB,链接多了就拆分多个sitemap,做个sitemap索引文件。小网站完全不用担心这个。
- 更新频率不用瞎设:很多人给所有页面都设changefreq为daily(每日更新),其实根本没必要,蜘蛛会自己判断页面更新频率,你设了也没用,反而显得不真实。文章页一般设weekly或者monthly就行,首页设daily。
- 提交之后不是万事大吉:sitemap提交到百度搜索资源平台之后,去看一下抓取状态,有没有报错,有没有无法访问的链接,定期更新sitemap,删掉无效链接,加新的链接。
最后说一句:sitemap只是帮助蜘蛛发现链接,能不能收录还是看内容质量,别以为提交了sitemap就一定能收录,内容不行什么招都没用。
218
0
1
330