前言
因为各种原因,博客没有坚持下来,以前记录的一些笔记,也随之丢失。最最重要,网站被K了。重新优化网站之robots.txt优化。
robots.txt可以告诉搜索引擎网站的哪些页面可以被抓取,哪些页面不可以被抓取。更加符合网站SEO优化。
操作
1.1 电脑本地新建一个txt文档,命名为robots.txt。
1.2 复制一下内容。
User-agent: * Disallow: /wp-admin/ Disallow: /wp-content/ Disallow: /wp-includes/ Disallow: /pagephoto/ Disallow: /img/ Disallow: /*/comment-page-* Disallow: /*?replytocom=* Disallow: /category/*/page/ Disallow: /tag/*/page/ Disallow: /*/trackback Disallow: /feed Disallow: /*/feed Disallow: /comments/feed Disallow: /?s=* Disallow: /*/?s=*\ Disallow: /attachment/ Sitemap: https://cchheenn.com/sitemap.xml
1.3 修改sitemap地址,为自己的。
1.4 上传robots.txt到跟服务器网站跟目录。
1.5 提交到百度检测更新。传送门
懒人下载:
[fanctdl filename=’robots.7z’ filesize=’4KB’ href=’https://cchheenn/download/robots.7z’ filedown=’robots.7z’]百度云下载[/fanctdl]