为网站加入robots.txt文件

自从网站被降权后，现在每天都会花点时间分析降权的原因，可惜，过去多日一无所获。搜索资料时，无意中发现robots.txt的作用，然后，从网上下载一份完整wordpress的文件上传到网站。

其实，在上传robots.txt前，我有点好奇，为什么我的网站并没有robots.txt文件，而访问https://www.geyisu.com/robots.txt时，却是可以访问，后来查询资料得知，原来使用wordpress程序都会自动生成一份robots.txt的。只是内容是固定的。

于是，直接从网上下载一份针对wordpress完整的robots.txt文件，经过检查，所禁止的目录都是正常，只是缺了网站地图，添加网站地图后，就上传到网站中。内容如下：

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-content/
Disallow: /wp-includes/
Disallow: /niwowz/
Disallow: /*/comment-page-*
Disallow: /*?replytocom=*
Disallow: /category/*/page/
Disallow: /tag/*/page/
Disallow: /*/trackback
Disallow: /feed
Disallow: /*/feed
Disallow: /comments/feed
Disallow: /?s=*
Disallow: /*/?s=*\
Disallow: /attachment/
Sitemap: https://www.geyisu.com/sitemap.xml

网站被降权后，我才发现之前有些地方还是没有做到侠的，如robots.txt都没有增加，反正已经如此了，什么方法都要尝试一下，期待网站快些渡过这个寒冬吧。