robots协议（也称为爬虫协议、爬虫规则、机器人协议等）
通常添加到网站根目录的robots.txt 文件，它的作用在于告诉搜索引擎哪些页面可以抓取，哪些页面不能抓取，从而优化网站的收录结果和权重。本站使用的robots如下：
User-agent: * Disallow: /wp-* Disallow: /cgi-bin/ Disallow: /feed/ Disallow: /tag/* Disallow: /comments/feed Disallow: /comments Disallow: /trackback Disallow: /*.php$ Disallow: /*.js$ Disallow: /*.CSS$ Sitemap: https://www.freexyz.cn/sitemap Sitemap: https://www.freexyz.cn/sitemap_baidu.xml Sitemap: https://www.freexyz.cn/sitemap.html
保存为robots.txt文件，上传到网站的根目录即可！
WordPress
声明：本站所有文章，如无特殊说明或标注，均为本站原创发布。任何个人或组织，在未征得本站同意时，禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益，可联系我们进行处理。
