易优CMS-插件使用-易优Robots技巧_蜘蛛访问统计插件
时间:2023-08-11 13:15
浏览:0
评论:0
1、如何拒绝搜索引擎爬取不相关的JS接口URL;
如下图所示:JS接口URL都有一个特性,前缀是 /index.php?m=api&c=Ajax&a=
可以编辑网站的根目录下robots.txt文件,追加一条如下代码:
Disallow: /index.php?m=api&c=Ajax&a=*
2、如何拒绝搜索引擎爬取不想被收录的插件URL;
如下图所示:每个插件URL都有一个特性,前缀是 /index.php?m=plugins&c=插件标识
红色圈住的是一个微信分享插件,如果这个URL在浏览器上打开是无效页面,可以通过如下robots.txt规则进行屏蔽,拒绝搜索引擎爬取。
编辑网站的根目录下robots.txt文件,追加一条如下代码:
Disallow: /index.php?m=plugins&c=WeixinShare&a=*
1. 本站所有资源来源于用户上传或网络,仅作为参考研究使用,如有侵权请邮件联系站长!
2. 本站积分货币获取途径以及用途的解读,想在本站混的好,请务必认真阅读!
3. 本站强烈打击盗版/破解等有损他人权益和违法作为,请各位会员支持正版!
4. 易优CMS > 易优CMS-插件使用-易优Robots技巧_蜘蛛访问统计插件
2. 本站积分货币获取途径以及用途的解读,想在本站混的好,请务必认真阅读!
3. 本站强烈打击盗版/破解等有损他人权益和违法作为,请各位会员支持正版!
4. 易优CMS > 易优CMS-插件使用-易优Robots技巧_蜘蛛访问统计插件