易優(yōu)Robots技巧_蜘蛛訪問統(tǒng)計(jì)插件
1、如何拒絕搜索引擎爬取不相關(guān)的JS接口URL；
如下圖所示：JS接口URL都有一個(gè)特性，前綴是 /index.php?m=api&c=Ajax&a=
可以編輯網(wǎng)站的根目錄下robots.txt文件，追加一條如下代碼：
Disallow: /index.php?m=api&c=Ajax&a=*
2、如何拒絕搜索引擎爬取不想被收錄的插件URL；
如下圖所示：每個(gè)插件URL都有一個(gè)特性，前綴是 /index.php?m=plugins&c=插件標(biāo)識(shí)
紅色圈住的是一個(gè)微信分享插件，如果這個(gè)URL在瀏覽器上打開是無(wú)效頁(yè)面，可以通過如下robots.txt規(guī)則進(jìn)行屏蔽，拒絕搜索引擎爬取。
編輯網(wǎng)站的根目錄下robots.txt文件，追加一條如下代碼：
Disallow: /index.php?m=plugins&c=WeixinShare&a=*
-
工業(yè)機(jī)械生產(chǎn)設(shè)備網(wǎng)站模板 會(huì)員模板
-
農(nóng)林苗木種植培育類網(wǎng)站模板 會(huì)員模板
-
響應(yīng)式形象設(shè)計(jì)美容美發(fā)網(wǎng)站模板 會(huì)員模板
-
響應(yīng)式園林景觀設(shè)計(jì)公司網(wǎng)站模板 會(huì)員模板
-
WebP圖片全能轉(zhuǎn)換器 ￥50元
-
易優(yōu)問答 ￥100元
-
批量發(fā)貨 ￥50元
