迅睿開源框架是一款PHP8高性能·簡單易用的PHP開源開發(fā)框架, 基于MIT開源許可協(xié)議發(fā)布,不限制商業(yè)使用,以多端互聯(lián)為設計理念, 支持的微信公眾號、小程序、APP客戶端、移動端網(wǎng)站、PC網(wǎng)站等多終端式管理系統(tǒng)。
業(yè)務經(jīng)理
微信掃描以上二維碼
028-61286886
在線咨詢
/index.php?s=api&c=module&siteid=1&app=news&m=hits&id=238 這種地址 是禁止搜索引擎抓取的 請問 這個抓取是在哪個文件里面改啊!我想變通改一下 禁止他還抓一些其他頁面! 如廣告頁 如 css等
告訴網(wǎng)絡搜索引擎的漫游器(又稱網(wǎng)絡蜘蛛),此網(wǎng)站中的哪些內(nèi)容是不應被搜索引擎蜘蛛獲取的,...
如果不會寫,可以考慮使用插件
robots.txt文件中添加禁止:
User-agent: * Disallow: /index.php
禁止抓取index.php文件
Disallow: /index.php*
禁止抓取以index.php開頭的所有鏈接
Disallow: /index.php*禁止抓取這個的文件,但是這個只是禁止,你訪問還是可以訪問的
Robots爬蟲協(xié)議生成器
告訴網(wǎng)絡搜索引擎的漫游器(又稱網(wǎng)絡蜘蛛),此網(wǎng)站中的哪些內(nèi)容是不應被搜索引擎蜘蛛獲取的,...
如果不會寫,可以考慮使用插件
robots.txt文件中添加禁止:
禁止抓取index.php文件
禁止抓取以index.php開頭的所有鏈接