业务经理

微信扫描以上二维码

028-61286886

除了使用robots文件禁止蜘蛛抓取，还有什么方法不让蜘蛛抓取某些URL

迅睿框架更新 2022-05-10 17:19:26

伟哥

除了使用robots文件禁止蜘蛛抓取，还有什么方法可以让文章不生成这些动态链接呢？index.php?s=article&c=search&keyword

方案

迅睿框架技术-罗老师 #1 · 2022-05-10 17:12:21

首选方法 robots，缺点是识别慢点服务器方法使用防火墙屏蔽蜘蛛，比如宝塔防火墙有这种设置程序方法使用程序二次开发来屏蔽蜘蛛特征的地址
伟哥 #2 · 2022-05-10 17:13:58

迅睿框架技术-罗老师还是有别的静态内容需要蜘蛛抓取的，咱们系统没有办法设置是吧？
迅睿框架技术-罗老师 #3 · 2022-05-10 17:18:21

满意答案

没有设置的地方
伟哥 #4 · 2022-05-10 17:19:26

@迅睿框架技术-罗老师：好的！设置robots

迅睿系统漏洞

最近更新的源码