业务经理

微信扫描以上二维码

028-61286886

请问如何避免搜索引擎

迅睿框架更新 2021-03-30 19:17:21

enchong

请问如何避免搜索引擎，通过这种方式，消耗站点资源

https://域名.com/news/search/catid-8-keyword-注意事项.html
我就想知道，catid-8-是如何被检索到的，如何进行避免，之前网站被MJ12bot一天几百次的爬取，禁止几个搜索引擎之后，现在谷歌开始这样爬取了，主要是带有catid-8-不能正常的完成搜索，出现404页面。

${xunruicms_img_title}$

方案

迅睿框架技术-张洪 #1 · 2021-01-24 18:32:31

通过服务器来拒绝，一般主机服务商有这些规则设置方法
止咳糖浆 #2 · 2021-01-24 18:55:16

满意答案

reboot啊，可以过滤
司马老贼 #3 · 2021-01-24 18:56:04

用这个教程参考文档：《任意地址301重定向写法》
enchong #4 · 2021-03-30 19:17:21

@止咳糖浆：感谢，最简单的方法就是robots.txt禁止访问了

迅睿系统漏洞

最近更新的源码