业务经理

微信扫描以上二维码

028-61286886

蜘蛛监控里有很多这样子的记录，怎么避免

迅睿框架更新 2021-05-14 16:29:47

柴火

蜘蛛监控里有很多这样子的记录，在搜索框里输入这些信息，然后被蜘蛛爬，这种的怎么避免？或者对网站有没有影响啊？

${xunruicms_img_title}$

${xunruicms_img_title}$

方案

迅睿框架技术-刘怀远 #1 · 2021-05-14 16:00:03

建议通过robotx。txt来避免
柴火 #2 · 2021-05-14 16:04:07

迅睿框架技术-刘怀远具体robotx是怎么设置呢？
湾仔码头 #3 · 2021-05-14 16:04:52

robotx可以做这些事情的，禁止蜘蛛爬取指定url
迅睿框架技术-刘怀远 #4 · 2021-05-14 16:05:15

http://tool.chinaz.com/robots/ 傻瓜式操作
欧尔麦特 #5 · 2021-05-14 16:06:32

百度去搜索下robots语法吧
柴火 #6 · 2021-05-14 16:11:04

迅睿框架技术-刘怀远目前也收录了很多好的搜索词的页面，但是像这些色情广告的都没有收录的，如果屏蔽的话，所有的关于搜索的都会屏蔽吧。如果不屏蔽的话，就是不知道这种广告被搞多了对网站有没有影响，
官方技术总监-陈总 #7 · 2021-05-14 16:12:54

建议百度搜索下相关的防范方法
小波工作室--标签和API大师 #8 · 2021-05-14 16:16:21
- 敏感词过滤
  
  当发布内容时判断内容中是否包含敏感词，存在时就提示并禁止继续提交支持手动批量录入词语，也...
需要的话我给你开发一个搜索词过滤功能
柴火 #9 · 2021-05-14 16:29:47

小波工作室--标签和API大师这个也很长时间了，收录了很多正常好的搜索词的页面，像这些不良信息都没有收录，就是不知道这个对网站有没有影响。

迅睿系统漏洞

最近更新的源码