业务经理

微信扫描以上二维码

028-61286886

百度谷歌搜索爬虫爬些奇怪的东西，news模块早已经关闭搜索功能了。

迅睿框架更新 2020-11-23 23:46:18

zhuroufanzi

百度谷歌搜索爬虫爬些奇怪的东西，news模块早已经关闭搜索功能了。

链接类似这样的

http://m.abc.com/index.php?s=news&c=search&catid=11&keyword=dayruicom

站内应该没有这样的内容

方案

曼德拉的铅笔 #1 · 2020-01-11 12:57:22

rebox把蜘蛛屏蔽了就行了
zhuroufanzi #2 · 2020-01-11 13:10:20

屏蔽蜘蛛的网站不就等于自己hi吗
125762285 #3 · 2020-01-11 16:58:31

zhuroufanzi是的
唉呦喂 #4 · 2020-01-11 18:54:37

满意答案

网站没有什么不可以公开的吧
zhuroufanzi #5 · 2020-02-05 12:32:13

http://www.abc.com/index.php?s=news&c=search&catid=7&keyword=蛛丝马迹这是谷歌来爬，可我站内没有“keyword=蛛丝马迹”这类东西啊
zhuroufanzi #6 · 2020-11-23 23:46:18

@唉呦喂：不是不能公开。是这蜘蛛无中生有，我站内没有的

迅睿系统漏洞

最近更新的源码