咨询热线:18076568990、0755-25823180

[求助] 百度蜘蛛爬虫大量访问带有筛选属性的页面

1013 0 dalianwa 发表于 2015-10-21 11:22:45
5金钱
日志中发现大量百度爬虫,好像是陷入“黑洞”
QQ图片20151021112107.png
[img]file:///C:\Users\Administrator\AppData\Roaming\Tencent\Users\1691596959\QQ\WinTemp\RichOle\PR~[)QLBR3KO1{KW}XQ6ASH.png[/img]
怎么限制蜘蛛爬index.php?act=search这个页面?
User-agent:Baiduspider
Disallow:/shop/index.php?act=search
这样的写法有效么。
不使用nofollow这种方法。@1号-售后支持  

您需要登录后才可以回帖 登录 | 注册

本版积分规则

  • 今日
    0
  • 主题
    1507

推荐贴子

联系我们

产品及方案咨询:18076568990、0755-25823180

电子邮箱:web@shopwt.com、客服微信:shopwtcom

公司地址:深圳市罗湖区人民南路3002号国贸大厦B座1608楼

  • 官方公众号

  • 微信客服