黑帽联盟

 找回密码
 会员注册
查看: 2377|回复: 2

[经验] 用php实现让页面只能被百度gogole蜘蛛访问

[复制链接]
yun 黑帽联盟官方人员 

920

主题

37

听众

1364

积分

超级版主

Rank: 8Rank: 8

  • TA的每日心情
    奋斗
    2019-10-18 11:20
  • 签到天数: 678 天

    [LV.9]以坛为家II

    用php实现让页面只能被百度gogole蜘蛛访问的方法,需要的朋友可以参考下。

    普通用户与搜索引擎蜘蛛爬行的区别在于发送的user agent,
    看网站日志文件能发现百度蜘蛛名字包含Baiduspider, 而google的则是Googlebot, 这样我们可以通过判断发送的user agent来决定要不要取消普通用户的访问

    在要禁止访问的页面头部引用上传的附件里面的文件来做判断就ok了

    php屏蔽相关蜘蛛访问.zip (2.08 KB, 下载次数: 6, 售价: 3 黑币)


    相关链接:根据user-agent判断蜘蛛跳转黑帽代码(js版与php版本)

    5

    主题

    1

    听众

    104

    积分

    黑帽新手

    Rank: 2

  • TA的每日心情

    2019-3-21 19:51
  • 签到天数: 75 天

    [LV.6]常住居民II

    有什么用呢?
    回复

    使用道具 举报

    4

    主题

    0

    听众

    60

    积分

    黑帽菜鸟

    Rank: 1

  • TA的每日心情
    开心
    2018-1-5 21:13
  • 签到天数: 49 天

    [LV.5]常住居民I

    先下载了留着用!!!!!!!!!!!!
    回复

    使用道具 举报

    您需要登录后才可以回帖 登录 | 会员注册

    发布主题 !fastreply! 收藏帖子 返回列表 搜索
    回顶部