黑帽联盟

 找回密码
 会员注册
查看: 1612|回复: 0
打印 上一主题 下一主题

[seo教程] Robots语法练习实战

[复制链接]

295

主题

18

听众

969

积分

管理员

Rank: 9Rank: 9Rank: 9

  • TA的每日心情
    慵懒
    2024-12-6 00:09
  • 签到天数: 377 天

    [LV.9]以坛为家II

    1、/cnblackhat/目录下面的所有动态路径都需要屏蔽,但又允许搜索引擎抓取/cnblackhat/目录下面的/heimao/和/heimao1/目录下的动态路径。同时还要屏蔽/heimao2/目录下的.html静态路径和带有.png .gif的图片


    禁止百度的

    User-agent:baiduspider
    Allow:/cnblackhat/heimao/*?*
    Allow:/cnblackhat/heimao1/*?*
    Disallow:/cnblackhat/heimao2/.html$
    Disallow:/cnblackhat/heimao2/*.png
    Disallow:/cnblackhat/heimao2/*.gif
    Disallow:/cnblackhat/*?*



    2、/cnblackhat/heimao/这个目录下的所有的静态路径
    注明:这个网站的静态路径全部是.html的,不包含.php的路径的静态地址


    禁止谷歌的

    User-agent:googlebot
    Allow:/cnblackhat/heimao/.php$
    Disallow:/cnblackhat/heimao/.html$
    帖子永久地址: 

    黑帽联盟 - 论坛版权1、本主题所有言论和图片纯属会员个人意见,与本论坛立场无关
    2、本站所有主题由该帖子作者发表,该帖子作者与黑帽联盟享有帖子相关版权
    3、其他单位或个人使用、转载或引用本文时必须同时征得该帖子作者和黑帽联盟的同意
    4、帖子作者须承担一切因本文发表而直接或间接导致的民事或刑事法律责任
    5、本帖部分内容转载自其它媒体,但并不代表本站赞同其观点和对其真实性负责
    6、如本帖侵犯到任何版权问题,请立即告知本站,本站将及时予与删除并致以最深的歉意
    7、黑帽联盟管理员和版主有权不事先通知发贴者而删除本文

    您需要登录后才可以回帖 登录 | 会员注册

    发布主题 !fastreply! 收藏帖子 返回列表 搜索
    回顶部