黑帽联盟

 找回密码
 会员注册
查看: 1429|回复: 1
打印 上一主题 下一主题

[技术文章] 禁止百度收录网站的某些图片

[复制链接]

132

主题

11

听众

295

积分

版主

Rank: 7Rank: 7Rank: 7

  • TA的每日心情
    擦汗
    2018-6-12 09:41
  • 签到天数: 273 天

    [LV.8]以坛为家I

    禁止百度收录网站的某些图片,大家可能会有疑问,为什么要禁止啊,收录图片不是更好,事实确实是这样的,但是我们有时候自己的网站有别人的广告图片,难道我们也要让广告图片也被收录吗?肯定不想是吧。还有一种就是涉及版权的问题。

    如何禁止百度收录网站的某些图片

    我通常采用的方法是在robots.txt里面设置禁止百度蜘蛛抓取,我分三种情况给大家介绍一下:

    一、禁止百度蜘蛛抓取网站上所有图片

    robots.txt文件里添加以下代码即可,格式都是这样的:Disallow: /*.图片格式$:

    User-agent: Baiduspider

    Disallow: /*.jpg$

    Disallow: /*.jpeg$

    Disallow: /*.gif$

    Disallow: /*.png$

    Disallow: /*.bmp$

    二、允许百度蜘蛛抓取网站上某一种格式的图片

    比如说,我们要抓取.jpg格式的,那就在robots.txt文件里添加以下代码即可,里面加上允许的Allow标签:

    User-agent: Baiduspider

    Allow: /*.jpg$

    Disallow: /*.gif$

    Disallow: /*.jpeg$

    Disallow: /*.png$

    Disallow: /*.bmp$

    三、仅禁止百度蜘蛛抓取某一种格式的图片

    以禁止百度蜘蛛抓取.jpg格式的图片为例,在robots.txt文件里添加以下代码:

    User-agent: Baiduspider

    Disallow: /*.jpg$

    以上的用法同样适用于其它搜索引擎的蜘蛛。

    比如说我们的广告图片是xxxxxx.com/guanggao.png,我们可以使用下面的方法

    User-agent: Baiduspider
    Disallow: /guanggao.png

    另外,有人会说,搜索引擎蜘蛛不一定都遵循robots规则;那么我的看法是,对于绝大多数的搜索引擎还是遵循这样的原则的,在robots.txt里面设置 还是会有一定的效果的。大家也可以去实践一下,就能更加明白了。

    以上是我给大家介绍的如何禁止百度收录网站的某些图片相关信息,大家也可看一下管理之前发过的robots语法


    相关链接:
    Robots内部语法详解

    Robots语法练习实战
    帖子永久地址: 

    黑帽联盟 - 论坛版权1、本主题所有言论和图片纯属会员个人意见,与本论坛立场无关
    2、本站所有主题由该帖子作者发表,该帖子作者与黑帽联盟享有帖子相关版权
    3、其他单位或个人使用、转载或引用本文时必须同时征得该帖子作者和黑帽联盟的同意
    4、帖子作者须承担一切因本文发表而直接或间接导致的民事或刑事法律责任
    5、本帖部分内容转载自其它媒体,但并不代表本站赞同其观点和对其真实性负责
    6、如本帖侵犯到任何版权问题,请立即告知本站,本站将及时予与删除并致以最深的歉意
    7、黑帽联盟管理员和版主有权不事先通知发贴者而删除本文

    0

    主题

    0

    听众

    15

    积分

    黑帽菜鸟

    Rank: 1

  • TA的每日心情
    开心
    2017-8-15 09:16
  • 签到天数: 9 天

    [LV.3]偶尔看看II

    学习了,很强
    回复

    使用道具 举报

    您需要登录后才可以回帖 登录 | 会员注册

    发布主题 !fastreply! 收藏帖子 返回列表 搜索
    回顶部