黑帽联盟

 找回密码
 会员注册
查看: 1768|回复: 3
打印 上一主题 下一主题

[经验] 防止网站内部搜索被他人恶意利用

[复制链接]

895

主题

38

听众

3329

积分

管理员

Rank: 9Rank: 9Rank: 9

  • TA的每日心情
    难过
    昨天 22:31
  • 签到天数: 1652 天

    [LV.Master]伴坛终老

    1、前续

    相信很多站长遇到过这种情况:网站内的搜索功能被不良分子利用,通过在站内搜索框中不断搜索敏感关键词,产生一大批TITLE上带有敏感关键词的垃圾搜索结果页(如下图)。由于Baiduspider对每个站点的抓取额是有限定的,所以这些垃圾搜索结果页被百度收录,会导致其它有意义的页面因配额问题不被收录,同时可能因百度处理垃圾页面而影响网站正常排名。


    10月底百度站长平台在上海举办的线下培训QA环节中,学员们就如何防范此类垃圾搜索结果页展开深入讨论。携程SEO主管赖强认为,不良分子这样做的目的就是想让敏感关键词在搜索结果中大量曝光,既然百度对搜索结果页的收录有严格限制,那网站就做得彻底些,不允许搜索关键词出现在TITLE和摘要里,这样恶意操作者无法达成目的自然也不来骚扰

    培训结束后,百度站长平台联系了赖强,赖强也很愿意分享携程的具体解决方案:携程在遭遇此类垃圾搜索结果页后,修改了meta调用规划,即避免关键词出现在title/keywords/description处,尝试多种搜索结果页meta的写法后,发现目前这种使用最简短词语的方式效果最佳,不仅突出了页面核心关键词“搜索”,同时再也没有出现过恶意搜索结果页。

    二、解决办法

    核心思路有两个:A、修改搜索结果页的网页标题(title)、网页描述(description)、网页关键词(keywords)调用规则,不调用用户搜索的词;B、使用robots.txt禁止网址url被搜索引擎抓取收录。可两个思路分别使用,具体如下所述进行操作,但建议A、B同时使用。(由于腾讯qq等展示url的时候会调用title等信息,因此如选择robots,也要做好搜索结果页的title设置)

    2.1  修改搜索结果页的网页meta(title/keywords/description)调用规则

    2.1.1  meta只显示“搜索”

    【做法】修改后的页面meta(title/keywords/description)三部分不再显示用户搜索词,只显示“搜索”二字,title可带**网站名称,如下图

    040121415769349.png

    【效果】可避免敏感关键词的搜索结果页被收录,另外还可以避免搜索结果页面抢占其他页面的关键词排名,但会造成网站内大量网页(全部搜索结果网址)的meta一样。

    2.1.2  不同类别的搜索结果页meta设置唯一的需布局的关键词

    【做法】同样,修改后的页面meta(title/keywords/description)三部分不再显示用户搜索词,但显示某栏目类别下的搜索结果页meta设置的关键词,如下图,属于北京四星级酒店栏目分类下的搜索结果页的meta设置

    152139cpttv6qfk4y6n6gm.jpg

    【效果】可避免敏感关键词的搜索结果页被收录,但可能会出现部分搜索结果页抢占其他页面关键词的排名,因此需要做好关键词布局的整体规划工作。这种做法会造成部分搜索结果页的meta一样。

    2.2禁止网址url被搜索引擎抓取收录

    【做法】利用robots.txt文件,禁止符合搜索结果页特征的网址被搜索引擎抓取收录,如下图,禁止带search.php特征的网址url被搜索引擎抓取收录。
    152139pcv0jogbp220yndt.jpg
    【效果】理论上,禁止符合搜索结果页特征的网址被百度抓取收录,能提高百度的工作效率,让百度更有精力去抓取其他页面,另外因为不被抓取收录,这些页面自然也就不会在百度搜索结果中出现。但是由于robots.txt由于某些原因不一定能完全让百度不抓取收录,因此如发现百度不遵守robots的情况,可及时利用百度站长工具、快照投诉等机制进行反馈。

    帖子永久地址: 

    黑帽联盟 - 论坛版权1、本主题所有言论和图片纯属会员个人意见,与本论坛立场无关
    2、本站所有主题由该帖子作者发表,该帖子作者与黑帽联盟享有帖子相关版权
    3、其他单位或个人使用、转载或引用本文时必须同时征得该帖子作者和黑帽联盟的同意
    4、帖子作者须承担一切因本文发表而直接或间接导致的民事或刑事法律责任
    5、本帖部分内容转载自其它媒体,但并不代表本站赞同其观点和对其真实性负责
    6、如本帖侵犯到任何版权问题,请立即告知本站,本站将及时予与删除并致以最深的歉意
    7、黑帽联盟管理员和版主有权不事先通知发贴者而删除本文

    勿忘初心,方得始终!

    2

    主题

    0

    听众

    114

    积分

    黑帽新手

    Rank: 2

  • TA的每日心情
    擦汗
    2019-8-19 11:08
  • 签到天数: 54 天

    [LV.5]常住居民I

    这样能防止大部分了啊
    回复

    使用道具 举报

    12

    主题

    5

    听众

    192

    积分

    黑帽新手

    Rank: 2

  • TA的每日心情
    擦汗
    2017-10-11 12:07
  • 签到天数: 125 天

    [LV.7]常住居民III

    好的!又学到了
    回复

    使用道具 举报

    52

    主题

    2

    听众

    310

    积分

    黑帽学员

    Rank: 3Rank: 3

  • TA的每日心情
    奋斗
    2019-9-27 16:27
  • 签到天数: 258 天

    [LV.8]以坛为家I

    不错,好文章
    回复

    使用道具 举报

    您需要登录后才可以回帖 登录 | 会员注册

    发布主题 !fastreply! 收藏帖子 返回列表 搜索
    回顶部