黑帽联盟

 找回密码
 会员注册
查看: 1724|回复: 2
打印 上一主题 下一主题

[建站源码] 2016最新百度云网盘搜索引擎源码,附带Python爬虫+PHP网站+Xunsearch搜索引擎

[复制链接]

295

主题

18

听众

965

积分

管理员

Rank: 9Rank: 9Rank: 9

  • TA的每日心情
    难过
    2024-11-13 00:16
  • 签到天数: 370 天

    [LV.9]以坛为家II

    2016最新百度云网盘搜索引擎源码,附带Python爬虫+PHP网站+Xunsearch搜索引擎,Python百度云网盘搜索引擎,爬虫+网站,搜索引擎采用Xunsearch高效搜索,源码很简单,附带安装教程,可二开,全自动更新百度云盘内容,全自动采集哦!许多人都再找的源码。

    网盘搜索源码

    # 爱百应 - 百度云搜索引擎,安装部署教程

    ## 运行环境

    开始之前你需要安装

    * PHP 5.3.7 +
    * MySQL
    * Python 2.7 ~
    * [xunsearch](http://xunsearch.com/) 搜索引擎



    ## 获取源码

    ```
    git clone git@github.com:k1995/BaiduyunSpider.git
    ```

    或手动下载

    ```
    https://github.com/k1995/BaiduyunSpider/archive/master.zip
    ```



    下载完毕后,___项目的目录结构___大致是这样的

    ```
    --- indexer/  #索引
    --- spider/   #爬虫
    --- sql/      
    --- web/      #网站
        --- application/
            --- config/ # 配置相关
                    --- config.php
                    --- database.php # 数据库配置
                    ...
            ...
        --- static/ # 存放静态资源,css|js|font
        --- system/
        --- index.php
        ...
    ```

    ## 开始部署

    ### 创建数据库

    创建名为`pan`的数据库,编码设为`utf-8`。然后导入`sql`,完成表的创建。



    ### 网站部署

    支持`nginx`,`apache` 服务器。

    __apache__ 需要开启 *mod_rewrite* 。

    __nginx__  配置如下

    ```
    location /
    {   
        index index.php;
        try_files $uri $uri/ /index.php/$uri;
    }

    location ~ [^/]\.php(/|$)
    {
        fastcgi_pass  127.0.0.1:9000;
        fastcgi_index index.php;
        include fastcgi.conf;
        include pathinfo.conf;
    }
    ```



    ####  配置文件修改

    `config.php` 文件修改网站标题,描述等信息

    `database.php` 修改数据库账号,密码等信息

    > 网站是基于CodeIgniter 框架开发的,如安装,部署,或二次开发有问题,请参考[官网文档]( http://codeigniter.org.cn/user_guide/general/welcome.html)



    ### 启动爬虫

    进入 `spider/`目录,修改`spider.py` 中数据库信息。

    __如果你是第一次部署,需运行下面命令,完成做种__

    ```
    python spider.py --seed-user
    ```

    上面其实就是抓取百度云热门分享用户的相关信息,然后从他们开始入手爬取数据

    然后运行

    ```
    python spider.py
    ```

    此时爬虫已经开始工作了



    ### 安装xunsearch

    目前使用__xunsearch__作为搜索引擎,后面会更换为`elasticsearch`。

    安装过程请参考(不需要安装,PHP SDK,我已经整合到web里了)

    http://xunsearch.com/doc/php/guide/start.installation



    ### 索引数据
    上面我们完成了爬虫的数据抓取,网站的搭建,但还不能搜索,下面开始最后一步,索引的建立。

    进入 `indexer/`目录,在`indexer.php`中将$prefix,替换为你web的根路径
    ```
    require '$prefix/application/helpers/xs/lib/XS.php';
    ```
    并修改数据库账号密码

    然后运行
    ```
    python ./index.php
    ```

    到此为止程序已全部安装完毕



    程序下载地址:
    购买主题 本主题需向作者支付 3 黑币 才能浏览
    帖子永久地址: 

    黑帽联盟 - 论坛版权1、本主题所有言论和图片纯属会员个人意见,与本论坛立场无关
    2、本站所有主题由该帖子作者发表,该帖子作者与黑帽联盟享有帖子相关版权
    3、其他单位或个人使用、转载或引用本文时必须同时征得该帖子作者和黑帽联盟的同意
    4、帖子作者须承担一切因本文发表而直接或间接导致的民事或刑事法律责任
    5、本帖部分内容转载自其它媒体,但并不代表本站赞同其观点和对其真实性负责
    6、如本帖侵犯到任何版权问题,请立即告知本站,本站将及时予与删除并致以最深的歉意
    7、黑帽联盟管理员和版主有权不事先通知发贴者而删除本文

    0

    主题

    0

    听众

    45

    积分

    黑帽菜鸟

    Rank: 1

  • TA的每日心情
    开心
    2018-6-23 16:58
  • 签到天数: 39 天

    [LV.5]常住居民I

    6666666666666啊
    回复

    使用道具 举报

    1

    主题

    0

    听众

    345

    积分

    黑帽学员

    Rank: 3Rank: 3

  • TA的每日心情

    2020-1-22 01:58
  • 签到天数: 115 天

    [LV.6]常住居民II

    我下载试试看
    回复

    使用道具 举报

    您需要登录后才可以回帖 登录 | 会员注册

    发布主题 !fastreply! 收藏帖子 返回列表 搜索
    回顶部