百度网盘资源搜索引擎系统-BaiduyunSpider 爬虫+网站PHP源码【免费分享】
aiduyunSpider,是基于轻量级的PHP框架Codeigniter+Python开发的一套百度百度云盘搜索引擎爬虫程序。包含百度云网盘爬虫、网站前后端、搜索,整套服务。
可以采集小说,电影,音乐,种子,或者各大类教程资源,还是挺不错的。
网站: PHP Codeigniter
爬虫:Python
搜索引擎:Xunsearch
数据库:MySql
主要功能介绍:
分布式爬虫
爬虫IP代理
Web 控制面板
死链检测
重构爬虫 => 采用Node.js
使用 elasticsearch 搜索引擎
安装部署教程
## 运行环境
开始之前你需要安装
* PHP 5.3.7 +
* MySQL
* Python 2.7 ~
* [xunsearch](https://xunsearch.com/) 搜索引擎
## 获取源码
“`
git clone git@github.com:k1995/BaiduyunSpider.git
“`
或手动下载
“`
httpss://github.com/k1995/BaiduyunSpider/archive/master.zip
“`
下载完毕后,___项目的目录结构___大致是这样的
“`
:- indexer/? #索引
:- spider/? ?#爬虫
:- sql/
:- web/? #网站
:- application/
:- config/ # 配置相关
:- config.php
:- database.php # 数据库配置
…
…
:- static/ # 存放静态资源,css|js|font
:- system/
:- index.php
…
“`
## 开始部署
### 创建数据库
创建名为`pan`的数据库,编码设为`utf-8`。然后导入`sql`,完成表的创建。
### 网站部署
支持`nginx`,`apache` 服务器。
__apache__ 需要开启 *mod_rewrite* 。
__nginx__? 配置如下
“`
location
版权声明
本文仅代表作者观点,不代表xx立场。
本文系作者授权xx发表,未经许可,不得转载。
发表评论:
◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。