项目作者： PornBingo

项目描述：
SpiderMan: A Powerful Spider System in Python.

高级语言： Python

项目主页：

项目地址: git://github.com/PornBingo/SpiderMan.git

创建时间： 2020-05-17T02:18:38Z
项目社区：https://github.com/PornBingo/SpiderMan
开源协议：MIT License
下载

SpiderMan

一个爬取相关视频的开源爬虫系统。

运行

yum install python-devel mysql-devel gcc

$ wget http://download.redis.io/releases/redis-2.8.3.tar.gz
$ tar xzvf redis-2.8.3.tar.gz
$ cd redis-2.8.3
$ make
$ make install
$ redis-server

配置爬虫的源地址等，如pornhub.com等。

mysql> CREATE DATABASE `pornhub` CHARACTER SET utf8;

python bootstrap.py

Licensed under the MIT License.