# BooksSipder

**Repository Path**: sdm89/BooksSipder

## Basic Information

- **Project Name**: BooksSipder
- **Description**: 小说爬虫
- **Primary Language**: Unknown
- **License**: Not specified
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 0
- **Forks**: 0
- **Created**: 2021-08-31
- **Last Updated**: 2021-09-03

## Categories & Tags

**Categories**: Uncategorized

**Tags**: Sipder, 小说爬虫, Scrapy

## README

# BookSpider
- 概述
> 笔趨阁小说数据整合

- 数据
> json:file/json/
> sql:file/sql/

- 技术栈
> 1. scrapy(使用框架)
> 2. python
> 3. redis(主要应用于数据去重)
> 4. 更多内容请参看 `requirements.txt` 文件

- 安装
> ``` python
> pip install -r requirements.txt
> ```

- 运行
> 1. `pip install -r requirements.txt`
> 2. `scrapy crawl books`

- 更新记录

1. 2021年 08月 31日 星期二 
> 1. 新建 `README.md`
> 2. 新建 `requirements.txt`文档