# jd_spider **Repository Path**: cq_liyi/jd_spider ## Basic Information - **Project Name**: jd_spider - **Description**: jd spider - **Primary Language**: Python - **License**: Not specified - **Default Branch**: master - **Homepage**: None - **GVP Project**: No ## Statistics - **Stars**: 0 - **Forks**: 1 - **Created**: 2020-05-07 - **Last Updated**: 2020-12-18 ## Categories & Tags **Categories**: Uncategorized **Tags**: None ## README # jd_spider jd spider 根据京东分类抓取所有的数据, 分为两个爬虫, 抓取分类爬虫, 根据每个分类抓取数据的爬虫 采用scrapy-redis 分布式抓取 需要自己根据业务添加下载中间件