# talent_photo_crawler

**Repository Path**: watchme/talent_photo_crawler

## Basic Information

- **Project Name**: talent_photo_crawler
- **Description**: 简易的网站图片爬虫，使用简单，代码可二次开发，性能高效基于多线程和并行计算的网络图片程序源码
- **Primary Language**: Java
- **License**: Apache-2.0
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 0
- **Forks**: 13
- **Created**: 2017-03-22
- **Last Updated**: 2020-12-19

## Categories & Tags

**Categories**: Uncategorized

**Tags**: None

## README

之所以出现这个简单易用，性能高效的图片爬虫talent-photo-crawler,是因为某天周末闲来无事，登进18禁网站看看艺术图时，
发现网速不好时看得很不爽，于是想到我可以先把网站里所有的图片下载到本地，在一个个以艺术的眼光欣赏，于是乎，选择了自己
实现一个简单易用的图片爬虫，并且基于并行计算和异步执行的多线程下载算法，可一个爬取线程同时下载当前页面图片数量的图片，不需要等待一副一副的下载，
源码里的demo是个使用例子，代码由注释，简单以上手。


如果有需要改进的地方，请各位指正。。。同时推荐下一个神奇的异步及时通讯框架talent-aio， https://git.oschina.net/tywo45/talent-aio
![输入图片说明](http://git.oschina.net/uploads/images/2017/0104/132845_68bfd793_636232.png "在这里输入图片标题")
以下是一秒钟爬取的图片数量，具体情况宽带和网络情况影响较大。
![输入图片说明](http://git.oschina.net/uploads/images/2017/0104/145224_7a316246_636232.png "在这里输入图片标题")