# job

**Repository Path**: xuededong/job

## Basic Information

- **Project Name**: job
- **Description**: 抓取boss直聘济南市java开发职位信息，生成地理位置分布图，并提供正反关键信息搜索
- **Primary Language**: Unknown
- **License**: Not specified
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 3
- **Forks**: 2
- **Created**: 2019-02-23
- **Last Updated**: 2020-12-19

## Categories & Tags

**Categories**: Uncategorized

**Tags**: None

## README

# job

#### 介绍
抓取boss直聘济南市java开发职位信息，生成地理位置分布图，并提供正反关键信息搜索，
当然您也可以分析boss直聘上其他职位，其他城市。
#### 软件架构
webmagic+spring boot+spring data jpa +vue.js+腾讯位置服务
#### 怎么使用
由于反爬限制，暂时无法自动获取数据，经过测试大概在某个时间段内（3分钟？5分钟？）每请求100次左右就会出现验证码，可以选择破解验证码，使用代理ip，人工访问页面手动打码，经测试，用tess4j识别不准确，免费代理ip不稳定，这里在遇到验证码时，在部署的机器上(相同ip)人工访问任意detail页面打码。开启10个线程，抓取220条数据，大概总耗时3-4分钟。
#### 演示地址
http://47.98.125.142:9090/bosszhipin.html
#### 效果演示
![1](1.png)