# jobAnalysis **Repository Path**: kergp/jobAnalysis ## Basic Information - **Project Name**: jobAnalysis - **Description**: 使用大数据分析职位信息 - **Primary Language**: Java - **License**: GPL-2.0 - **Default Branch**: master - **Homepage**: None - **GVP Project**: No ## Statistics - **Stars**: 0 - **Forks**: 0 - **Created**: 2017-02-02 - **Last Updated**: 2020-12-19 ## Categories & Tags **Categories**: Uncategorized **Tags**: None ## README #jobAnalysis 1. 爬虫系统使用scrapy框架,从职位平台或是猎头平台爬取数据 2. 使用hive清洗处理数据 3. 使用spark分析数据仓库中的数据