# allUniversityMajorPan

**Repository Path**: tengda1221/allUniversityMajorPan

## Basic Information

- **Project Name**: allUniversityMajorPan
- **Description**: python爬虫项目
- **Primary Language**: Unknown
- **License**: Not specified
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 0
- **Forks**: 1
- **Created**: 2024-08-15
- **Last Updated**: 2024-08-15

## Categories & Tags

**Categories**: Uncategorized

**Tags**: None

## README

# allUniversityMajorPan

#### 项目介绍
分析全国大学招生计划，爬取了高考派中2300所大学在全国31个地区关于文科和理科的招生计划，并对其做了初步的分析，实现数据可视化

#### 项目架构
数据——清洗——分析——可视化


#### 制作流程

1. 分析高考派高校专业招生计划页面的ajax
2. 获取基础数据，高校ID，城市列表
3. 利用Python爬取高校招生信息
4. 对所爬取的数据处理日志文档（可能会有出错的爬取结果）
5. 抽取有效信息，转为json数据
6. 采用Echarts做的数据可视化
7. 人为“瞎哔哔”的结论



#### 特别说明

1. 所有数据来源均为互联网，其中高校招生计划数据来自于“高考派”
2. 所得结论均为个人“瞎推测”，不具备任何参考价值
3. 本项目仅为技术交流所用，感谢老师同学们的帮助
4. 项目较为初级，只是作为python3爬虫入门所写，还望各位客官姥爷们轻喷
5. Thanks


#### 技术扩展
1. python的req请求
2. 正则抽取规则
3. 字典、列表、字符串、运算符等
4. 对数据json转化
5. python的OS模块
6. python多线程
7. Echarts数据可视化