# BigDataProcessing **Repository Path**: solitary-cute-beast/big-data-processing ## Basic Information - **Project Name**: BigDataProcessing - **Description**: 湖北工业大学计算机科学与技术专业,云计算与大数据处理实验流程。 作者甘劲博 - **Primary Language**: Unknown - **License**: Apache-2.0 - **Default Branch**: master - **Homepage**: None - **GVP Project**: No ## Statistics - **Stars**: 1 - **Forks**: 0 - **Created**: 2024-04-08 - **Last Updated**: 2024-06-07 ## Categories & Tags **Categories**: Uncategorized **Tags**: None ## README # BigDataProcessing #### 介绍 湖北工业大学计算机科学与技术专业,云计算与大数据处理实验流程。 针对学校给出的流程,简化流程并修改了其中的错误。 #### 环境介绍 ##### 使用DockerDesktop最新版本即可(使用WSL2) ### WSL2只是一个平台,所以不需要安装ubuntu(WSL),安装docker-desktop的过程中docker会自动化的使用WSL2。 ### 安装注意C盘空间,可以将虚拟机的位置移动到其他盘,最新版使用WSL2的docker-desktop中可以直接选择虚拟机位置并自动移动。 #### 任务介绍 ##### 本仓库对原本的实验内容流程进行了更改,并删除了一些现在不能使用的链接或者代码。循序渐进的完成实验。 ### 作者 ### 甘劲博 ### 21计科5 ### 2110551202 ## !!!注意,Spark进行mnist训练的时候内存给到8G,CPU可以给满,这样会快很多。报错可能是内存给少了。 ## 学校仓库地址https://github.com/hbut-edu/big-data-processing