hadoop-demo
├── docs -- 相关文件存放
├── src
├──── base -- 前端视图基础类
├──── config -- hadoop配置类
├──── controller -- hdfs操作接口 
├──── executor -- 案例任务执行器
├────── analyze -- 数据分析
├────── mapReduce -- mapReduce相关操作-单词统计
├────── recommend -- 系统推荐
├──────── movie -- 电影推荐
├──── hdfs -- hdfs 相关配置以及操作
├──── props -- hadoop属性配置
├──── util -- 工具类 
└──── HadoopDemoApplication.java -- springboot启动类

GET请求 请求地址: http://127.0.0.1:8080/file/getPathInfo
参数说明：{"path": ${目录路径}}
参数示例：{"path": "/"}

POST请求 请求地址: http://127.0.0.1:8080/file/mkdir
参数说明：{"folderPath": ${目录路径}}
form-data参数示例：{"folderPath": "/data"}

POST请求 请求地址: http://127.0.0.1:8080/file/upload
参数说明：{"uploadPath": ${hdfs目录路径}, "file": ${MultipartFile文件}}
form-data参数示例：{"uploadPath": "/data", "file": ${MultipartFile文件}}

POST请求 请求地址: http://127.0.0.1:8080/file/uploadFileFromLocal
参数说明：{"path": ${本地文件路径}, "uploadPath": ${上传的hdfs路径}}
form-data参数示例：{"path": "C:\Users\XXX\Desktop\用户信息-导入模板.xlsx", "uploadPath": "/data"}

GET请求 请求地址: http://127.0.0.1:8080/file/getPathInfo
参数说明：{"path": ${目录路径}}
参数示例：{"path": "/"}

POST请求 请求地址: http://127.0.0.1:8080/file/download
参数说明：{"path": ${hdfs目录路径}, "fileName": ${MultipartFile文件}}
form-data参数示例：{"path": "/data", "fileName": "用户信息-导入模板.xlsx"}

POST请求 请求地址: http://127.0.0.1:8080/file/downloadFileFromLocal
参数说明：{"path": ${hdfs文件路径}, "downloadPath": ${本地电脑路径}}
form-data参数示例：{"path": "/data", "downloadPath": "C:\Users\XXX\Desktop\"}

POST请求 请求地址: http://127.0.0.1:8080/file/copyFile
参数说明：{"sourcePath": ${hdfs源文件路径}, "targetPath": ${hdfs目标文件路径}}
form-data参数示例：{"sourcePath": "/data/用户信息-导入模板.xlsx", "targetPath": "/test/用户信息-导入模板.xlsx"}

POST请求 请求地址: http://127.0.0.1:8080/file/readFile
参数说明：{"filePath": ${hdfs文件路径}}
form-data参数示例：{"filePath": "/data/计税公式.txt"}

POST请求 请求地址: http://127.0.0.1:8080/file/renameFile
参数说明：{"oldName": ${hdfs旧文件名称}, "newName": ${hdfs新文件名称}}
form-data参数示例：{"oldName": "/data/用户信息-导入模板.xlsx", "newName": "/data/用户信息-重命名.xlsx"}

POST请求 请求地址: http://127.0.0.1:8080/file/rmdir
参数说明：{"path": ${hdfs文件路径}, "fileName": ${文件名称，不填为删除文件夹}}
form-data参数示例：{"path": "/data", "fileName": "用户信息-导入模板.xlsx"}

GET请求 请求地址: http://127.0.0.1:8080/reduce/wordCount
参数说明：{"jobName": ${任务名称}, "inputPath": ${分词路径，如果是文件家路径，则默认分词该文件夹下所有的文件}}
参数示例：{"jobName": "test", "inputPath": "/fenci"}

遍历根目录下的文件 
hadoop fs -ls / 

查看分词结果
hadoop fs -cat /output/test/part-r-00000

POST请求 请求地址: 127.0.0.1:8080/analyze/log
参数说明：{"jobName": ${任务名称}, "inputPath": ${分词路径，如果是文件家路径，则默认分词该文件夹下所有的文件}}
参数示例：{"jobName": "log", "inputPath": "/log"}

查看请求类型统计
hadoop fs -cat /output/log-request/part-r-00000

查看响应结果统计
hadoop fs -cat /output/log-requestStatus/part-r-00000

查看请求类型统计
hadoop fs -cat /output/log-requestMethod/part-r-00000

POST请求 请求地址: 127.0.0.1:8080/recommend/movie
参数说明：{"jobName": ${任务名称}, "inputPath": ${测试数据，文件路径，如果是文件的根路径，则默认该文件夹下所有的文件}}
参数示例：{"jobName": "movie", "inputPath": "/data/small.csv"}

步骤1 - 查看用户与物品的评分矩阵
hadoop fs -cat /output/recommend/movie/step1/part-r-00000

步骤2 - 查看物品的同现矩阵
hadoop fs -cat /output/recommend/movie/step2/part-r-00000

步骤3 - 查看合并同现矩阵和评分矩阵后的矩阵
hadoop fs -cat /output/recommend/movie/step3_1/part-r-00000
hadoop fs -cat /output/recommend/movie/step3_2/part-r-00000

步骤4 - 查看电影推荐结果上【矩阵相乘结果】
hadoop fs -cat /output/recommend/movie/step4/part-r-00000

步骤5 - 查看电影推荐结果下【矩阵相加结果】
hadoop fs -cat /output/recommend/movie/step5/part-r-00000