# bigdata2022

**Repository Path**: Clisongr/bigdata2022

## Basic Information

- **Project Name**: bigdata2022
- **Description**: 搭建好的大数据集群课程实验
- **Primary Language**: Unknown
- **License**: Not specified
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 0
- **Forks**: 0
- **Created**: 2024-09-23
- **Last Updated**: 2026-03-11

## Categories & Tags

**Categories**: Uncategorized

**Tags**: None

## README

# 大数据技术原理实验

### 成员介绍
202210430209 岑莉莎<br>
202210430226 呷绒祝玛

## 实验Test1 
### 实验分工
岑莉莎：代码Mapper类和main的FileSystem实例部分，实验过程编写。<br>
呷绒祝玛：代码Reducer类和main其余部分，实验结果，体会编写。其余部分共同完成。

## 实验Test2
### 实验分工
岑莉莎：实验虚拟机上Hbase对表的操作、容灾实验以及压缩对比，实验过程编写。<br>
呷绒祝玛：IDEA的Java代码整合编写以及运行，实验结果，体会编写。<br>
打包到虚拟机上运行为共同完成。


## 实验Test3
### 实验分工
岑莉莎：实验虚拟机上外部表sogou的操作操作。<br>
呷绒祝玛：实验虚拟机上外部分区表sogou_partition的操作。<br>
实验报告共同编写


## 实验Test4
### 实验分工
岑莉莎：数据源Java程序的编写运行，kafka方式数据流写入程序的编写和运行，Hive表的设计和数据输入，前三个Hive表数据查询。<br>
呷绒祝玛：单线程数据流写入、简单查询和HBase表内容的程序编写和运行，后五个Hive表数据查询。<br>
实验报告共同编写