# bigdata_learn

**Repository Path**: jiangliuer/bigdata_learn

## Basic Information

- **Project Name**: bigdata_learn
- **Description**: 学习大数据相关课程时的一些代码记录，从hadoop的生态圈到hbase，spark等应有尽有

- **Primary Language**: Java
- **License**: Not specified
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 0
- **Forks**: 0
- **Created**: 2018-10-09
- **Last Updated**: 2020-12-19

## Categories & Tags

**Categories**: Uncategorized

**Tags**: None

## README

# 大数据学习 示例代码
本示例代码为学习大数据相关知识进行编程的示例代码，具体包括如下：
* hadoop hdfs文件系统常用操作
* mapreduce WordCount原码
* hive 自定义函数（UDF）
* hbase数据库常用操作
* hbase mapReduce操作
* SparkCore WordCount
* SparkSql mysql数据导入到hive表
* rdd数据转化为dataFrame处理
* SparkStream DStream监听端口进行WordCount
* SparkStream DStream读取Kafka数据
* UdateStateByKey的使用
等等代码，希望能够给正在学习大数据相关知识的你带来方便

PS：本人CSDN博客地址 [传送门](https://blog.csdn.net/fanghailiang2016)，学习大数据过程中的一些疑问，也可以来到这里找寻答案

# 本项目的依赖jar包使用maven管理，在pom.xml中进行配置。
最后祝你技术更上一层楼！！！