# Pigsty

**Repository Path**: wangjiankui/Pigsty

## Basic Information

- **Project Name**: Pigsty
- **Description**: Pig 脚本转流程图

- **Primary Language**: JavaScript
- **License**: GPL-2.0
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 0
- **Forks**: 0
- **Created**: 2014-03-30
- **Last Updated**: 2020-12-19

## Categories & Tags

**Categories**: Uncategorized

**Tags**: None

## README

#Pigsty
Pig 脚本转流程图：大数据处理中Pig一般做为Hive的辅助，对于逻辑比较复杂（需要多个Hive SQL处理）的数据统计，Hive处理的效率偏差，所以一般采用Pig替代。Pig重在流程的处理，一般开发时可以分为几个步骤：
- 1. LOAD 基础数据
- 2. 数据格式化、拼接
- 3. Python streaming 进程逻辑处理
- 4. 保存

#项目依赖
本项目仅完成Pig脚本的解析，流程图展示部分使用开源项目：https://github.com/cpettitt/dagre-d3

#完成效果
_Pig代码示例_
_流程图示例(注意，暂未完美解析，还在完善中 )_