# lanius-design
**Repository Path**: ArthurAlex/lanius-design
## Basic Information
- **Project Name**: lanius-design
- **Description**: Lanius大数据治理平台是一款由渝州大数据实验室研发推出的数据平台，由设计器、调度器、执行器三部分构成，拥有生产级、易使用、智能化的特点。lanius-design 为平台的设计器，主要包含插件库管理、资源库管理、任务设计、任务执行/调试等功能。
- **Primary Language**: Java
- **License**: LGPL-2.1
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No
## Statistics
- **Stars**: 0
- **Forks**: 5
- **Created**: 2025-09-09
- **Last Updated**: 2025-09-09
## Categories & Tags
**Categories**: Uncategorized
**Tags**: None
## README
Lanius Desgin
## 一、研发背景
数据继土地、劳动力、资本之后成为新兴的生产要素，各国政府相继制定战略规划，加大对数据汇聚、分析、安全等方面的投入，我国各级政府也不断出台政策，在大数据治理方面给予支持。
渝州大数据实验室是重庆市九龙坡区人民政府与北京大数据先进技术研究院共同建设的新型科研创新实体。实验室由我国知名院士领衔，面向国家大数据建设的基础通用需求、前沿关键技术和典型应用场景，推进大数据技术研发应用、成果转化与生态构建，为国家大数据建设提供支撑。
## 二、产品简介
“Lanius大数据治理平台”是一款由渝州大数据实验室研发推出的数据处理平台，拥有生产级、易使用、智能化的特点。以推动国内数据治理发展为目标，向个人、政企单位免费开源。
产品主要由设计器（Lanius Desgin）、执行器（Lanius Executor）和调度器（Lanius Orchestrate）三部分构成，其中：
- Lanius Desgin用于开发人员设计数据处理任务，Lanius Executor用于执行已设计好的任务，用户加入QQ群155800768后，都可以通过群文件免费下载和使用。
- Orchestrate用于运维人员调度和监控任务，目前已经通过Gitee平台完全开源。
## 三、主要功能
Lanius Design是渝州大数据实验室研发推出的用于数据融合、质控、转换、共享、知识建模、分析挖掘等场景的综合数据治理平台，具备信创环境全适配、操作过程全可视、数据类型全接入、批流模式全覆盖4大特色。
Lanius Design采用了分布式架构和组态式设计的技术路线，除了具有高可用、水平扩展的特性外，还能通过插件实现业务能力的动态增减。平台目前已有380余款插件，且根据用户需求还在进行不断扩充。依拖强大的插件体系，平台已经实现以下主要功能：
### 1. 设计开发
支持全可视图形化的任务流程设计能力，支持设计流程嵌套、过程复用、流程控制、文件操作、命令调用、模板驱动、设计流程存储到各种资源存储库等能力。
### 2. 过程调试
支持边设计边调试，针对每个插件步骤的输入输出进行实时预览与监控，通过日志等级、并发控制、性能监控、步骤度量分析等操作实现对任务流程的轻松调试。
### 3. 数据接入与输出
支持多达40余种国产及国际主流关系数据库数据源类型（多版本独立共存），支持列式、分布式、文档型及大数据库数据源类型，支持多种文件格式数据源类型(支持文件的上传下载移动删除等操作)，支持WEB接口服务数据源类型，支持流式数据类型。
### 4. 数据转换
支持对数据进行合并、拆分、转换、映射、加解密、分组计算、统计、查询、行列转置等操作。支持在平台种使用Java、JS、Python、SQL脚本、正则等方式在处理数据流程中使用脚本开发实现部分插件未提供的能力，使用脚本代码对数据进行加工处理。
### 5. 分析挖掘
支持对加载的数据进行分析、分词、聚类、抽样、评分等分析操作。
### 6. 质量控制
支持对加载的数据进行质控检验、度量统一、规则定义等过程，实现对数据融合的质量控制。
### 7. 边缘计算
支持按需求定制软件精简化打包，实现对边缘计算设备的兼容部署，支持各种工控协议、硬件设备数据接入（OPC、MODBUS、SOCKET协议）。
### 8. 执行背压
支持让转换中的步骤之间可以相互感知到数据的处理速度，步调一致的处理数据，防止出现瓶颈导致内存溢出问题，从而提高平台的稳定性。
### 9. 即插即用
对插件类加载器进行了改良升级，在插件库管理中，支持所有插件可以在不停止程序、不重启的情况下实现安装与卸载，提高了生产环境下的连续可用性，支持插件在流程中多版本共存使用。
### 10. 在线协作
为满足在线协作，灵活存储作业、转换能力，设计器提供资源库管理功能。把资源存储在数据库中，支持多用户同时远程获取资源，目前支持MYSQL、ORACLE、达梦等多种数据库存储。
## 四、联系我们
电话：023-68516919
QQ群：155800768
QQ群二维码：
公众号二维码：