1039542 geekyouth 1578938931
深圳地铁大数据客流分析系统🚇🚄🌟
Scala
4 months ago
1640228 opensci 1578990842
994
混合型科学大数据流水线系统,包含丰富的处理器组件,提供Shell、DSL、Web配置界面、任务调度、任务监控等功能
Scala
4 months ago
925
打通了多个计算存储引擎如:Spark、TiSpark、Hive、Python和HBase等,对外提供统一REST/WebSocket/JDBC接口,提交执行SQL、Pyspark、HiveQL、Scala等脚本的计算中间件。
602
大数据平台数据服务框架。实现了Kafka实时数据过滤、清洗、转换、消费,实现了Spark SQL对Redis、MongoDB等非关系型数据库的数据的读写;集成了规则引擎,可基于规则引擎实现客户标签、画像等相关功能。
Scala
almost 2 years ago
11439529 fire framework 1677489254
429
Fire框架是由中通大数据自主研发并开源的、专门用于进行Spark和Flink任务开发的大数据框架,可节约70%以上的代码量。首创基于注解进行Spark和Flink任务开发,具备实时血缘、根因诊断、动态调优、参数热调整等众多平台化功能。Fire框架在中通内部每天处理数据量高达数千亿,在外部已被数十家公司所使用。
Scala
3 days ago
205
Spark快速开发框架,提高开发效率,主要针对离线任务场景
64
大数据实时流的计算框架
Scala
over 6 years ago
1020923 bluejoe 1578938480
60
可配置图形化大数据流水线系统,包含丰富的处理器组件,提供Shell、DSL、Web配置界面、任务调度、任务监控等功能
Scala
over 6 years ago
34
LakeSoul 端到端实时湖仓框架 Github 官方镜像 https://github.com/lakesoul-io/LakeSoul
Scala
23 days ago
1020923 bluejoe 1578938480
27
基于HTTP的spark streaming source和sink实现
17
spark开发模板
1281 for 1988 1578913984
10
使用akka+undertow搭建的简单的push服务
Scala
over 7 years ago
7
A simple Spark-powered ETL framework that just works 🍺
Scala
3 years ago
6892317 apache 1605059459
4
Apache Toree 提供了与远程 Apache Spark 进行交互和访问的机制
12 mirrors 1578989292
4
streamDM,是由华为诺亚方舟实验室开源的使用 Spark Streaming 挖掘大数据的开源软件
Scala
over 3 years ago

Search