README.md · 混世侃/austin

项目在线演示地址：http://139.9.66.219:3000/

项目视频我正在Bilibili更新（三连越多，更新越有动力哟）

项目笔记关注公众号Java3y回复「austin」即可获取，还能加项目交流群哟！

消息推送平台austin介绍

核心功能：统一的接口发送各种类型消息，对消息生命周期全链路追踪。

意义：只要公司内部有发送消息的需求，都应该要有类似austin的项目。消息推送平台对各类消息进行统一发送处理，这有利于对功能的收拢，以及提高业务需求开发的效率。

使用姿势

1、创建需要发送的渠道账号

2、创建消息模板

3、测试发送消息是否正常

4、查看消息下发情况

5、亦可在新建模板时选择定时任务，通过上传csv文件和指定cron表达式实现下发消息

部署姿势

austin项目强依赖MySQL/Redis/(大概需要2G内存)，弱依赖kafka/prometheus/graylog/flink/xxl-job/apollo/hive(完全部署所有的服务，大概8G+内存)。如果缺少相关的组件可戳：安装相关组件教程。

实在想要clone项目后不用自己部署环境直接在本地启动debug，我这提供了会员服务，直连部署好的服务器。

1、austin使用的MySQL版本5.7x。如果目前使用的MySQL版本8.0，注意改变pom.xml所依赖的版本

2、填写application.properties中austin-database对应的ip/port/username/password信息

3、执行sql文件夹下的austin.sql创建对应的表

4、填写application.properties中austin.redis对应的ip/port信息

5、以上配置信息都在application.properties文件中修改。(prometheus/graylog/flink/xxl-job/apollo/kafka/hive可选)

6、austin前端管理系统部署，戳GitHub或Gitee跳转至对应的仓库

7、（可选）正常使用数据管理(查看实时数据链路下发)需要将austin-stream的jar包上传至Flink，根据部署文档启动Flink。在打jar包前需要填写com.java3y.austin.stream.constants.AustinFlinkConstant中的redis和kafka的ip/port（注意：日志的topic在application.properties中的austin.business.log.topic.name。如果没有该topic，需要提前创建，并使用Kafka作为消息队列实现)

8、（可选）正常使用定时任务需要部署xxl-job，根据部署文档启动xxl的调度中心，并在application.properteis中填写 austin.xxl.job.ip和austin.xxl.job.port

9、（可选）正常使用分布式日志采集需要部署graylog，根据部署文档启动graylog，并在application.properteis中填写 austin.grayLog.ip。

10、（可选）正常使用系统监控需要部署promethus和grafana，根据部署文档配置grafana图表。

11、（可选）正常使用动态配置中心需要部署apollo，根据部署文档启动apollo，通过docker-compose启动需要在AustinApplication注入对应的ip和port(可看注释)。

12、（可选）正常使用数据仓库需要部署hive，根据部署文档通过flink把数据写入到hive中（flink环境也要安装好），将austin-data-house的jar包提交到flink执行

技术栈

技术栈	实现
编程语言	Java（JDK 1.8)
项目管理工具	Maven 3.x
集成开发工具	IDEA 2022
部署服务器	Centos 7.6
系统部署工具	Docker & Docker-compose
项目环境	SpringBoot 2.5.6
关系型数据库	MySQL 5.7.X
缓存数据库	Redis:lastest
ORM框架	SpringData JPA 2.5.6
分布式定时任务框架	XXL-JOB v2.3.0
分布式配置中心	Apollo & Nacos
消息队列	Kafka & RabbitMQ & RocketMQ
分布式日志采集框架	Graylog
分布式计算引擎	Flink 1.16.0
监控采集组件	Prometheus
监控可视化组件	Grafana
数据仓库	Hive 2.3.2
大数据环境	Hadoop 2.7.4
大数据可视化	Metabase:lastest
前端技术	Amis

工程模块&系统流程

了解工程模块的职责，这对看项目代码的时候会有个比较清晰的认识：

工程模块	作用
austin-common	项目公共包：存储着项目公共常量/枚举/Bean
austin-support	项目工具包：对接中间件/组件
austin-cron	定时任务模块：对xxl-job封装和项目定时任务逻辑
austin-web	后台管理模块：提供接口给前端调用
austin-service-api	消息接入层接口定义模块：只有接口和必要的入参依赖
austin-service-api-impl	消息接入层具体实现模块：真实处理请求
austin-handler	消息处理逻辑层：消费MQ下发消息
austin-stream	实时处理模块：利用flink实时处理下发链路数据
austin-data-house	数据仓库模块：消费MQ数据写入hive