目录
一、大数据组件版本信息
二、数据湖仓架构
三、数据湖仓组件部署规划
四、编译hudi
一、大数据组件版本信息
- hudi-0.14.1
- zookeeper-3.5.7
- seatunnel-2.3.4
- kafka_2.12-3.5.2
- hadoop-3.3.5
- mysql-5.7.28
- apache-hive-3.1.3
- spark-3.3.1
- flink-1.17.2
- apache-dolphinscheduler-3.1.9
二、数据湖仓架构
三、数据湖仓组件部署规划
| node106 | node107 | node108 | node109 | node110 |
| ZK |
ZK |
ZK |
||
| seatunnel |
seatunnel |
seatunnel |
||
| kafka |
kafka |
kafka |
||
| RM |
RM |
|||
| NM |
NM |
NM |
||
| NN |
NN |
|||
| DN |
DN |
DN |
||
| JN |
JN |
|||
