数据湖仓一体(一) 编译hudi
目录
一、大数据组件版本信息
二、数据湖仓架构
三、数据湖仓组件部署规划
四、编译hudi
一、大数据组件版本信息
- hudi-0.14.1
- zookeeper-3.5.7
- seatunnel-2.3.4
- kafka_2.12-3.5.2
- hadoop-3.3.5
- mysql-5.7.28
- apache-hive-3.1.3
- spark-3.3.1
- flink-1.17.2
- apache-dolphinscheduler-3.1.9
二、数据湖仓架构
三、数据湖仓组件部署规划
node106 | node107 | node108 | node109 | node110 |
ZK |
ZK |
ZK |
||
seatunnel |
seatunnel |
seatunnel |
||
kafka |
kafka |
kafka |
||
RM |
RM |
|||
NM |
NM |
NM |
||
NN |
NN |
|||
DN |
DN |
DN |
||
JN |
JN |
|||
文章版权声明:除非注明,否则均为主机测评原创文章,转载或复制请以超链接形式并注明出处。