Skip to content

Latest commit

 

History

History

02-eks-datalake-example

EMR on EKS

上一期视频我们展示了如何快速搭建EMR on EKS,那么今天的视频就是在上一期的内容基础之上,看一下如何快速部署数据湖三剑客——Iceberg、Hudi和Delta Lake。

视频

NetFlix on UWP

前提

需要一个Bash脚本的执行环境,并安装如下命令行工具:

架构

执行步骤

需要首先执行01-eks-emr-example目录下的01、02、03编号开头的脚本创建EMR on EKS集群,集群建成后按照脚本命名的编号顺序执行04到05就可以分别部署和执行Iceberg、hudi和Delta Lake数据湖,清理脚本请首先使用96编号的脚本清除数据湖任务的资源,最后顺序执行97到99编号的脚本就可以清理所有的资源。

参考资源