由于公司近一年开始朝向在云原生方向开始发展，已经将部分业务应用迁移至Kubernetes上运行，并且形成了一套一站式应用研发全生命周期管理体系，提供了如项目管理、代码托管、CI/CD等功能。因此数据平台也面临着从Hadoop到云原生的探索。我们做了一些尝试：首先是存储，使用OSS等对象存储替代了HDFS。其次就是计算，也是本篇文章将要介绍的，将Spark计算任务从Yarn迁移至K8S上运行。考虑到