火山引擎 EMR 上线瞬态集群能力,助力企业大幅降低使用成本

数据中台大数据数据湖仓

12月20日,火山引擎 E-MapReduce(简称“EMR”)正式上线瞬态集群新功能,该能力基于业界领先的 EMR Stateless 理念,可以实现集群级别的弹性伸缩,即无业务需求时释放集群,有业务需求时再拉起集群,从而帮助企业大幅降低产品使用和平台运维成本。

火山引擎 EMR 是一款云原生开源大数据平台产品,Stateless 是指在存算分离的基础上进一步将集群状态元素外置,含状态 Server(如 HMS、History Server)、用户数据、元数据、用户/权限/审计数据、服务/任务日志、集群配置、监控指标数据等。

据介绍,火山引擎 EMR Stateless 打破了过去集群常规运行模式,能让长运行集群变成轻量级瞬态集群,从而获得更好的弹性和扩展性。

picture.image   EMR 集群两种不同的运行模式

传统的 EMR 是基于任务调度,需要先创建集群,然后才能执行任务,企业需要长时间保有并运维集群。火山引擎 EMR Stateless 基于工作流调度,提交任务即可自动创建瞬态集群,任务结束后自动释放集群,帮助企业数据平台架构有更好的演进成长能力和最佳的成本优化。

据透露,已有多家客户正在使用或测试 EMR Stateless 能力,并在成本上获得较大优化收益。以其中一家客户为例,他们的大数据集群原本部署在 IDC 机房,业务负载高峰集中在白天的6个小时内。该客户搬站上云至火山引擎 EMR 后,得益于其灵活的瞬态集群能力、计算存储分离架构以及智能分层存储,成本共节省40%。

今年9月,火山引擎发布数智平台 VeDI,包括 EMR、ByteHouse、VeCDP 等多款数据产品,全面开放了字节跳动数据技术能力。目前,火山引擎数智平台已服务平安银行、陕西旅游、蓝河、美的、上海家化、万达、吉利领克、南孚、联合利华、李维斯等不同行业的客户,帮助其实现运维降本、运营提效和业务增长。

17
0
0
0
关于作者
相关产品
评论
未登录
看完啦,登录分享一下感受吧~
暂无评论