火山引擎EMR上线瞬态集群能力,助力企业大幅降低使用成本

  • 2022-12-21 16:57
  • 科技圈

  12月20日,火山引擎E-MapReduce(简称“EMR”)正式上线瞬态集群新功能,该能力基于业界领先的EMR Stateless理念,可以实现集群级别的弹性伸缩,即无业务需求时释放集群,有业务需求时再拉起集群,从而帮助企业大幅降低产品使用和平台运维成本。

  火山引擎EMR是一款云原生开源大数据平台产品,Stateless是指在存算分离的基础上进一步将集群状态元素外置,含状态Server(如HMS、History Server)、用户数据、元数据、用户/权限/审计数据、服务/任务日志、集群配置、监控指标数据等。

  据介绍,火山引擎EMR Stateless打破了过去集群常规运行模式,能让长运行集群变成轻量级瞬态集群,从而获得更好的弹性和扩展性。

  EMR集群两种不同的运行模式

  传统的EMR是基于任务调度,需要先创建集群,然后才能执行任务,企业需要长时间保有并运维集群。火山引擎EMR Stateless基于工作流调度,提交任务即可自动创建瞬态集群,任务结束后自动释放集群,帮助企业数据平台架构有更好的演进成长能力和最佳的成本优化。

  据透露,已有多家客户正在使用或测试EMR Stateless能力,并在成本上获得较大优化收益。以其中一家客户为例,他们的大数据集群原本部署在IDC 机房,业务负载高峰集中在白天的6个小时内。该客户搬站上云至火山引擎EMR 后,得益于其灵活的瞬态集群能力、计算存储分离架构以及智能分层存储,成本共节省40%。

  今年9月,火山引擎发布数智平台VeDI,包括EMR、ByteHouse、VeCDP等多款数据产品,全面开放了字节跳动数据技术能力。目前,火山引擎数智平台已服务平安银行、陕西旅游、蓝河、美的、上海家化、万达、吉利领克、南孚、联合利华、李维斯等不同行业的客户,帮助其实现运维降本、运营提效和业务增长。(作者:张扬)

头条推荐
图文推荐