背景
当前腾讯云 EMR 集群主要采用 HOST 资源部署, HOST 具备按需使用、易于部署与维护、高度灵活性以及企业自主性强等优势。然而,这要求企业运维人员具备熟练的运维能力。随着企业数据规模的增长和处理计算任务的增多,企业使用云上大数据平台带来了挑战,同时运维成本也在不断的提升。因此,企业也希望可以降低运维门槛,同时也希望提高资源利用率,降低使用成本。
鉴于此背景,腾讯云 EMR 推出了托管节点(简称 MNode )资源类型。该资源类型为企业提供自动化运维、灵活弹性且低成本的 MNode ,用于构建腾讯云 EMR 大数据平台,旨在解决企业在数据计算处理过程中所面临的繁琐运维与降本问题。
⚠️:host资源类型为普通云服务器,资源隶属于用户。
什么是托管节点?
MNode 是基于 EMR on CVM 产品形态推出的全托管资源类型,MNode 完全由 EMR 系统托管。
MNode 机型
MNode 目前提供 MNode- 标准型、MNode- 内存型和 MNode- 计算型三种机型支持在集群计算节点(TASK)中部署。
三种机型分别特点如下:
- MNode-标准型:均衡的计算、内存和网络资源,可满足大多数场景下的资源需求。
- MNode-内存型:具有大内存的特点,适合高性能数据库、分布式内存缓存等需要大量的内存操作、查找和计算的应用。
- MNode-计算型:具有最高单核计算性能;适合批处理、高性能计算和大型游戏服务器等计算密集型应用。
MNode 将不断探索更多可能,未来将持续推出更多降本机型及适配更多节点类型。
MNode 特点与优势
低成本
对比企业使用 HOST 不同机型部署集群所付出成本与切换 MNode 机型部署集群所付出的成本,MNode 可平均帮助企业降低30%的资源使用成本。(具体降本数值取决于客户使用机型及业务场景)
MNode 按量计费 VS HOST 按量计费
HOST 各机型切换 MNode 后可帮助企业节约成本如下图:
⚠️:HOST机型四代次以下按量计费支持阶梯定价,故切换成本节约超100%,降本明显。
MNode 包年包月计费 VS HOST 包年包月计费
HOST 各机型切换 MNode 后可帮助企业节约成本如下图:
⚠️:MNode 资源不同地域定价不同,各机型单核单内存刊例价详见官网文档说明。
弹性灵活
- 弹性扩展:MNode 既支持手动扩缩容和升降配置,也支持自动伸缩功能,从而满足集群资源按需使用。
- 灵活计费:MNode 提供包年包月计费和按量计费两种计费模式,以便根据业务需求进行灵活选择,从而节约成本。
- 灵活部署:MNode 在集群部署中支持与 HOST、POD 两种资源类型混合部署。
故障自动替换
为了确保集群和业务的稳定性,当节点遭遇故障时,EMR系统具备自动监测故障并自动替换故障节点;同时,EMR系统能够将故障节点上的任务和服务迁移至新采购的正常节点上,以确保集群的正常运行。在此过程中,用户任务的提交不会受到影响,且不会产生额外费用。
综上,故障自动替换机制,具备实时监控、故障检测、任务迁移等能力,当 MNode 资源在遇到故障时能够迅速作出反应,确保集群和业务稳定性。
如何使用托管节点
MNode 在计算节点(task)中进行部署,通过 MNode 切换 HOST 资源,助力社交电商平台头部客户及科技证劵公司头部客户的集群计算成本降本 30%+ ,同时减少 50% 的人工运维工作。下面提供了简单的部署资源类型切换示例,展示了 MNode 通过手动扩容和配合自动伸缩功能部署。
帮助某知名科技证券公司,依托腾讯云 EMR 平台,构建了涵盖客户金融风险评估、精细化运营等多种业务场景的大数据集群;该企业由当前 HOST- 标准型 SA4 机型(8核16G)切换成 MNode- 标准型用于部署计算节点,其中每日固定使用 30 台,同时每日业务高峰期 3 小时主要集中在晚上 8 点到 11 点,需要按量使用 20 台。助力客户降本测算如下:
⚠️:包月成本=单节点包月刊例价*数量 按量使用成本=单节点按量刊例价*数量*时长*30(天)
总结
腾讯云 EMR 推出托管节点(MNode)资源类型,具有全自动化运维、弹性灵活及低成本等优势,助力企业综合降本 30% 。当前,MNode 正处于邀测阶段。我们诚挚邀请对此感兴趣的读者与我们取得联系,以便安排试用体验。