​ 导读 本文介绍了火花思维教育科技有限公司在大数据架构上的一次重大转型：从 EMR 迁移到 Serverless 架构模式。文章首先回顾了 EMR 在公司的应用历程和遭遇的瓶颈，随后引出了 Serverless 技术的兴起及其优势。接着详细阐述了转型的策略、规划、实施细节和收益，并分享了转型过程中

​ 本文共计2457字 预计阅读时长8分钟 1 引言 海量数据的分布式处理与高效训练已成为企业构建竞争力的关键。传统大数据架构在应对超过一般数仓体量的数据处理和机器学习（ML）任务时，常因数据Shuffle性能瓶颈、资源利用率低、扩展性不足等问题，导致训练周期长、成本高、迭代效率低下，成为企业智能化

导语 在高速、高吞吐量的消息处理场景中，TDMQ Pulsar 版以其卓越的性能和可扩展性成为众多企业的首选。然而，随着生产者和消费者以极高的速度生产/消费大量消息，服务器资源如 CPU、内存、网络及磁盘 IO 等可能会面临饱和风险。为此，TDMQ Pulsar 版设计了完善的限流机制，以保护集群资

引言 Kubernetes 可以说是容器编排领域的事实标准。不管你的业务是运行在公有云、私有云，还是混合云上，Kubernetes 都能给你一种“统一天下”的感觉。它不仅能帮你把容器化应用管理得井井有条，还能让你的系统在扩展性、弹性、高可用性上更上一层楼。Kubernetes 就是云原生时代的“基础

陈鹏，腾讯云容器服务产品架构师，拥有丰富的云原生技术实践经验，同时也是 Kubernetes、Istio 等云原生项目 Contributor，《Kubernetes 实践指南》等电子书作者。 概述 EnvoyGateway 是基于 Envoy 实现 Gateway API 的 Kubernetes

陈鹏，腾讯云容器服务产品架构师，拥有丰富的云原生技术实践经验，同时也是 Kubernetes、Istio 等云原生项目 Contributor，《Kubernetes 实践指南》等电子书作者。 概述 本文介绍如何在 TKE 上部署 AI 大模型，以 DeepSeek-R1 为例，使用 Ollama

导语：本文主要探讨 Prometheus 在观测 Kubernetes 方面的独特优势和最佳实践，包括如何在 Kubernetes 不同层次和维度上实现全面的可观测性，如何排查最常见的 Kubernetes 故障，以及维护集群稳定高效运行的最佳实践。 雷畅 腾讯高级工程师/腾讯云可观测方案架构师。具

Prometheus 监控服务 功能优化 1.支持新建容器集群时自动开通 Prometheus 监控，提高用户使用效率。 2.Prometheus 国际站采集端架构升级，支持实例诊断、系统健康检查，并提升了采集 Agent 资源利用率和指标采集稳定性。 3.集成中心改版一期上线，支持用户统一管理不同

2024年 12月动态 消息队列 MQTT 版 01、消息队列 MQTT 版正式商业化 TDMQ MQTT 版正式商业化并开始计费，支持直接在控制台购买使用。用户可以购买基础版（2000、5000 TPS）和专业版（6000-50000 TPS）集群，同时支持包年包月和按小时计费两种计费模式。 官网

导语 在当前互联网行业飞速发展的背景下，企业对高效、稳定、灵活的服务治理方案需求愈发迫切。猫眼作为领先的互联网票务企业，通过采用腾讯云 北极星（Polaris），成功优化了其微服务架构，实现了显著的性能提升和故障容错能力增强。通过将注册配置中心从 Nacos 迁移至北极星，猫眼解决了多项技术瓶颈问题

导语 在Apache CoC 2024 杭州站大会中，腾讯云高级工程师张乐为与会者带来了精彩的演讲。围绕《基于 RocketMQ 底座实现 AMQP 协议》的背景、目标、方案设计以及几个核心技术实现做了详细的阐述。 作者简介 张乐 腾讯高级工程师，负责腾讯云 RabbitMQ Serverless

导语 Pulsar Meetup 2024 北京站已经成功落下帷幕。在本次盛会中，腾讯云的高级工程师韩明泽和王震江为与会者带来了精彩的演讲。他们围绕多网接入、集群迁移以及高可用最佳实践这三大核心议题，深入剖析了《腾讯云上基于 Apache Pulsar 的大规模生产实践》，为听众呈现了一场知识与经验

2024年 9月动态 消息队列 CKafka 版 01、专业版实例降配时解除限制 专业版实例降配时，若近 7 天峰值带宽或存储超过目标规格，将不再强制禁止降配。降配页面将提供风险提示，用户可自行判断是否继续操作。 官网链接： https://cloud.tencent.com/document/pr

导语 零改造、低侵入，RocketMQ 平滑迁移上云实践。 在迁移上云场景遇到的疑问和挑战 当前，随着企业对更高并发量、更多使用场景、更强计算能力、更加稳定安全的业务环境的追求，迁移上云已经是企业数字化发展的必然趋势。但对不少企业来说，迁移上云往往是一个重大且艰难的决定。迁移的过程虽不至于历经九九八

导语 自2024年9月6日起，TDMQ Pulsar 版专业集群支持消息、元数据两级跨地域复制功能，消息级复制解决用户全球地域的数据统一归档问题，元数据级复制提供解决用户核心业务跨地域容灾的场景。 用户在跨地域场景遇到的疑问和挑战 在跨地域相关场景下，通常有两大类原始需求： 跨地域容灾 TDMQ P