亚马逊AWS官方博客
Category: Analytics
RDS for MySQL 8.0 升级 8.4 之下游 Binlog 消费处理实战 (一)—— 蓝绿部署下的 Canal CDC 位点衔接与故障处理
本文基于一次 RDS for MySQL 8.0 升级至 8.4 的蓝绿切换演练,分析即使正确开启了 GTID 模式、Canal 切换到绿环境只读副本后仍然出现 errno 1236 的原因,说明 GTID 位点的修补方法、Kafka 追赶阶段的消息大小限制,以及适用于该演练拓扑的切换前检查、故障处置与切换后验证步骤。 本文的结论基于 Canal 以 GTID 模式订阅 RDS for MySQL 只读副本、通过蓝绿部署升级至 MySQL 8.4。
AWS 一周综述:欢迎 DuckLabs 加入 AWS 团队,代理资源发现(ARD)等(2026 年 8 月 31 日)
欢迎 DuckLabs 加入 AWS 团队,代理资源发现(ARD)等
用数据选型:StarRocks 跨架构(arm64 vs x86)基准测试记录
许多团队在 Amazon EC2 上自建 StarRocks 做实时分析,但选型时往往缺乏同口径的跨架构对比数据。本文基于 TPC-H / TPC-DS SF1000 基准,在 StarRocks 存算分离架构下,横评 Graviton(arm64)与 x86 同规格实例的查询性能与价格性能,给出可复现的量化结论——帮助你用数据而非直觉做出选型决策。
AWS 一周综述:AWS 构建者中心学习激励计划、拉斯维加斯新增本地区域等内容(2026 年 8 月 24 日)
AWS 构建者中心学习激励计划、拉斯维加斯新增本地区域等内容
AWS Glue 6.0 现已发布,价格降低 30%,并全面支持 Apache Iceberg v3
今天,我们正式发布 AWS Glue 6.0,其价格比之前的 AWS Glue 版本降低了 30%,并全面支持 Apache Iceberg v3 的各项功能。AWS Glue 6.0 基于完全现代化的运行时环境、Apache Spark 4.1、Python 3.12 和 Scala 2.13 构建,性能更强劲。
AWS 一周综述:EC2 应用程序状态检查、IAM 角色管理器、Bedrock 上的 OpenAI Daybreak 等(2026 年 8 月 17 日)
EC2 应用程序状态检查、IAM 角色管理器、Bedrock 上的 OpenAI Daybreak 等
ELK迁移Amazon OpenSearch Service最佳实践
随着业务的快速发展,线下自己维护的 ELK 集群会面临运维成本高、扩展性受限、资 源利用效率低等挑战。为了解决这些问题, 同时充分利用云服务的优势,许多客户在迁 移上云时,会决定将现有的自建 ELK 架构迁移到 Amazon OpenSearch Service。本文将详细 分享一些迁移经验,包括方案设计、实施过程、遇到的挑战以及解决方案,希望能为面临类似场景的客户提供有价值的参考。
使用 Amazon S3 Tables 优化数据湖:从Hudi 迁移到托管 Iceberg
某零售品牌因 Hudi 0.12.x 版本老化、并发冲突和全量覆盖场景低效,迁移至 Amazon S3 Tables。团队采用混合策略:DW 层用 S3 Tables 实现增量 MERGE,DM 层全量覆盖表直接写 Parquet。通过新旧并行分批迁移,最终核心作业性能提升最高 8 倍,ETL 月度成本降低 72%。
AWS Glue 3.0 到 5.0 版本升级实践:中国区大规模 ETL 平台的迁移方法论
本文分享了在 AWS 中国区将近70个 AWS Glue ETL 作业从 3.0 版本升级至 5.0 版本的完整实践经验。文章涵盖升级范围评估、中国区特有的依赖管理策略、分批部署方法论、真实性能对比数据以及典型问题的排查与解决。升级后整体 DPU 消耗降低约30%,部分作业性能提升超过60%。
Amazon Quick 飞书SSO对接指南
摘要:Amazon Quick 是 AWS 推出的 AI 工作助手,能够将问题转化为答案、将答案转化为行动。它 […]