亚马逊AWS官方博客
AWS re:Invent 2023 上不容错过的实时流数据精选集
请预留时间:AWS re:Invent 2023 将于 11 月 27 日至 12 月 1 日在拉斯维加斯举行,一定不要错过。re:Invent 是 AWS 为全球云计算社区组织的学习会议。这是一个很好的机会,可以与来自世界各地的云爱好者齐聚一堂,了解最新的云行业创新,与 AWS 专家会面,收获乐趣,建立联系。
加入我们,与我们一起在 re:Invent 2023 上深入了解实时流数据,探索如何使用实时流数据来构建新的用例、优化现有项目和流程以及重新构想可能实现的目标。在当今数据驱动的时代,数据质量是组织和创新取得成功的基础。高质量的数据不仅关乎准确性,还关乎及时性。为了获得有意义的见解并确保机器学习(ML)和生成式人工智能模型的最佳性能,需要实时摄取和处理数据。实时数据使这些模型能够即时适应和响应不断变化的场景,不仅使它们更智能,而且更实用。借助实时流数据,组织可以重新构想可能实现的目标。从实现制造业的预测性维护到在媒体和娱乐行业提供超个性化的内容,再到金融领域的实时欺诈检测到农业中的精准农业,潜在的应用领域非常广泛。
此博文将通过重点介绍您不容错过的实时流数据及其他方面的重要会议,帮助您规划 re:Invent 体验。要参加这些会议,请务必注册 re:Invent 并访问会议目录。立即注册!
您不容错过的主题演讲和创新讲座!
千万不要错过听 AWS 领军人物演讲的机会。以下是我们最喜欢的一些主题演讲和创新讲座。
Amazon Web Services 首席执行官 Adam Selipsky — 主题演讲
11 月 28 日星期二 | 太平洋标准时间上午 8:30 至上午 10:30 | 威尼斯人酒店
加入 Amazon Web Services CEO Adam Selipsky 的行列,听他分享他对云转型的看法。他将重点介绍数据、基础设施、人工智能和机器学习方面的创新,这些创新正在帮助 AWS 客户更快地实现目标、挖掘尚未开发的潜力并创造更美好的未来。
AWS 数据与人工智能副总裁 Swami Sivasubramanian — 主题演讲
11 月 29 日星期三 | 太平洋标准时间上午 8:30 至 10:30 | 威尼斯人酒店
加入 AWS 数据与人工智能副总裁 Swami Sivasubramanian 的行列,了解如何使用公司的数据来构建差异化的生成式人工智能应用程序,提高组织员工的整体生产力。此外,还可以听取客户发言人讲述的真实案例,了解他们如何利用数据来支持生成式人工智能用例并为客户创造新体验。
利用生成式人工智能让您的数据发挥作用 — 创新讲座
11 月 30 日星期四 | 太平洋标准时间中午 12:30 至下午 1:30 | 威尼斯人酒店
加入 AWS 技术副总裁 Mai-Lan Tomsen Bukovec 的行列,了解如何利用生成式人工智能将数据湖转化为业务优势。探索在构建独特、差异化的生成式人工智能解决方案时让专有数据集发挥作用的策略。了解如何使用 Amazon SageMaker 和 Amazon Bedrock 以及带有 AWS 计算、存储和分析功能的 PyTorch 等流行框架来利用您的数据集。听取使用非结构化(视频、图像、PDF)、半结构化(Parquet)和表格格式(Iceberg)数据进行训练、微调、检查点和提示工程的最佳实践。此外,还将听取客户目前使用的不同架构模式,以利用业务数据定制生成式人工智能解决方案。
数据推动转型:利用 AWS 分析技术奠定数据基础 — 创新讲座
11 月 30 日星期四 | 太平洋标准时间下午 2:00 至 3:00 | 威尼斯人酒店
加入 AWS Analytics 副总裁 G2 Krishnamoorthy 的行列,讨论将分析嵌入应用程序的策略以及构建支持业务计划的数据基础的想法。借助新的自助功能和更简单的构建者体验,您可以使业务线用户、分析师、科学家和工程师的数据访问民主化。您还可以听到阿迪达斯、GlobalFoundries 和加州大学欧文分校鼓舞人心的案例。
分组会议
通过 re:Invent 分组会议会深化您的学习。re:Invent 分组会议采用讲座风格,时长 1 小时。这些会议在 re:Invent 校园内举行,涵盖各个级别的所有主题。以下是我们最喜欢的一些分组会议:
- 利用实时数据加速创新:加入 AWS 流媒体和消息传递副总裁 Mindy Ferguson 和 Amazon Kinesis Data Streams 总经理 Arvinth Ravi 的行列,听他们重点介绍实施无处不在的实时数据战略以获得竞争优势的重要性。了解 AWS 流数据服务的最新发布,深入了解现实世界中的应用,并探索如何使用它们来解决各种用例,从而做出快速、实时的决策,以优化成本、提高客户参与度并推动增长。立即预订席位!
- Rivian 如何构建电动汽车实时分析:了解 Rivian 的车辆数据平台团队如何使用 Amazon MSK 和其他 AWS 分析服务来构建安全、可缩放、经济实惠且可扩展的数据平台,为组织内的不同团队提供支持。立即预订席位!
- 无服务器数据流:Amazon Kinesis Data Streams 和 AWS Lambda:探讨使用 Amazon Kinesis Data Streams 和 AWS Lambda 创建可缩放的生产就绪型数据流架构的复杂性。深入探讨应对分布式系统固有挑战和陷阱所必需的技巧和最佳实践,并观察 AWS 服务的工作原理和交互方式。立即预订席位!
- 利用 Flink CDC 的实时同步功能打破数据孤岛:了解如何通过在 AWS 上使用 Flink CDC 来简化事务数据库之间的实时同步和摄取,最终打破数据孤岛。立即预订席位!
- 使用 Amazon Kinesis 和 Apache Kafka 扩展无服务器数据处理:探讨如何使用 AWS Lambda 构建可缩放的数据处理应用程序。了解如何使用事件驱动模型将 Lambda 与 Amazon Kinesis 和 Apache Kafka 集成,进行实时数据流传输和处理。设计无服务器数据处理管道,从实时数据流中提取有价值的见解。立即预订席位!
专题讲座
专题讲座是一种互动性很强的内容形式,听众人数不多。每场首先由一位 AWS 专家作简短演讲,然后与听众进行问答。
- 使用 AWS Glue 流服务流式传输数据和构建事务湖:了解如何使用 AWS Glue 和 Amazon Kinesis 创建低代码流式传输管道,以加载、清理和转换销售数据,并将其用于机器学习。立即预订席位!
- 将自行管理的 Apache Flink 迁移到在 AWS 上完全托管:查看将自行管理的 Apache Flink 应用程序迁移到适用于 Apache Flink 的亚马逊托管服务时需要注意的关键细节。探讨如何通过正确的模式使用云服务来减少运营开销。了解可以帮助迁移同时保持成本、规模和性能的最佳实践。立即预订席位!
- 如何将您的 Apache Kafka 工作负载迁移到 Amazon MSK:Amazon Managed Streaming for Apache Kafka(Amazon MSK)是一项 AWS 流数据服务,用于管理 Apache Kafka 基础设施和运营。了解迁移到 Amazon MSK 的好处,以及如何使用 MirrorMaker 2.0(MM2)直接迁移现有集群。深入研究 MM2 和 Kafka Connect 架构,探讨高吞吐量数据流的常见瓶颈和挑战。立即预订席位!
- 加快实现数据价值:从批处理迁移到流处理:探讨从传统批处理过渡到流处理的竞争优势。查看流服务的关键概念和架构模式,以解决迁移过程中的潜在挑战和问题。通过示例用例,深入了解如何使用 AWS 流数据服务成功从批处理过渡到实时数据处理。立即预订席位!
- 使用 AWS 流数据服务快速跟踪流 ETL:了解如何跨数据湖和数据仓库构建流数据管道。了解 Amazon Kinesis Data Streams、Amazon MSK、Amazon Redshift 流摄取和 AWS Glue 流中的性能、规模和成本控制最佳实践。立即预订席位!
- 数据仓库中的高级实时分析和 ML:了解企业客户如何重新架构其数据环境,更加依赖流分析来处理每秒数百万条记录的吞吐量。我们将向您展示如何实施 ELT 方法,该方法使用 Amazon Redshift 与流数据服务的原生集成以及 Amazon Redshift 机器学习在 SQL 中构建近实时的机器学习预测,从而做出更好的决策。立即预订席位!
- 使用 Apache Kafka 和 Amazon EventBridge 更好地构建:探讨事件驱动架构和实时事件流的融合,以满足现代业务需求。了解 Amazon EventBridge 和 Apache Kafka,深入剖析它们在促进实时决策、提高业务速度和运营自主性方面的作用。立即预订席位!
- 通过大规模实时推理加快数据预测:及时对数据进行分析、学习和预测至关重要,因为数据的价值会随着时间的推移而降低。深入探讨事件驱动架构,了解如何使用机器学习推理和流数据来检测规律和异常,从而更快地根据数据做出决策。立即预订席位!
代码讲座
代码讲座是 60 分钟的会议,重点讨论构建解决方案所涉及的实际代码。您将了解解决方案背后的“原因”,并亲眼目睹解决方案的实现 — 包括不可避免的错误。欢迎并鼓励您提出问题。
- 在适用于 Apache Flink 的亚马逊托管服务上构建 Flink 应用程序:加入此代码讲座,使用 DataStream 和表 API 编程模型在适用于 Apache Flink 的亚马逊托管服务上开发和托管可直接用于生产的 Apache Flink 流处理应用程序。立即预订席位!
研讨会
研讨会是 2 小时的实践会议,您将以小组为单位使用 AWS 服务解决问题。研讨会将参加者分成小组,并提供场景以鼓励互动,让大家有机会相互学习、相互传授。别忘了带上您的笔记本电脑!
- 使用 MSK 和适用于 Apache Flink 的亚马逊托管服务进行事件检测:担任拉斯维加斯赌场的技术经理。了解如何创建流处理应用程序,用于识别进入赌场的“豪赌者”,并在他们坐到赌桌前时向您发送电子邮件。立即预订席位!
训练营
在这八小时的深度会议中,增强您对 AWS 服务和解决方案的信心。借助专家指导、沉浸式练习和自定进度的实验室,边做边学。
以下是您不容错过的训练营:
- 在 AWS 上构建流数据分析解决方案:与 AWS 专家讲师一起学习如何使用 AWS 服务设计和实施流数据分析解决方案。这个 8 小时的深度训练营专为想要构建和管理流数据分析管道的数据工程师、解决方案架构师和开发人员而设计。此训练营涵盖如何使用 Amazon Kinesis 扩展流处理应用程序,如何优化数据存储,如何选择和部署适当的选项来摄取、转换、存储和分析数据等等。您可以通过涵盖数据分析解决方案的动手实验室在真实的 AWS 环境中练习新技能。立即预订席位!
还来得及享受乐趣!
只工作不玩耍……在 re:Invent 可不会这样! 当然,我们会努力工作,学到很多东西,但我们也计划在一起时度过一段美好时光。AWS 构建者实验室将让您有机会在沙盒设置中测试自己的技能,同时与 AWS 的一些领军人物一起工作!
加入 PeerTalk 平台,在 re:Invent 上轻松查找、联系他人并与之交流。选择加入,发现兴趣相投的与会者 — PeerTalk 为您推荐联系人。您可以通过该平台浏览推荐信息、给他人留言并安排会面,然后在遍布 re:Invent 园区的四个 PeerTalk 聊天室中的一个坐下来进行面对面交谈。
到 re:Invent 展会大厅的 Analytics 亭参观。联系专家,深入了解 AWS 流数据服务,例如 Amazon Kinesis Data Streams、Amazon Kinesis Data Firehose、适用于 Apache Flink 的亚马逊托管服务和 Amazon Managed Streaming for Apache Kafka(Amazon MSK)。此外,您还可以赢取奖品,展示您的 Analytics 超级英雄,了解 AWS Analytics 服务的最新创新。
立即注册
这将是一次令人惊叹的盛会,我们迫不及待地想在 re:Invent 2023 上见到您! 立即注册以预定您的席位!
*前述特定亚马逊云科技生成式人工智能相关的服务仅在亚马逊云科技海外区域可用,亚马逊云科技中国仅为帮助您了解行业前沿技术和发展海外业务选择推介该服务。
关于作者
Anna Montalat是 AWS 流数据服务的高级产品营销经理,其中包括 Amazon Managed Streaming for Apache Kafka(MSK)、Kinesis Data Streams、Kinesis Video Streams、Kinesis Data Firehose 和 Kinesis Data Analytics。她热衷于与服务团队和企业客户密切合作,将新兴技术推向市场。工作之余,Anna 喜欢在冬季滑雪,在夏季航行。