介绍 Amazon OpenSearch 数据摄取的蓝图发现及其他用户界面增强功能 大数据博客
全新蓝图发现及其他亚马逊 OpenSearch Ingestion 界面升级
关键要点
全新的蓝图发现功能使用户在创建数据处理管道时更加便捷。用户界面进行了重构,支持通过关键词搜索蓝图。新的界面提供定制的入门指导,帮助用户更好地配置管道。JSON 格式的管道配置现已支持,提升了可操作性。OpenSearch Ingestion 的定价保持不变,借助 OCUs 用户可控成本。亚马逊 OpenSearch Ingestion 是一个完全托管的无服务器管道,允许用户将数据导入、过滤、转换、丰富并路由至 Amazon OpenSearch Service 域或 Amazon OpenSearch Serverless 集合。它支持从多种源导入数据,并涵盖丰富的内置处理器,以满足最复杂的数据转换需求。
本文将带您了解 OpenSearch Ingestion 的新界面增强和蓝图发现功能,提升用户体验。
蓝图发现
用户不必从头创建管道定义,而是可以使用配置蓝图,这是用于常见导入情境如追踪分析或 Apache 日志的预配置模板。配置蓝图帮助用户快速配置管道,无需重新编写配置。

在旧版界面中,用户需要通过下拉菜单滚动浏览可用蓝图,且无法使用搜索过滤蓝图。目前,OpenSearch Ingestion 提供了一种新界面,允许在 AWS 管理控制台 上通过全文搜索查找蓝图,帮助用户发现能够导入数据的所有来源。
小熊twitter加速器当您在 OpenSearch Service 控制台上创建新管道时,会看到一个新目录页面。现在,您可以从顶部查看 OpenSearch Ingestion 支持的所有源和终端,蓝图以图标的形式列出,并按主题进行分组。
新目录具有导航菜单,按用例或想要导入数据的服务对蓝图进行分组。您可以通过搜索蓝图,或选择导航窗格中的快捷方式。例如,如果您正在构建一个与 Amazon DynamoDB 进行零 ETL 集成的管道,可以搜索 DynamoDB,或者在导航窗格中选择 ZeroETL 下的 用例,也可以选择 服务 下的 DynamoDB。
定制的入门指南
选择蓝图后,您将被引导至 管道设置和配置 页面。新 UI 为每个源提供了定制的入门指导,详细说明了成功进行端到端集成的关键步骤。该页面上的指南将根据您为管道选择的蓝图而变化。
管道配置将预填充为可修改的模板,包括特定来源、AWS 身份和访问管理 IAM角色和终端。例如,如果您选择了与 DocumentDB 一起使用的 ZeroETL 蓝图,入门指南将提供设置 DocumentDB 集合、权限和目的地的信息。
对 JSON 管道配置的支持
作为视觉改革的一部分,OpenSearch Ingestion 现在在控制台中支持以 JSON 格式指定管道配置,除了现有的 YAML 支持外。您现在可以同时以 JSON 格式和 YAML 格式查看配置并进行编辑。
尽管 YAML 更具可读性,但它对空白字符敏感,并且在从文本编辑器复制粘贴时常常出现问题。JSON 管道配置使您能够自信地从文本或代码编辑器中复制粘贴配置,而不必担心因空白字符不一致而导致的格式错误。此外,您现在可以直接对 JSON 配置进行任何编辑,修改将自动传播到 YAML。
可用性和定价
这些功能在所有目前可用的 AWS 商业区域中提供。
IngestionOCUs 的价格仍为每小时 024 美元。OCUs 按小时计费,精确到分钟。您可以通过配置管道允许扩展的最大 OCUs 来控制 OCUs 产生的费用。
结论
在本文中,我们向您展示了 OpenSearch Ingestion 的新蓝图发现及其他界面增强功能。请参考 Amazon OpenSearch Ingestion 以了解其他功能,帮助您构建可扩展的 OpenSearch 数据导入管道。
关于作者
Jagadish Kumar (Jag) 是 AWS 的高级专属解决方案架构师,专注于 Amazon OpenSearch Service。他对数据架构充满热情,帮助客户在 AWS 上构建可扩展的分析解决方案。
Sam Selvan 是 Amazon OpenSearch Service 的首席专属解决方案架构师。
加载评论中
TikTok的国家安全风险足以禁止,最高法院裁定 媒体
TikTok 禁令在美国的最高法院裁决关键要点美国最高法院裁定支持TikTok禁令,因其涉及国家安全问题。此裁决可能拉开对外国公司数据收集的新一轮监管。TikTok的母公司字节跳动在中国法律下需向政府提供用户数据的权限。TikTok可能会因未离开字节跳动而被禁用,法令要求于2025年生效。美国政府对...