介绍 Amazon OpenSearch 数据摄取的蓝图发现及其他用户界面增强功能 大数据博客

全新蓝图发现及其他亚马逊 OpenSearch Ingestion 界面升级

关键要点

全新的蓝图发现功能使用户在创建数据处理管道时更加便捷。用户界面进行了重构,支持通过关键词搜索蓝图。新的界面提供定制的入门指导,帮助用户更好地配置管道。JSON 格式的管道配置现已支持,提升了可操作性。OpenSearch Ingestion 的定价保持不变,借助 OCUs 用户可控成本。

亚马逊 OpenSearch Ingestion 是一个完全托管的无服务器管道,允许用户将数据导入、过滤、转换、丰富并路由至 Amazon OpenSearch Service 域或 Amazon OpenSearch Serverless 集合。它支持从多种源导入数据,并涵盖丰富的内置处理器,以满足最复杂的数据转换需求。

本文将带您了解 OpenSearch Ingestion 的新界面增强和蓝图发现功能,提升用户体验。

蓝图发现

用户不必从头创建管道定义,而是可以使用配置蓝图,这是用于常见导入情境如追踪分析或 Apache 日志的预配置模板。配置蓝图帮助用户快速配置管道,无需重新编写配置。

介绍 Amazon OpenSearch 数据摄取的蓝图发现及其他用户界面增强功能 大数据博客

在旧版界面中,用户需要通过下拉菜单滚动浏览可用蓝图,且无法使用搜索过滤蓝图。目前,OpenSearch Ingestion 提供了一种新界面,允许在 AWS 管理控制台 上通过全文搜索查找蓝图,帮助用户发现能够导入数据的所有来源。

小熊twitter加速器

当您在 OpenSearch Service 控制台上创建新管道时,会看到一个新目录页面。现在,您可以从顶部查看 OpenSearch Ingestion 支持的所有源和终端,蓝图以图标的形式列出,并按主题进行分组。

新目录具有导航菜单,按用例或想要导入数据的服务对蓝图进行分组。您可以通过搜索蓝图,或选择导航窗格中的快捷方式。例如,如果您正在构建一个与 Amazon DynamoDB 进行零 ETL 集成的管道,可以搜索 DynamoDB,或者在导航窗格中选择 ZeroETL 下的 用例,也可以选择 服务 下的 DynamoDB。

定制的入门指南

选择蓝图后,您将被引导至 管道设置和配置 页面。新 UI 为每个源提供了定制的入门指导,详细说明了成功进行端到端集成的关键步骤。该页面上的指南将根据您为管道选择的蓝图而变化。

管道配置将预填充为可修改的模板,包括特定来源、AWS 身份和访问管理 IAM角色和终端。例如,如果您选择了与 DocumentDB 一起使用的 ZeroETL 蓝图,入门指南将提供设置 DocumentDB 集合、权限和目的地的信息。

对 JSON 管道配置的支持

作为视觉改革的一部分,OpenSearch Ingestion 现在在控制台中支持以 JSON 格式指定管道配置,除了现有的 YAML 支持外。您现在可以同时以 JSON 格式和 YAML 格式查看配置并进行编辑。

尽管 YAML 更具可读性,但它对空白字符敏感,并且在从文本编辑器复制粘贴时常常出现问题。JSON 管道配置使您能够自信地从文本或代码编辑器中复制粘贴配置,而不必担心因空白字符不一致而导致的格式错误。此外,您现在可以直接对 JSON 配置进行任何编辑,修改将自动传播到 YAML。

可用性和定价

这些功能在所有目前可用的 AWS 商业区域中提供。

IngestionOCUs 的价格仍为每小时 024 美元。OCUs 按小时计费,精确到分钟。您可以通过配置管道允许扩展的最大 OCUs 来控制 OCUs 产生的费用。

结论

在本文中,我们向您展示了 OpenSearch Ingestion 的新蓝图发现及其他界面增强功能。请参考 Amazon OpenSearch Ingestion 以了解其他功能,帮助您构建可扩展的 OpenSearch 数据导入管道。

关于作者

Jagadish Kumar (Jag) 是 AWS 的高级专属解决方案架构师,专注于 Amazon OpenSearch Service。他对数据架构充满热情,帮助客户在 AWS 上构建可扩展的分析解决方案。

Sam Selvan 是 Amazon OpenSearch Service 的首席专属解决方案架构师。

加载评论中

TikTok的国家安全风险足以禁止,最高法院裁定 媒体

TikTok的国家安全风险足以禁止,最高法院裁定 媒体

TikTok 禁令在美国的最高法院裁决关键要点美国最高法院裁定支持TikTok禁令,因其涉及国家安全问题。此裁决可能拉开对外国公司数据收集的新一轮监管。TikTok的母公司字节跳动在中国法律下需向政府提供用户数据的权限。TikTok可能会因未离开字节跳动而被禁用,法令要求于2025年生效。美国政府对...

使用 Amazon Lex 和 Amazon CloudWatch Logs 检测和保护敏感数据 机

使用 Amazon Lex 和 Amazon CloudWatch Logs 检测和保护敏感数据 机

使用 Amazon Lex 和 Amazon CloudWatch Logs 检测和保护敏感数据在数字化时代,保护个人可识别信息PII不仅是合规要求,更是消费者信任和商业诚信的基石。组织采用像 Amazon Lex 这样的先进自然语言检测服务来构建对话接口,并通过 Amazon CloudWatch...

搜索

免费加速器iOS下载

小熊twitter加速器,成立于2007年,是一家位于中国黑龙江省五大连池市的创新型企业。自成立以来,公司致力于为全球用户提供安全、便捷、创新的数字货币交换和管理服务。作为行业的先锋,小熊twitter加速器利用先进的区块链技术打造一个去中心化的金融生态系统,旨在推动传统金融与现代技术的融合。

小熊twitter加速器拥有一支由各领域顶尖专家组成的团队,包括资深的金融分析师、经验丰富的软件工程师、以及区块链技术的先驱者。这支团队共同协作,不断研发和优化我们的技术和服务,确保能够在迅速变化的市场中保持领先地位。公司的技术平台支持多种加密货币的交易和存储,包括比特币、以太坊、莱特币等主流数字货币,同时也不断探索和添加新兴的加密货币,以满足市场需求。

在安全性方面,小熊twitter加速器采用多层次安全策略来保护用户的资产和数据。我们的系统设计了多个安全层,包括实时监控、自动化的风险管理系统,以及强大的加密技术,确保所有交易数据的安全性和隐私性。此外,公司还与全球多家顶级安全机构合作,定期对我们的系统进行安全审计和升级。

公司不仅在提供加密货币交易和管理服务上不断创新,在推动区块链技术的普及和应用上也是行业的领跑者。小熊twitter加速器积极参与国内外的区块链研究和开发项目,与多家大学和科研机构合作,推动区块链技术在金融、物流、医疗等多个领域的应用研究。

作为地处五大连池市的高科技企业,小熊twitter加速器生根于这片富有极地地貌的独特土地,将东北老工业基地的坚韧精神与新时代科技革命的创新活力成功结合。公司未来的发展方向是构建一个全球化的数字货币交易和金融服务平台,为用户提供更多元化、一体化的金融解决方案,推动全球金融市场的发展和进步。

在未来,小熊twitter加速器将继续拓展国际市场,与更多国际合作伙伴建立合作关系,扩大我们的业务范围,并致力于成为全球领先的数字货币和区块链技术服务提供商。在数字货币日益被广泛接受的今天,小熊twitter加速器将持续在创新与安全的道路上前行,为全球用户提供更加优质的服务和更为可靠的技术支持。