AWS 宣布四项零 ETL 集成,使跨数据存储的数据访问和分析变得更快、更轻松

跨境快讯 2024-02-02 09:00:44 woniu
2
导读:Amazon Aurora PostgreSQL、Amazon DynamoDB 和 Amazon RDS for MySQL 与 Amazon Redshift 的零 ETL 集成使客户能够分析多个来源的数据,而无需构建和维护自定义数据管道

Amazon DynamoDB 零 ETL 与 Amazon OpenSearch Service 集成,可近乎实时地对运营数据进行全文和矢量搜索Grabyo、iCIMS、Kaplan, Inc、Muzz、Orion Advisor Solutions 和 United Airlines 等客户对使用 AWS 零 ETL 功能感到兴奋

拉斯维加斯--(美国商业资讯)--在 AWS re:Invent 上,Amazon.com, Inc. 旗下公司 Amazon Web Services, Inc. (AWS) 今天宣布了新的集成,使客户能够快速、轻松地轻松连接和分析数据,无需构建和管理复杂的提取、转换和加载 (ETL) 数据管道。新的 Amazon Aurora PostgreSQL、Amazon DynamoDB 和 Amazon Relational Database Service (Amazon RDS) for MySQL 与 Amazon Redshift 的集成让您可以更轻松地连接和分析来自 Amazon Redshift 中多个关系和非关系数据库的事务数据。客户现在还可以使用 Amazon OpenSearch Service 对 DynamoDB 数据近乎实时地执行全文和矢量搜索。通过让数据的连接和操作变得更加容易,无论数据位于何处,这些零 ETL 集成可帮助客户利用 AWS 领先的数据库和分析服务的广度和深度来发现新的见解、更快地创新并做出更好的数据驱动决策。要了解有关使用 AWS 释放数据价值的更多信息,请访问aws.amazon.com/data。

AWS 数据和人工智能副总裁 Swami Sivasubramanian 博士表示:“为了帮助客户利用数据推动创新,AWS 提供了业界最广泛、最深入的数据服务集,用于大规模存储和查询任何类型的数据。”“除了拥有适合工作的工具之外,客户还需要能够集成分布在整个组织中的数据,以为其业务释放更多价值并更快地进行创新。这就是为什么我们投资于零 ETL 的未来,数据集成不再是繁琐的手动工作,客户可以轻松地在需要的地方获取数据。今天宣布的新集成将推动客户迈向零 ETL 的未来,我们将继续投资于这一愿景,使客户能够轻松集成整个系统中的数据,这样他们就可以专注于推动新的见解。”

数据是任何组织的差异化因素。然而,组织拥有来自不同来源、规模和速度不同的不同类型的数据,并且这些数据的用途也各不相同。为了充分利用数据,组织需要一套全面的工具来考虑所有这些变量,以及集成和组合跨多个来源的数据的能力。例如,公司可能将事务数据存储在关系数据库中,并希望在数据仓库中进行分析,但使用其他分析工具对非关系数据库中的数据执行矢量搜索。从历史上看,移动数据需要客户构建自己的 ETL 管道,这可能具有挑战性,构建成本高昂,管理复杂,并且容易出现间歇性错误,从而延迟获得对时间敏感的见解。为了帮助客户从数据中获取价值,AWS 提供了一套全面的数据服务,以便客户始终拥有适合工作的工具。但为了将数据置于业务中心,客户需要能够连接所有数据,无论数据位于何处。这就是 AWS 投资零 ETL 功能来消除手动移动数据负担的原因。这包括 Amazon Redshift 和 Amazon Athena 中的联合查询功能(使客户能够直接查询存储在运营数据库、数据仓库和数据湖中的数据)以及 Amazon Connect 分析数据湖(使客户能够更轻松地访问联络中心数据分析和机器学习。它还包括 Salesforce Data Cloud 与 AWS 存储、数据和分析服务之间新的零 ETL 集成,使客户能够轻松、无缝地统一 Salesforce 和 AWS 之间的数据,以获得更好、更快的见解。今天宣布的集成建立在 AWS 的零 ETL 基础上,消除了构建和维护数据管道的负担,因此客户可以快速轻松地连接所有数据,无论数据位于何处。

新的 Amazon Aurora PostgreSQL、Amazon DynamoDB 和 Amazon RDS for MySQL 与 Amazon Redshift 的零 ETL 集成让您可以更轻松地分析事务数据,而无需构建和维护数据管道:为了最大限度地从数据中获得价值,许多组织希望将其事务数据从多个高性能数据库(包括 Aurora 和 Amazon RDS 等关系数据库以及 DynamoDB 等非关系数据库)移动到诸如Amazon Redshift 可以在 PB 级数据上运行高性能数据仓库和分析工作负载。然而,这种数据移动要求客户为每个数据源创建 ETL 管道。为了更轻松地使用 Amazon Redshift 分析 Aurora 数据,AWS 在今年早些时候宣布全面推出 Aurora MySQL 与 Amazon Redshift 的零 ETL 集成。此集成每分钟处理超过 100 万个事务,并在将数据写入 Aurora MySQL 后几秒钟内即可在 Amazon Redshift 中使用。为了进一步扩大零 ETL 的优势,AWS 宣布推出 Aurora PostgreSQL、DynamoDB 和 Amazon RDS for MySQL 与 Amazon Redshift 的新零 ETL 集成预览版。这些集成可帮助客户快速轻松地访问 Amazon Redshift 中流行的关系型和非关系型数据库中的数据,以进行全面分析。客户只需在数据库中选择包含所需数据的数据表,这些数据就会自动复制到 Amazon Redshift。通过将不同来源的数据汇集到单个数据仓库中,客户可以获得业务的综合视图,并利用先进的 Amazon Redshift 功能(包括数据共享、物化视图和 Amazon Redshift ML)来获得整体和预测性见解。AWS 宣布推出 Aurora PostgreSQL、DynamoDB 和 Amazon RDS for MySQL 与 Amazon Redshift 的全新零 ETL 集成预览版。这些集成可帮助客户快速轻松地访问 Amazon Redshift 中流行的关系型和非关系型数据库中的数据,以进行全面分析。客户只需在数据库中选择包含所需数据的数据表,这些数据就会自动复制到 Amazon Redshift。通过将不同来源的数据汇集到单个数据仓库中,客户可以获得业务的综合视图,并利用先进的 Amazon Redshift 功能(包括数据共享、物化视图和 Amazon Redshift ML)来获得整体和预测性见解。AWS 宣布推出 Aurora PostgreSQL、DynamoDB 和 Amazon RDS for MySQL 与 Amazon Redshift 的全新零 ETL 集成预览版。这些集成可帮助客户快速轻松地访问 Amazon Redshift 中流行的关系型和非关系型数据库中的数据,以进行全面分析。客户只需在数据库中选择包含所需数据的数据表,这些数据就会自动复制到 Amazon Redshift。通过将不同来源的数据汇集到单个数据仓库中,客户可以获得业务的综合视图,并利用先进的 Amazon Redshift 功能(包括数据共享、物化视图和 Amazon Redshift ML)来获得整体和预测性见解。这些集成可帮助客户快速轻松地访问 Amazon Redshift 中流行的关系型和非关系型数据库中的数据,以进行全面分析。客户只需在数据库中选择包含所需数据的数据表,这些数据就会自动复制到 Amazon Redshift。通过将不同来源的数据汇集到单个数据仓库中,客户可以获得业务的综合视图,并利用先进的 Amazon Redshift 功能(包括数据共享、物化视图和 Amazon Redshift ML)来获得整体和预测性见解。这些集成可帮助客户快速轻松地访问 Amazon Redshift 中流行的关系型和非关系型数据库中的数据,以进行全面分析。客户只需在数据库中选择包含所需数据的数据表,这些数据就会自动复制到 Amazon Redshift。通过将不同来源的数据汇集到单个数据仓库中,客户可以获得业务的综合视图,并利用先进的 Amazon Redshift 功能(包括数据共享、物化视图和 Amazon Redshift ML)来获得整体和预测性见解。它会自动复制到 Amazon Redshift。通过将不同来源的数据汇集到单个数据仓库中,客户可以获得业务的综合视图,并利用先进的 Amazon Redshift 功能(包括数据共享、物化视图和 Amazon Redshift ML)来获得整体和预测性见解。它会自动复制到 Amazon Redshift。通过将不同来源的数据汇集到单个数据仓库中,客户可以获得业务的综合视图,并利用先进的 Amazon Redshift 功能(包括数据共享、物化视图和 Amazon Redshift ML)来获得整体和预测性见解。
Amazon DynamoDB 零 ETL 与 Amazon OpenSearch Service 集成可近乎实时地对事务数据进行全文搜索和矢量搜索:为了优化业务运营并为用户创造更具吸引力的体验,许多客户使用 OpenSearch 服务对其 DynamoDB 中的事务数据执行高级搜索功能(例如全文和矢量搜索、相关性排名和自动完成建议)。例如,电子商务公司可能会将数据从 DynamoDB 复制到 OpenSearch Service,以使用矢量搜索通过将数据与类似交易的数据进行比较来自动确定交易是否存在欺诈。全新 DynamoDB 与 OpenSearch 服务的零 ETL 集成现已全面上市,使客户可以更轻松地近乎实时地对其 DynamoDB 数据运行强大的全文和矢量搜索查询。客户只需选择包含他们想要分析的数据的 DynamoDB 表,数据在写入 DynamoDB 后几秒钟内就会复制到 OpenSearch 服务中。客户可以将多个 DynamoDB 表中的数据同步到一个 OpenSearch Service 托管集群或无服务器集合中,以获得跨多个应用程序的整体洞察并整合其搜索资产,从而降低成本,同时提高运营效率。
Grabyo 是一个实时视频制作平台,可以让专业视频输出的制作、分发和货币化变得更快、更简单、更高效。Grabyo 首席技术官 Mun Wai Kong 表示:“如今,我们必须构建和管理劳动密集型且昂贵的 ETL 管道,这给我们的数据工程团队带来了巨大的运营负担。”“我们使用 DynamoDB 和 Amazon Redshift 为我们的平台提供支持并对它们提供的简单性和规模印象深刻。我们对 Amazon DynamoDB 与 Amazon Redshift 的新零 ETL 集成感到非常兴奋,这将使我们的应用程序能够在几分钟内从事务转变为洞察。这将帮助我们集中数据工程资源为我们的业务和用户释放价值,而不是构建和管理数据管道。”

iCIMS 是一家人才招聘技术提供商,帮助世界各地的组织聘用优秀人才。Ben Barresi 表示:“我们一直希望通过有效、现代的数据策略,利用专门构建的数据存储,以及几乎不需要维护的高效、可扩展的数据共享和摄取流程,利用 AWS 实现应用程序的现代化。” iCIMS 云托管和工程副总裁。“我们期待使用 Amazon Aurora PostgreSQL 与 Amazon Redshift 的零 ETL 集成,这将为我们的工程团队减轻数据管道管理和维护的负担。因为数据在 Aurora 中写入后几秒钟即可在 Amazon Redshift 中使用,与我们目前运行的每晚一次性批量摄取相比,我们将能够提高分析数据的速度。”

Kaplan, Inc. 是一家全球教育服务公司,支持个人和机构实现其目标,特别是在动态和不断变化的环境中。Kaplan, Inc. 高级经理 Naveen Kambhoji 表示:“Kaplan 数据工程团队管理着数百条数据管道,这些管道的维护成本很高,而且容易出现频繁的连接错误。新的 RDS for MySQL 与 Amazon Redshift 的零 ETL 集成将使我们能够将事务数据无缝传输到 Amazon Redshift 来执行分析,帮助我们更好地了解业务的各个方面,包括学生活动、考试完成率和学生流失率。我们预计这一新产品将帮助我们提高数据基础设施的可靠性、可扩展性和成本效率,同时也让工程师能够专注于更具战略性的项目。”

Muzz 是一款面向世界各地穆斯林社区的全球领先的约会应用程序。“我们使用 Amazon DynamoDB 来管理和存储配置文件数据和用户创建的内容。此前,我们的工程团队使用 AWS Lambda 流处理器将数据从 DynamoDB Streams 加载到 Amazon OpenSearch Service 中,以用于我们的搜索和分析工作负载,”负责人 Alex Bilbie 说道Muzz 的工程博士。“设计和构建初始数据管道花了数周时间,然后,每当我们需要进行更改时,我们就必须投入持续的工程资源来维护和更新自定义 ETL 代码。DynamoDB 与 Amazon OpenSearch 的零 ETL 集成该服务使在 OpenSearch 服务中使用我们的 DynamoDB 数据变得更加容易,有助于减少运营开销,并使团队能够腾出时间来开发面向用户的功能,从而进一步增强 Muzz 体验。”

Orion Advisor Solutions 提供了一个技术支持的信托流程,通过为财务顾问提供单一、互联且技术驱动的体验来改变顾问与客户的关系。Orion 总裁 Brian McLaughlin 表示:“数据可访问性、交付和透明度对我们的业务至关重要,这就是为什么我们使用 Amazon Redshift 来支持我们的数据处理解决方案,并与我们的顾问客户实时共享数据以支持决策制定。”顾问技术。“Amazon DynamoDB 与 Amazon Redshift 的零 ETL 集成将使我们能够快速轻松地分析其他数据源,为财务顾问提供全面的见解,并为我们的客户和合作伙伴改进我们的数据共享解决方案。我们很高兴能够使用这种新的零 ETL 集成,这将消除构建和管理自定义数据管道解决方案的需要。”

美国联合航空运营着庞大的国内和国际航线网络,横跨美国大大小小的城市。“今天,我们的团队使用 Amazon RDS 和 Amazon Redshift 等 AWS 技术来收集和分析来自我们的应用程序、客户和运营的数据。然而,手动管理数据管道以在全球范围内连接所有这些数据成本高昂且劳动力密集,”联合航空公司董事总经理桑杰·奈尔(Sanjay Nair)表示。“通过 Amazon RDS for MySQL 与 Amazon Redshift 的零 ETL 集成,我们计划构建自己的自我修复数据管道,以实现灾难恢复以及管道和数据质量功能的自动化,同时减轻数据工程师的负担。因此,我们还能够利用强大的 Amazon Redshift 功能,例如跨区域数据共享、Amazon Redshift Serverless、和 Amazon Redshift Spectrum 来解锁有关我们的 RDS for MySQL 数据的见解。”

关于亚马逊网络服务

自 2006 年以来,Amazon Web Services 一直是世界上最全面、应用最广泛的云。AWS 一直在不断扩展其服务,以支持几乎任何工作负载,现在拥有 240 多种功能齐全的服务,涉及计算、存储、数据库、网络、分析、机器学习和人工智能 (AI)、物联网 (IoT)、通过 32 个地理区域内的 102 个可用区进行移动、安全、混合、虚拟和增强现实(VR 和 AR)、媒体和应用程序开发、部署和管理,并宣布计划在加拿大再增加 15 个可用区和另外 5 个 AWS 区域、德国、马来西亚、新西兰和泰国。数以百万计的客户(包括增长最快的初创公司、最大的企业和领先的政府机构)信任 AWS 为其基础设施提供支持,变得更加敏捷,成本更低。要了解有关 AWS 的更多信息,请访问aws.amazon.com。

关于亚马逊

亚马逊遵循四个原则:以客户为中心而不是以竞争对手为中心、对发明的热情、对卓越运营的承诺以及长期思考。亚马逊致力于成为地球上最以客户为中心的公司、地球上最好的雇主和地球上最安全的工作场所。客户评论、一键式购物、个性化推荐、Prime、亚马逊物流、AWS、Kindle Direct Publishing、Kindle、Career Choice、Fire 平板电脑、Fire TV、Amazon Echo、Alexa、Just Walk Out 技术、Amazon Studios 和 The Climate承诺是亚马逊首创的一些举措。欲了解更多信息,请访问www.amazon.com/about并关注@AmazonNews。
原文链接;https://press.aboutamazon.com/2023/11/aws-announces-four-zero-etl-integrations-to-make-data-access-and-analysis-faster-and-easier-across-data-stores

版权声明: woniu 发表于 2024-02-02 09:00:44。
转载请注明: AWS 宣布四项零 ETL 集成,使跨数据存储的数据访问和分析变得更快、更轻松 | 跨境湾

相关文章