技術(shù)文章區(qū)

亞馬遜云科技宣布推出四項Zero-ETL集成特性

時間：2023-12-04 13:35:52 發(fā)布：來源：亞馬遜云科技第一對焦：亞馬遜云科技

讓跨數(shù)據(jù)存儲的數(shù)據(jù)訪問與分析更快速、更便捷

Amazon Aurora PostgreSQL、Amazon DynamoDB、Amazon RDS for MySQL與Amazon Redshift的Zero-ETL集成特性使客戶能夠分析不同來源的數(shù)據(jù)，無需自行構(gòu)建和維護(hù)數(shù)據(jù)管道
Amazon DynamoDB與Amazon OpenSearch Service的Zero-ETL集成特性能夠?qū)崿F(xiàn)近乎實時地對運(yùn)營數(shù)據(jù)進(jìn)行全文和向量搜索

/美通社/ -- 亞馬遜云科技在2023 re:Invent全球大會上，宣布推出一系列新的集成解決方案，旨在幫助客戶迅速而輕松地連接和分析數(shù)據(jù)，而無需構(gòu)建和管理復(fù)雜的提取、轉(zhuǎn)換和加載（ETL）數(shù)據(jù)管道。通過全新的Amazon Aurora PostgreSQL、Amazon DynamoDB、Amazon Relational Database Service（Amazon RDS）for MySQL與Amazon Redshift的Zero-ETL集成特性，使得在Amazon Redshift中連接和分析多個關(guān)系型和非關(guān)系型數(shù)據(jù)庫的數(shù)據(jù)變得更加容易。此外，客戶現(xiàn)在還可以使用Amazon OpenSearch Service對Amazon DynamoDB數(shù)據(jù)進(jìn)行近乎實時的全文和向量搜索。無論數(shù)據(jù)存儲在哪里，這些Zero-ETL集成特性都能簡化數(shù)據(jù)連接和操作流程，使客戶靈活地利用亞馬遜云科廣泛而領(lǐng)先的數(shù)據(jù)庫和分析服務(wù)，深入挖掘新洞見的同時更迅速地實現(xiàn)創(chuàng)新并做出更明智的數(shù)據(jù)驅(qū)動決策。欲了解關(guān)于使用亞馬遜云科技釋放數(shù)據(jù)價值的更多信息，請訪問aws.amazon.com/data。

"為了幫助客戶通過數(shù)據(jù)激發(fā)創(chuàng)新，亞馬遜云科技提供了廣泛而深入的數(shù)據(jù)服務(wù)，用于大規(guī)模存儲和查詢各種類型的數(shù)據(jù)。"亞馬遜云科技數(shù)據(jù)與人工智能副總裁Swami Sivasubramanian博士表示，"客戶除了要有適合工作的正確工具之外，還需要具備在企業(yè)范圍內(nèi)集成數(shù)據(jù)的能力，從而創(chuàng)造更多業(yè)務(wù)價值并實現(xiàn)更快速地創(chuàng)新。這也是我們投資Zero-ETL未來的原因，讓數(shù)據(jù)集成不再是繁瑣的手動任務(wù)，使客戶能夠輕松獲取他們所需的數(shù)據(jù)。今天宣布的新的集成特性是我們邁向Zero-ETL未來的重要一步，而且亞馬遜云科技還將持續(xù)投資于這一愿景，讓客戶能夠輕松集成來自整個系統(tǒng)的數(shù)據(jù)，從而專注于發(fā)現(xiàn)新的洞見。"

數(shù)據(jù)是企業(yè)的獨特競爭力。企業(yè)擁有不同類型的數(shù)據(jù)，它們的來源不同，規(guī)模和產(chǎn)生速度各異，用途也是千差萬別。為了最大程度利用數(shù)據(jù)，企業(yè)需要一套全面的工具來處理各種變量，以及集成和合并分散在多個來源的數(shù)據(jù)。例如，一家企業(yè)可能在關(guān)系型數(shù)據(jù)庫中存儲交易數(shù)據(jù)并希望在數(shù)據(jù)倉庫中進(jìn)行分析，但同時還需要使用另一種分析工具對非關(guān)系型數(shù)據(jù)庫的數(shù)據(jù)進(jìn)行向量搜索。在過去，移動數(shù)據(jù)通常需要企業(yè)構(gòu)建自己的ETL數(shù)據(jù)管道，但這樣做不僅成本高昂、管理復(fù)雜且容易發(fā)生間歇性錯誤，導(dǎo)致無法及時獲得本來需要快速獲取的洞見。為了幫助客戶充分挖掘數(shù)據(jù)價值，亞馬遜云科技提供了一套全面的數(shù)據(jù)服務(wù)，確保客戶始終擁有正確的工具。但是將數(shù)據(jù)作為業(yè)務(wù)核心還有一個關(guān)鍵環(huán)節(jié)，就是客戶要能夠連接所有數(shù)據(jù)，無論它們存儲在何處。

這正是亞馬遜云科技投資Zero-ETL功能的原因，消除了手動移動數(shù)據(jù)的負(fù)擔(dān)，包括Amazon Redshift和Amazon Athena中的聯(lián)邦查詢功能，使客戶能夠直接查詢存儲在操作型數(shù)據(jù)庫、數(shù)據(jù)倉庫和數(shù)據(jù)湖中的數(shù)據(jù)，例如Amazon Connect分析數(shù)據(jù)湖，使客戶能夠更輕松地訪問聯(lián)絡(luò)中心的數(shù)據(jù)進(jìn)行分析和機(jī)器學(xué)習(xí)。同時，還有全新的Salesforce Data Cloud與亞馬遜云科技存儲、數(shù)據(jù)和分析服務(wù)之間的Zero-ETL集成，讓客戶能夠在Salesforce和亞馬遜云科技之間輕松無縫地統(tǒng)一數(shù)據(jù)，從而更快速地獲得全面的洞察?；趤嗰R遜云科技Zero-ETL，今天宣布的集成功能消除了構(gòu)建和維護(hù)數(shù)據(jù)管道的負(fù)擔(dān)，讓客戶能夠快速、輕松地連接所有數(shù)據(jù)，無論它們存儲在何處。

全新的Amazon Aurora PostgreSQL、Amazon DynamoDB、Amazon RDS for MySQL與Amazon Redshift的Zero-ETL集成，極大簡化了分析交易數(shù)據(jù)的過程，無需構(gòu)建和維護(hù)數(shù)據(jù)管道：為了充分挖掘數(shù)據(jù)價值，許多企業(yè)希望將來自多個高性能數(shù)據(jù)庫的交易數(shù)據(jù)（包括Amazon Aurora和Amazon RDS等關(guān)系型數(shù)據(jù)庫，以及Amazon DynamoDB等非關(guān)系型數(shù)據(jù)庫）遷移到Amazon Redshift等數(shù)據(jù)倉庫中，以運(yùn)行大規(guī)模數(shù)據(jù)倉庫和高性能分析工作負(fù)載。然而，這種數(shù)據(jù)遷移的過程通常要求企業(yè)為每個數(shù)據(jù)源建立ETL管道。為了更容易地使用Amazon Redshift分析Amazon Aurora數(shù)據(jù)，亞馬遜云科技在今年早些時候宣布了Aurora MySQL與Amazon Redshift的Zero-ETL集成正式可用。該集成每分鐘處理超過100萬次交易，并在Amazon Aurora MySQL中寫入數(shù)據(jù)后的幾秒內(nèi)提供給Amazon Redshift使用。為了進(jìn)一步拓展Zero-ETL優(yōu)勢，亞馬遜云科技現(xiàn)在宣布針對Amazon Aurora PostgreSQL、Amazon DynamoDB、Amazon RDS for MySQL與Amazon Redshift的新Zero-ETL集成的預(yù)覽版正式可用。這些集成有助于客戶快速、輕松地訪問Amazon Redshift中常用的關(guān)系型和非關(guān)系型數(shù)據(jù)庫的數(shù)據(jù)，進(jìn)行全面的分析。客戶只需在數(shù)據(jù)庫中選擇包含所需數(shù)據(jù)的數(shù)據(jù)表，數(shù)據(jù)便會自動復(fù)制到Amazon Redshift。通過將不同數(shù)據(jù)源的數(shù)據(jù)整合到一個數(shù)據(jù)倉庫中，客戶可以獲得對業(yè)務(wù)的綜合視圖，并充分利用Amazon Redshift的高級功能，包括數(shù)據(jù)共享、物化視圖和Amazon Redshift ML等，獲取全面且具有預(yù)測性的洞察。
Amazon DynamoDB與Amazon OpenSearch Service的Zero-ETL集成，能夠近乎實時地對交易數(shù)據(jù)進(jìn)行全文和向量搜索：為了優(yōu)化業(yè)務(wù)運(yùn)營并提升用戶體驗，許多客戶使用Amazon OpenSearch Service對Amazon DynamoDB中的交易數(shù)據(jù)執(zhí)行高級搜索功能，如全文和向量搜索、相關(guān)性排名和自動完成建議。例如，一家電商公司可能會將數(shù)據(jù)從Amazon DynamoDB復(fù)制到Amazon OpenSearch Service，利用向量搜索并通過與類似交易的數(shù)據(jù)進(jìn)行比較后，自動判斷交易是否存在欺詐行為。如今，全新的Amazon DynamoDB與Amazon OpenSearch Service的Zero-ETL集成已全面可用，客戶能夠更輕松地在幾乎實時的情況下對Amazon DynamoDB數(shù)據(jù)進(jìn)行強(qiáng)大的全文和向量搜索查詢?？蛻糁恍柽x擇包含他們想要分析的數(shù)據(jù)的Amazon DynamoDB表，數(shù)據(jù)將在寫入DynamoDB后的幾秒鐘內(nèi)便會被復(fù)制到Amazon OpenSearch Service中?？蛻艨梢詫⒍鄠€Amazon DynamoDB表中的數(shù)據(jù)同步到一個Amazon OpenSearch Service托管集群或無服務(wù)器集合中，以獲取跨多個應(yīng)用程序的全面洞察，還能整合搜索資產(chǎn)，在提高運(yùn)營效率的同時降低成本。

美國聯(lián)合航空公司運(yùn)營著一個龐大的國內(nèi)和國際航線網(wǎng)絡(luò)，覆蓋了美國各個城市。"如今，我們使用Amazon RDS和Amazon Redshift等亞馬遜云科技服務(wù)收集和分析來自應(yīng)用程序、客戶和運(yùn)營團(tuán)隊的數(shù)據(jù)。然而，手動管理全球范圍內(nèi)所有數(shù)據(jù)的數(shù)據(jù)管道需要耗費(fèi)大量的人力和成本。"美國聯(lián)合航空公司董事總經(jīng)理Sanjay Nair表示，"通過Amazon RDS for MySQL與Amazon Redshift的Zero-ETL集成，我們計劃構(gòu)建具備自我修復(fù)能力的數(shù)據(jù)管道以自動管理災(zāi)難恢復(fù)、管道和數(shù)據(jù)質(zhì)量功能，同時減輕數(shù)據(jù)工程師的負(fù)擔(dān)。我們還將利用強(qiáng)大的Amazon Redshift功能，如跨區(qū)域數(shù)據(jù)共享、Amazon Redshift Serverless和Amazon Redshift Spectrum服務(wù)來幫助我們解鎖Amazon RDS for MySQL的數(shù)據(jù)洞察力。"

人才招聘技術(shù)提供商iCIMS專注于讓每個企業(yè)都能夠招聘到優(yōu)秀的人才。"我們一直希望借助亞馬遜云科技的力量，利用專門構(gòu)建的數(shù)據(jù)存儲，以及幾乎無需維護(hù)且高效可擴(kuò)展的數(shù)據(jù)共享和提取過程，來構(gòu)建一種有效的、現(xiàn)代的數(shù)據(jù)策略，助力我們實現(xiàn)應(yīng)用程序現(xiàn)代化。"iCIMS云托管和工程副總裁Ben Barresi表示，"我們期待使用Amazon Aurora PostgreSQL與Amazon Redshift的Zero-ETL集成，來減輕工程團(tuán)隊在數(shù)據(jù)獲取管道管理和維護(hù)方面的負(fù)擔(dān)。數(shù)據(jù)在Amazon Aurora中寫入后的幾秒內(nèi)就可以在Amazon Redshift中使用，與我們目前每晚運(yùn)行的批量處理提取相比，數(shù)據(jù)分析速度將得到顯著提升。"