使用Azure Synapse Link for Azure Cosmos DB進(jìn)行大規(guī)模實(shí)時(shí)的無(wú)ETL分析

在如今的環(huán)境中，采用數(shù)據(jù)驅(qū)動(dòng)的文化已成為跨行業(yè)企業(yè)的關(guān)鍵。這種文化的核心是需要以近乎實(shí)時(shí)的方式對(duì)運(yùn)營(yíng)數(shù)據(jù)進(jìn)行分析，從而優(yōu)化業(yè)務(wù)流程并發(fā)掘新的機(jī)會(huì)。多年以來(lái)，許多客戶都選擇Azure Cosmos DB作為完全托管的、超快的NoSQL數(shù)據(jù)庫(kù)來(lái)進(jìn)行任意規(guī)模的現(xiàn)代應(yīng)用程序開(kāi)發(fā)。隨著運(yùn)營(yíng)數(shù)據(jù)量的增長(zhǎng)以及從這些數(shù)據(jù)中獲得強(qiáng)大洞見(jiàn)的機(jī)會(huì)的增加，大規(guī)模處理和分析這些數(shù)據(jù)也面臨各種挑戰(zhàn)。

傳統(tǒng)上，為確保不影響運(yùn)行工作負(fù)載的性能，企業(yè)會(huì)維護(hù)單獨(dú)的聯(lián)機(jī)事務(wù)處理(OLTP)系統(tǒng)和聯(lián)機(jī)分析處理(OLAP)系統(tǒng)。雖然OLTP系統(tǒng)可針對(duì)任務(wù)關(guān)鍵型事務(wù)性工作負(fù)載進(jìn)行優(yōu)化，但OLAP系統(tǒng)可針對(duì)大量數(shù)據(jù)的分析工作負(fù)載進(jìn)行獨(dú)立優(yōu)化。從OLTP系統(tǒng)獲取數(shù)據(jù)到OLAP系統(tǒng)的摩擦和時(shí)間可能會(huì)導(dǎo)致數(shù)小時(shí)、數(shù)天甚至數(shù)周的顯著延遲，進(jìn)而導(dǎo)致基于過(guò)時(shí)數(shù)據(jù)做出非最優(yōu)決策。

發(fā)布Azure Synapse Link for Azure Cosmos DB以用于云原生HTAP

Azure Synapse Link for Azure Cosmos DB的公開(kāi)預(yù)覽版，這是一項(xiàng)云原生混合事務(wù)和分析處理(HTAP)功能，它支持對(duì)Azure Cosmos DB中的運(yùn)營(yíng)數(shù)據(jù)進(jìn)行近乎實(shí)時(shí)的分析。Azure Synapse Link最終打破了OLTP與OLAP系統(tǒng)之間長(zhǎng)期存在的障礙。Azure Synapse Link在Azure中將您的Azure Cosmos DB鏈接到Synapse Analytics，為您的業(yè)務(wù)提供即時(shí)的洞見(jiàn)。

Azure Synapse Link for Azure Cosmos DB:https://aka.ms/cosmosdb-synapselink

現(xiàn)在，您只需“單擊一下”，即可以近乎實(shí)時(shí)的方式在Azure中分析大量的運(yùn)營(yíng)數(shù)據(jù)，無(wú)需ETL管道且不會(huì)影響事務(wù)處理工作負(fù)載的性能。

此功能可解鎖新的業(yè)務(wù)場(chǎng)景，以根據(jù)實(shí)時(shí)趨勢(shì)發(fā)出警報(bào)，構(gòu)建近乎實(shí)時(shí)的儀表板以及基于用戶行為的業(yè)務(wù)體驗(yàn)。業(yè)務(wù)分析師、數(shù)據(jù)工程師和數(shù)據(jù)科學(xué)家現(xiàn)在可以使用Azure Synapse Analytics大規(guī)模地對(duì)Azure Cosmos DB中的運(yùn)營(yíng)數(shù)據(jù)進(jìn)行近乎實(shí)時(shí)的BI、AI和其他大數(shù)據(jù)分析。

搶先了解Azure Synapse Link的魔力

Azure Synapse Link主要由兩部分構(gòu)成：

Azure Cosmos DB分析存儲(chǔ)：容器中除現(xiàn)有行式“事務(wù)存儲(chǔ)”外，還增加了完全托管的列式“分析存儲(chǔ)”。分析存儲(chǔ)與事務(wù)存儲(chǔ)完全隔離，因此對(duì)分析存儲(chǔ)的查詢不會(huì)影響您的事務(wù)處理工作負(fù)載。在幾分鐘內(nèi)近乎實(shí)時(shí)地將運(yùn)營(yíng)數(shù)據(jù)的更新從事務(wù)存儲(chǔ)自動(dòng)同步到分析存儲(chǔ)。詳細(xì)了解:https://aka.ms/analytical-store-overview

Azure Synapse Analytics運(yùn)行時(shí)支持：Azure Cosmos DB分析存儲(chǔ)可與Azure Synapse Analytics支持的各種分析運(yùn)行時(shí)進(jìn)行本機(jī)集成，這樣可以直接查詢分析存儲(chǔ)。無(wú)需進(jìn)一步的數(shù)據(jù)轉(zhuǎn)換即可分析來(lái)自分析存儲(chǔ)的數(shù)據(jù)。到目前為止，Azure Synapse Analytics通過(guò)Azure Cosmos DB分析存儲(chǔ)支持Apache Spark和Synapse SQL無(wú)服務(wù)器模式。

下面是一些Azure Synapse Link強(qiáng)大功能的示例：

使用簡(jiǎn)化的編程模型基于Azure Cosmos DB容器創(chuàng)建Synapse Spark表。然后利用Spark的分布式處理功能在Spark表之間執(zhí)行聯(lián)接和其他復(fù)雜的聚合。這使您可以直接通過(guò)Synapse Spark轉(zhuǎn)換和豐富Azure Cosmos DB中的運(yùn)營(yíng)數(shù)據(jù)。

通過(guò)Azure Synapse Analytics與Azure機(jī)器學(xué)習(xí)和Apache Spark ML的本機(jī)集成，直接在Azure Cosmos DB中基于運(yùn)營(yíng)數(shù)據(jù)構(gòu)建ML模型。然后部署這些模型以在應(yīng)用程序中進(jìn)行實(shí)時(shí)評(píng)分。

利用與Synapse SQL無(wú)服務(wù)器模式的本機(jī)集成及其T-SQL語(yǔ)言的完整表達(dá)能力，從Azure Cosmos DB查詢運(yùn)營(yíng)數(shù)據(jù)并構(gòu)建SQL視圖。直接使用熟悉的BI工具（例如Power BI）基于Azure Cosmos DB建模和發(fā)布自動(dòng)刷新的BI儀表板。

以下是垂直行業(yè)中受益于Azure Synapse Link的一些常見(jiàn)用例：

供應(yīng)鏈分析、預(yù)測(cè)和報(bào)告

實(shí)時(shí)個(gè)性化

物聯(lián)網(wǎng)應(yīng)用場(chǎng)景中的預(yù)測(cè)性維護(hù)和異常檢測(cè)

現(xiàn)在，借助Azure Synapse Link Azure Cosmos DB，企業(yè)可以集中精力以近乎實(shí)時(shí)的速度大規(guī)模地從其運(yùn)營(yíng)數(shù)據(jù)中解鎖寶貴的洞見(jiàn)。通過(guò)利用近乎實(shí)時(shí)的數(shù)據(jù)來(lái)支持預(yù)測(cè)分析，企業(yè)可以識(shí)別新出現(xiàn)的商機(jī)，并在獲得數(shù)據(jù)時(shí)盡快做出業(yè)務(wù)決策。在正在進(jìn)行的數(shù)字化轉(zhuǎn)型過(guò)程中，這將使真正的領(lǐng)導(dǎo)者從追隨者中脫穎而出。