Google云計算推無服務(wù)器Spark服務(wù),還可在BigQuery編輯程序代碼無縫執(zhí)行

來源: 十輪網(wǎng)
作者:十輪網(wǎng)
時間:2022-02-07
13053
Google云計算正式推出無服務(wù)器開源集群運算框架Spark服務(wù)(Serverless Spark),官方提到,這是目前市面上第一個可自動擴展的無服務(wù)器Spark服務(wù)。

A00DFACD-F594-4845-AE0A-65F57291B2FA.jpeg

Google云計算正式推出無服務(wù)器開源集群運算框架Spark服務(wù)(Serverless Spark),官方提到,這是目前市面上第一個可自動擴展的無服務(wù)器Spark服務(wù),另外,Google還讓云計算數(shù)據(jù)倉庫BigQuery連接無服務(wù)器Spark計算資源,BigQuery用戶現(xiàn)在可以使用無服務(wù)器Spark,和BigQuery SQL進行資料分析。這些功能更新的目標(biāo),都是要讓用戶能更簡單地運行大規(guī)模ETL和數(shù)據(jù)科學(xué)等使用案例。

由于Apache Spark所提供的速度、簡易性和程序語言靈活性,使得不少企業(yè)應(yīng)用Apache Spark來進行資料工程、數(shù)據(jù)挖掘和機器學(xué)習(xí)等任務(wù),但Google提到,管理集群和調(diào)整基礎(chǔ)設(shè)施的效率很差,針對不同使用案例的集成程序,可能會大幅消耗生產(chǎn)力。

而Google提供無服務(wù)器Spark,供用戶專注于程序代碼和邏輯設(shè)計,不再需要管理集群和調(diào)整基礎(chǔ)設(shè)施,通過選擇的接口就能上傳Spark作業(yè),無服務(wù)器Spark會自動處理規(guī)??s放,來符合任務(wù)的需要。

另外,Google也開始提供BigQuery實現(xiàn)無服務(wù)器Spark功能預(yù)覽版,通過提供統(tǒng)一接口,供資料分析師在BigQuery編輯器中,編寫SQL和PySpark程序代碼,并且不需要配置基礎(chǔ)設(shè)施,就能無縫地使用Spark執(zhí)行。Google正努力在各種接口,集成無服務(wù)器Spark服務(wù),使得用戶不需要預(yù)先配置任何基礎(chǔ)設(shè)施,便可以激活Spark,接下來還要讓用戶在全托管機器學(xué)習(xí)平臺Vertex AI,也能用到Spark。

立即登錄,閱讀全文
版權(quán)說明:
本文內(nèi)容來自于十輪網(wǎng),本站不擁有所有權(quán),不承擔(dān)相關(guān)法律責(zé)任。文章內(nèi)容系作者個人觀點,不代表快出海對觀點贊同或支持。如有侵權(quán),請聯(lián)系管理員(zzx@kchuhai.com)刪除!
優(yōu)質(zhì)服務(wù)商推薦
更多
掃碼登錄
打開掃一掃, 關(guān)注公眾號后即可登錄/注冊
加載中
二維碼已失效 請重試
刷新
賬號登錄/注冊
個人VIP
小程序
快出海小程序
公眾號
快出海公眾號
商務(wù)合作
商務(wù)合作
投稿采訪
投稿采訪
出海管家
出海管家