BigQuery現(xiàn)在原生支持半結(jié)構(gòu)化資料

來源: 十輪網(wǎng)
作者:十輪網(wǎng)
時間:2022-01-11
13865
Google宣布開始在其云計算數(shù)據(jù)倉庫BigQuery,支持原生JSON資料類型,而這項新功能讓用戶可以在BigQuery中,存儲和分析半結(jié)構(gòu)化資料。

bigquery_now_natively_supports_semi-structured_data.jpg

Google宣布開始在其云計算數(shù)據(jù)倉庫BigQuery,支持原生JSON資料類型,而這項新功能讓用戶可以在BigQuery中,存儲和分析半結(jié)構(gòu)化資料。官方提到,通過支持新的JSON存儲類型,以及高端功能,諸如JSON點記法(Dot Notation)、適應性資料類型變更、新的JSON函數(shù),以及半結(jié)構(gòu)化資料,BigQuery用起來更主動,用戶能以原生格式進行查詢。

構(gòu)建資料工作管線,需要考量許多方面,包括資料截取來源,或是應用程序要以批次或是流媒體方式使用資料,以及表格設計的方式等,Google解釋,因為這些配置通常需要在構(gòu)建資料工作管線之前決定,所以當后來不敷使用時,常需要花菲戈昂成本,或是繁瑣地過程進行修改。

為了處理這類事件,用戶過去需要構(gòu)建復雜的自動化處理機制,也可能得暫停資料截取,由人工手動介入,或是將預期之外的資料,寫入到包山包海的字符串字段中,并在后期使用時,對該字段進行額外解析。但Google提到,這些方法都會增加成本、復雜性,并且降低用戶操作資料的能力。

JSON是一種受到廣泛使用的格式,由于不要求架構(gòu),因此能夠處理半結(jié)構(gòu)化資料,這使得用戶能獲得更大的靈活度,存儲和查詢非總是遵循固定模式和資料類型的資料。以JSON資料類型截取半結(jié)構(gòu)化資料,BigQuery可獨立編碼和處理JSON字段,并且通過點記法單獨查詢JSON資料字段的數(shù)值。

因此在BigQuery中,支持半結(jié)構(gòu)化資料,能夠給用戶更大的自由度,并且減少處理相關(guān)問題的成本。Google提到,相較于從字符串字段截取JSON元素,需要處理整個人信息料區(qū)塊,來得有效率許多,更具成本效益,而且即便是現(xiàn)有的資料表,也能應用這項新功能。

立即登錄,閱讀全文
版權(quán)說明:
本文內(nèi)容來自于十輪網(wǎng),本站不擁有所有權(quán),不承擔相關(guān)法律責任。文章內(nèi)容系作者個人觀點,不代表快出海對觀點贊同或支持。如有侵權(quán),請聯(lián)系管理員(zzx@kchuhai.com)刪除!
相關(guān)文章
新版GKE可管理最多6.5萬集群節(jié)點,超越AWS、Azure 10倍
新版GKE可管理最多6.5萬集群節(jié)點,超越AWS、Azure 10倍
Google Cloud公布最新Google Kubernetes Engine版本,號稱可支持最高達65,000個節(jié)點的服務器集群,以執(zhí)行超大型AI模型。
Google Cloud
云服務
云計算
2024-11-152024-11-15
Google Cloud細說AI變現(xiàn)途徑:用戶一年暴增10倍
Google Cloud細說AI變現(xiàn)途徑:用戶一年暴增10倍
Google云計算平臺(Google Cloud)首席執(zhí)行官Thomas Kurian在高盛舉行的會議上,說明了該公司究竟是通過哪些途徑將AI變現(xiàn)。
Google Cloud
谷歌云
云計算
2024-09-132024-09-13
云計算平臺GCP的服務存在權(quán)限提升漏洞,未經(jīng)授權(quán)的攻擊者可借此訪問敏感數(shù)據(jù)
云計算平臺GCP的服務存在權(quán)限提升漏洞,未經(jīng)授權(quán)的攻擊者可借此訪問敏感數(shù)據(jù)
7月24日安全企業(yè)Tenable披露影響Google Cloud Platform(GCP)的權(quán)限提升漏洞ConfusedFunction,這項弱點發(fā)生在名為Cloud Functions的無服務器運算服務,以及稱作Cloud Build的CICD渠道服務。
Google Cloud
谷歌云
云計算
2024-07-272024-07-27
Gemini為核心,Google云計算AI戰(zhàn)略聚焦云服務和生產(chǎn)力GAI
Gemini為核心,Google云計算AI戰(zhàn)略聚焦云服務和生產(chǎn)力GAI
過去一年,企業(yè)GAI應用的風潮席卷全球,成了三大公有云積極搶攻的新戰(zhàn)場,微軟靠著OpenAI助攻,去年在這場云計算GAI大戰(zhàn)中取得先機,而Google后來居上,靠著自家PaLM模型和GAI生產(chǎn)力工具來迎戰(zhàn),AWS則是到去年底年會上,對于企業(yè)GAI應用布局才有比較完整的布局與披露。
Google Cloud
谷歌云
云計算
2024-05-042024-05-04
優(yōu)質(zhì)服務商推薦
更多