Hadoop開源社區(qū)宣布支持騰訊云對象存儲COS

來源:百家號
作者:環(huán)球網(wǎng)
時間:2020-08-06
2509
知名大數(shù)據(jù)開源社區(qū)Hadoop近日宣布對騰訊云對象存儲COS的正式支持。后續(xù),開發(fā)者在基于Hadoop架構進行大數(shù)據(jù)分析時,能夠在不修改代碼的情況下,無縫高效地使用騰訊云COS來處理海量數(shù)據(jù)的讀寫任務。

ZjUwNmY0Yi5qcGVn.jpg

8月5日消息,知名大數(shù)據(jù)開源社區(qū)Hadoop近日宣布對騰訊云對象存儲COS的正式支持。后續(xù),開發(fā)者在基于Hadoop架構進行大數(shù)據(jù)分析時,能夠在不修改代碼的情況下,無縫高效地使用騰訊云COS來處理海量數(shù)據(jù)的讀寫任務。

大數(shù)據(jù)分析需要花費大量的計算和存儲資源。在傳統(tǒng)模式下,計算與存儲資源耦合度較高,一旦資源不夠,就需要對二者同時進行擴容。近年來,在云計算的推動下,開發(fā)者逐漸開始采用云上對象存儲,來實現(xiàn)計算與存儲的分離,進而提升資源的靈活性,并降低成本。

Hadoop是目前應用最為廣泛的分布式大數(shù)據(jù)處理框架,也是大數(shù)據(jù)處理領域事實上的標準。在數(shù)據(jù)價值越來越被重視的時代,Hadoop也在互聯(lián)網(wǎng)、政務、金融等行業(yè)中被廣泛使用。

騰訊云對象存儲COS是一種具備安全穩(wěn)定、海量、便捷、低延遲、低成本等特點的云端分布式存儲服務,其底層采用騰訊自研存儲引擎YottaStore,能夠實現(xiàn)單集群理論管理百萬級節(jié)點,并且做到真正的按需擴容,磁盤利用率達到90%以上。

Hadoop社區(qū)支持騰訊云對象存儲以后,開發(fā)者在基于Hadoop架構進行大數(shù)據(jù)分析時,能夠無縫使用到騰訊云對象存儲COS提供的高速云存儲服務。

“開發(fā)者在騰訊云上可以使用彈性MapReduce(EMR)計算,并直接使用騰訊云對象存儲COS作為后端存儲,整個過程都不需要額外添加代碼,更加方便和快捷。”騰訊云對象存儲負責人介紹。

目前,小紅書、獵豹移動、珍愛網(wǎng)等就使用了騰訊云“EMR on COS”的計算與存儲分離模式,快速構建和部署大數(shù)據(jù)分析程序,有效地滿足了大數(shù)據(jù)業(yè)務需求。

原文鏈接:點擊前往 >
版權說明:本文內容來自于百家號,本站不擁有所有權,不承擔相關法律責任。文章內容系作者個人觀點,不代表快出海對觀點贊同或支持。如有侵權,請聯(lián)系管理員(zzx@kchuhai.com)刪除!
個人VIP
小程序
快出海小程序
公眾號
快出海公眾號
商務合作
商務合作
投稿采訪
投稿采訪
出海管家
出海管家