近日,得到(天津)文化傳播有限公司與火山引擎數(shù)智平臺VeDI達(dá)成合作,雙方將聚焦在IDC上云展開系列協(xié)作。
(資料圖片)
得到是國內(nèi)在線教育/音視頻內(nèi)容的頭部企業(yè),旗下有得到課程、得到高研院、職場訓(xùn)練、聽書、電子書、圖書等多個業(yè)務(wù)線,APP內(nèi)容業(yè)態(tài)覆蓋PCG、UGC等多種方向。
Cloudera CDH是得到的底層大數(shù)據(jù)基座之一,由于本地數(shù)據(jù)中心CDH服務(wù)器規(guī)格陳舊且維保到期,CDH社區(qū)開源免費版本停止更新,結(jié)合云計算彈性擴(kuò)容、按需使用、按量付費等多優(yōu)點,得到將目光轉(zhuǎn)移至云上,并開始尋求遷移上云的最優(yōu)方案。
這時,火山引擎數(shù)智平臺VeDI進(jìn)入得到視野。湖倉一體分析服務(wù) LAS、大數(shù)據(jù)研發(fā)治理套件DataLeap是火山引擎數(shù)智平臺VeDI旗下的兩款核心數(shù)據(jù)產(chǎn)品,能讓遷移上云的解決方案更低成本、更高效率、更高安全性,因而成為得到的首選。
得到與火山引擎數(shù)智平臺VeDI全景合作方案
針對得到“高效率、高性價比”上云的訴求,LAS基于云原生、Serverless 的理念,降低了用戶對復(fù)雜基礎(chǔ)架構(gòu)的使用門檻,免去基礎(chǔ)設(shè)施的運維管理工作,實現(xiàn)開箱即用,有效的降低IT資源和運維管理成本。LAS的冷熱存儲能力,使得到存儲成本再一次獲得優(yōu)化。
不僅做到成本極致優(yōu)化,LAS也為得到輸出一套“提效”方案。一方面,相比于原有的CDH,LAS在性能上有大幅提升,在同樣數(shù)據(jù)集、SQL的情況下,執(zhí)行時間和CPU使用量上都大大縮??;另一方面,LAS具備全托管的能力,能提供彈性伸縮、高可靠、高性能、安全隔離的部署環(huán)境,支持獨享隊列和共享隊列資源調(diào)度,幫助得到進(jìn)一步解決IDC集群無法彈性伸縮的問題,并提升資源使用效率。
得到App大數(shù)據(jù)負(fù)責(zé)人高元勝介紹,“從傳統(tǒng)離線數(shù)倉到云原生湖倉,是一件極其有挑戰(zhàn)的事情,火山引擎LAS幫助得到升級到業(yè)界先進(jìn)的技術(shù)架構(gòu),使得到的大數(shù)據(jù)基建實現(xiàn)至少3年的技術(shù)跨越”。
“上云”之后,火山引擎LAS先進(jìn)的湖倉架構(gòu)結(jié)合DataLeap基線監(jiān)控、數(shù)據(jù)質(zhì)量、 SLA治理等全生命周期的數(shù)據(jù)治理能力,得到還能實現(xiàn)生產(chǎn)環(huán)境離線鏈路在未來升級為準(zhǔn)實時鏈路,提升實時分析決策能力。
火山引擎LAS和DataLeap的組合使用,盡可能縮短得到上云的遷移時間,降低原有業(yè)務(wù)改造成本,實現(xiàn)本地數(shù)據(jù)中心平滑上云。
為了進(jìn)一步降低人工成本,火山引擎數(shù)智平臺團(tuán)隊還配備了10+全套的自動化遷移工具,涵蓋數(shù)據(jù)集成、元數(shù)據(jù)、質(zhì)量監(jiān)控等全流程,大幅度降低人工操作成本,實現(xiàn)80%的自動化搬遷,讓整個遷移過程更加智能化。
高元勝進(jìn)一步解釋自動化“上云”帶來的收益,“不僅能大大降低人力投入,讓我們的數(shù)據(jù)人員保持更多精力投入業(yè)務(wù)生產(chǎn),更能顯著降低上云事故概率”。
早在2022年,得到與火山引擎數(shù)智平臺VeDI已圍繞數(shù)據(jù)治理、數(shù)據(jù)精細(xì)化運營等層面展開合作,并通過引入字節(jié)跳動獨有的數(shù)據(jù)BP機(jī)制、客戶數(shù)據(jù)平臺VeCDP等產(chǎn)品,為得到補(bǔ)齊基建能力、建立體系化的數(shù)據(jù)建設(shè)方法,此次合作則進(jìn)一步夯實得到的大數(shù)據(jù)能力,為更好“用數(shù)”提供堅實的底座。(作者:周強(qiáng))