近日,得到(天津)文化傳播有限公司與火山引擎數智平臺VeDI達成合作,雙方將聚焦在IDC上云展開系列協作。
(資料圖片)
得到是國內在線教育/音視頻內容的頭部企業,旗下有得到課程、得到高研院、職場訓練、聽書、電子書、圖書等多個業務線,APP內容業態覆蓋PCG、UGC等多種方向。
Cloudera CDH是得到的底層大數據基座之一,由于本地數據中心CDH服務器規格陳舊且維保到期,CDH社區開源免費版本停止更新,結合云計算彈性擴容、按需使用、按量付費等多優點,得到將目光轉移至云上,并開始尋求遷移上云的最優方案。
這時,火山引擎數智平臺VeDI進入得到視野。湖倉一體分析服務 LAS、大數據研發治理套件DataLeap是火山引擎數智平臺VeDI旗下的兩款核心數據產品,能讓遷移上云的解決方案更低成本、更高效率、更高安全性,因而成為得到的首選。
得到與火山引擎數智平臺VeDI全景合作方案
針對得到“高效率、高性價比”上云的訴求,LAS基于云原生、Serverless 的理念,降低了用戶對復雜基礎架構的使用門檻,免去基礎設施的運維管理工作,實現開箱即用,有效的降低IT資源和運維管理成本。LAS的冷熱存儲能力,使得到存儲成本再一次獲得優化。
不僅做到成本極致優化,LAS也為得到輸出一套“提效”方案。一方面,相比于原有的CDH,LAS在性能上有大幅提升,在同樣數據集、SQL的情況下,執行時間和CPU使用量上都大大縮小;另一方面,LAS具備全托管的能力,能提供彈性伸縮、高可靠、高性能、安全隔離的部署環境,支持獨享隊列和共享隊列資源調度,幫助得到進一步解決IDC集群無法彈性伸縮的問題,并提升資源使用效率。
得到App大數據負責人高元勝介紹,“從傳統離線數倉到云原生湖倉,是一件極其有挑戰的事情,火山引擎LAS幫助得到升級到業界先進的技術架構,使得到的大數據基建實現至少3年的技術跨越”。
“上云”之后,火山引擎LAS先進的湖倉架構結合DataLeap基線監控、數據質量、 SLA治理等全生命周期的數據治理能力,得到還能實現生產環境離線鏈路在未來升級為準實時鏈路,提升實時分析決策能力。
火山引擎LAS和DataLeap的組合使用,盡可能縮短得到上云的遷移時間,降低原有業務改造成本,實現本地數據中心平滑上云。
為了進一步降低人工成本,火山引擎數智平臺團隊還配備了10+全套的自動化遷移工具,涵蓋數據集成、元數據、質量監控等全流程,大幅度降低人工操作成本,實現80%的自動化搬遷,讓整個遷移過程更加智能化。
高元勝進一步解釋自動化“上云”帶來的收益,“不僅能大大降低人力投入,讓我們的數據人員保持更多精力投入業務生產,更能顯著降低上云事故概率”。
早在2022年,得到與火山引擎數智平臺VeDI已圍繞數據治理、數據精細化運營等層面展開合作,并通過引入字節跳動獨有的數據BP機制、客戶數據平臺VeCDP等產品,為得到補齊基建能力、建立體系化的數據建設方法,此次合作則進一步夯實得到的大數據能力,為更好“用數”提供堅實的底座。(作者:周強)