NVIDIA cuDF 加速了谷歌云上的 Apache Spark 應(yīng)用,幫助 Snap 工程師更快地測(cè)試和部署新功能,同時(shí)大幅節(jié)省成本。
![]()
上圖由 Snap 提供,展示了其地圖功能的 A/B 測(cè)試。
Snapchat 等社交媒體應(yīng)用的功能幾乎與流行趨勢(shì)一樣,發(fā)展日新月異。為了跟上步伐,其母公司 Snap 在谷歌云服務(wù)上采用了 NVIDIA 的開放數(shù)據(jù)處理庫(kù)來加速開發(fā)。
Snap 每天早上在 3 小時(shí)的窗口期內(nèi)使用 Apache Spark 分布式框架處理超過 10 PB 的數(shù)據(jù),每月運(yùn)行數(shù)千個(gè)此類實(shí)驗(yàn)。通過采用由 NVIDIA cuDF 加速的 Apache Spark,該公司使用 NVIDIA GPU 優(yōu)化數(shù)據(jù)處理工作負(fù)載, 在相同數(shù)量的機(jī)器上實(shí)現(xiàn) 4 倍的運(yùn)行速度提升,為擴(kuò)展提供了一條經(jīng)濟(jì)高效的路徑。
通過將 NVIDIA 的 GPU 優(yōu)化軟件(包括 NVIDIA CUDA-X 庫(kù))與谷歌的基礎(chǔ)設(shè)施管理服務(wù)(如 Google Kubernetes Engine)相結(jié)合,Snap 利用全棧平臺(tái)實(shí)現(xiàn)了大規(guī)模的數(shù)據(jù)處理。
以上為摘要內(nèi)容,點(diǎn)擊鏈接閱讀完整內(nèi)容:快速?zèng)Q策:加速數(shù)據(jù)處理的開放庫(kù)如何助力 Snapchat 進(jìn)行 A/B 測(cè)試 | NVIDIA 英偉達(dá)博客
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.