首頁|必讀|視頻|專訪|運(yùn)營|制造|監(jiān)管|大數(shù)據(jù)|物聯(lián)網(wǎng)|量子|元宇宙|智能汽車|特約記者
手機(jī)|互聯(lián)網(wǎng)|IT|5G|光通信|人工智能|云計(jì)算|芯片|報(bào)告|智慧城市|移動互聯(lián)網(wǎng)|會展
首頁 >> 互聯(lián)網(wǎng) >> 正文

業(yè)界最大數(shù)據(jù)湖0故障遷上阿里云!數(shù)據(jù)量達(dá)500PB

2024年11月7日 16:43  快科技  

11月6日消息,今天阿里云宣布,小紅書技術(shù)團(tuán)隊(duì)近日完成了一項(xiàng)業(yè)界前所未有的壯舉,將業(yè)界最大數(shù)據(jù)湖0故障遷移至阿里云。

作為中國頭部互聯(lián)網(wǎng)公司之一,小紅書月活用戶已超過3億,其數(shù)據(jù)湖存儲了過去11年的所有原始數(shù)據(jù),包括結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)。

隨著業(yè)務(wù)的高速增長,小紅書對在線處理數(shù)據(jù)的需求不斷增加,同時離線處理所積累的歷史問題也提高了切換的難度。

2023年11月,小紅書共有1500人參與遷云項(xiàng)目——計(jì)劃一年內(nèi),把小紅書的數(shù)據(jù)湖搬上阿里云,彼時即便是業(yè)界體量最大的案例,也遠(yuǎn)小于小紅書的本次遷移。

2024年5月,項(xiàng)目正式進(jìn)入雙跑階段,作為切換到正式環(huán)境前最后的測試,是穩(wěn)定性最大的保障。

在這一階段,團(tuán)隊(duì)需要解決的問題數(shù)不勝數(shù),每周平均新增500多個問題。

在阿里云團(tuán)隊(duì)的全力保障下,小紅書技術(shù)團(tuán)隊(duì)順利完成了割接,沒有發(fā)生任何一個P2及以上故障。

2024年11月,小紅書遷云項(xiàng)目正式宣告結(jié)束,在沒有故障的情況下,遷移數(shù)據(jù)500PB,任務(wù)11萬,參與人數(shù)1500人,涉及部門40多個。

編 輯:章芳
飛象網(wǎng)版權(quán)及免責(zé)聲明:
1.本網(wǎng)刊載內(nèi)容,凡注明來源為“飛象網(wǎng)”和“飛象原創(chuàng)”皆屬飛象網(wǎng)版權(quán)所有,未經(jīng)允許禁止轉(zhuǎn)載、摘編及鏡像,違者必究。對于經(jīng)過授權(quán)可以轉(zhuǎn)載,請必須保持轉(zhuǎn)載文章、圖像、音視頻的完整性,并完整標(biāo)注作者信息和飛象網(wǎng)來源。
2.凡注明“來源:XXXX”的作品,均轉(zhuǎn)載自其它媒體,在于傳播更多行業(yè)信息,并不代表本網(wǎng)贊同其觀點(diǎn)和對其真實(shí)性負(fù)責(zé)。
3.如因作品內(nèi)容、版權(quán)和其它問題,請?jiān)谙嚓P(guān)作品刊發(fā)之日起30日內(nèi)與本網(wǎng)聯(lián)系,我們將第一時間予以處理。
本站聯(lián)系電話為86-010-87765777,郵件后綴為cctime.com,冒充本站員工以任何其他聯(lián)系方式,進(jìn)行的“內(nèi)容核實(shí)”、“商務(wù)聯(lián)系”等行為,均不能代表本站。本站擁有對此聲明的最終解釋權(quán)。
相關(guān)新聞              
 
人物
愛立信中國區(qū)總裁方迎:新質(zhì)網(wǎng)絡(luò)創(chuàng)造新質(zhì)價值
精彩專題
2024中國算力大會
2024年國際信息通信展
中國信科亮相2024年國際信息通信展
第25屆中國國際光電博覽會
CCTIME推薦
關(guān)于我們 | 廣告報(bào)價 | 聯(lián)系我們 | 隱私聲明 | 本站地圖
CCTIME飛象網(wǎng) CopyRight © 2007-2024 By CCTIME.COM
京ICP備08004280號-1  電信與信息服務(wù)業(yè)務(wù)經(jīng)營許可證080234號 京公網(wǎng)安備110105000771號
公司名稱: 北京飛象互動文化傳媒有限公司
未經(jīng)書面許可,禁止轉(zhuǎn)載、摘編、復(fù)制、鏡像