06/11/2024 15:49
《中國要聞》小紅書將業界最大數據湖遷至阿里雲
《經濟通通訊社6日專訊》據《快科技》報道,經過一年時間,小紅書已把業界體量最大的
數據湖遷上阿里雲。據統計,該項目共有1500人參與,遷移數據500PB。
作為中國頭部互聯網公司之一,小紅書月活已過3億,其數據湖存儲了過去11年的所有原
始數據,包括結構化、半結構化和非結構化數據。2023年11月,小紅書發起遷雲項目--
計劃一年內,把小紅書的數據湖搬上阿里雲。
較於過往業界體量最大的案例,小紅書本次遷移的數據體量更大。據介紹,小紅書的遷雲項
目經歷了三個階段。項目組首先解決標準問題,然後根據標準進行治理;完成治理後,項目在今
年5月正式進入雙跑階段,把數據拷貝到阿里雲上,兩邊同時跑數,驗證正確性與及時性;8月
項目結束雙跑,進入割接階段。
11月,小紅書遷雲項目正式宣告結束。在零故障的情況下,遷移數據500PB,任務
11萬,參與人數1500人,涉及部門40多個。項目涉及產品之多和數據體量之大均創下業
界記錄。(jq)
數據湖遷上阿里雲。據統計,該項目共有1500人參與,遷移數據500PB。
作為中國頭部互聯網公司之一,小紅書月活已過3億,其數據湖存儲了過去11年的所有原
始數據,包括結構化、半結構化和非結構化數據。2023年11月,小紅書發起遷雲項目--
計劃一年內,把小紅書的數據湖搬上阿里雲。
較於過往業界體量最大的案例,小紅書本次遷移的數據體量更大。據介紹,小紅書的遷雲項
目經歷了三個階段。項目組首先解決標準問題,然後根據標準進行治理;完成治理後,項目在今
年5月正式進入雙跑階段,把數據拷貝到阿里雲上,兩邊同時跑數,驗證正確性與及時性;8月
項目結束雙跑,進入割接階段。
11月,小紅書遷雲項目正式宣告結束。在零故障的情況下,遷移數據500PB,任務
11萬,參與人數1500人,涉及部門40多個。項目涉及產品之多和數據體量之大均創下業
界記錄。(jq)
【香港好去處】etnet全新頻道盛大推出!全港最齊盛事活動資訊盡在掌握!► 即睇