06/11/2024 15:49
《中國要聞》小紅書將業界最大數據湖遷至阿里雲
《經濟通通訊社6日專訊》據《快科技》報道,經過一年時間,小紅書已把業界體量最大的數據湖遷上阿里雲。據統計,該項目共有1500人參與,遷移數據500PB。 作為中國頭部互聯網公司之一,小紅書月活已過3億,其數據湖存儲了過去11年的所有原始數據,包括結構化、半結構化和非結構化數據。2023年11月,小紅書發起遷雲項目--計劃一年內,把小紅書的數據湖搬上阿里雲。 較於過往業界體量最大的案例,小紅書本次遷移的數據體量更大。據介紹,小紅書的遷雲項目經歷了三個階段。項目組首先解決標準問題,然後根據標準進行治理;完成治理後,項目在今年5月正式進入雙跑階段,把數據拷貝到阿里雲上,兩邊同時跑數,驗證正確性與及時性;8月項目結束雙跑,進入割接階段。 11月,小紅書遷雲項目正式宣告結束。在零故障的情況下,遷移數據500PB,任務11萬,參與人數1500人,涉及部門40多個。項目涉及產品之多和數據體量之大均創下業界記錄。(jq)