业界最大数据湖0故障迁上阿里云！数据量达500PB
发布时间：2024-12-28 11:27:17 作者：玩站小弟 
我要评论
我要评论11月6日消息，今天阿里云宣布，小红书技术团队近日完成了一项业界前所未有的壮举，将业界最大数据湖0故障迁移至阿里云。作为中国头部互联网公司之一，小红书月活用户已超过3亿，其数据湖存储了过去11年的所有
。
11月6日消息，业界今天阿里云宣布，最大障迁小红书技术团队近日完成了一项业界前所未有的数据上阿数据壮举，将业界最大数据湖0故障迁移至阿里云。湖故
作为中国头部互联网公司之一，云量达小红书月活用户已超过3亿，业界其数据湖存储了过去11年的最大障迁所有原始数据，包括结构化、数据上阿数据半结构化和非结构化数据。湖故
随着业务的云量达高速增长，小红书对在线处理数据的业界需求不断增加，同时离线处理所积累的最大障迁历史问题也提高了切换的难度。
2023年11月，数据上阿数据小红书共有1500人参与迁云项目——计划一年内，湖故把小红书的云量达数据湖搬上阿里云，彼时即便是业界体量最大的案例，也远小于小红书的本次迁移。
2024年5月，项目正式进入双跑阶段，作为切换到正式环境前最后的测试，是稳定性最大的保障。
在这一阶段，团队需要解决的问题数不胜数，每周平均新增500多个问题。
在阿里云团队的全力保障下，小红书技术团队顺利完成了割接，没有发生任何一个P2及以上故障。
2024年11月，小红书迁云项目正式宣告结束，在没有故障的情况下，迁移数据500PB，任务11万，参与人数1500人，涉及部门40多个。
相关文章
[一图流]Fly亚连带线过深，被WB三人抓到，亚连逼掉后羿闪后阵亡
[一图流]Fly亚连带线过深，被WB三人抓到，亚连逼掉后羿闪后阵亡由游戏电竞资讯发表在王者荣耀 kog12月27日讯 Fly亚连带线过深，被WB三人抓到，亚连逼掉后羿闪后阵亡来源： 12月27日讯 F2024-12-28
[流言板]76人圣诞大战伤病报告：恩比德可以出战，德拉蒙德出战成疑
[流言板]76人圣诞大战伤病报告：恩比德可以出战，德拉蒙德出战成疑由篮球资讯发表在篮球资讯 50212月25日讯 76人更新官方社媒，公布了明天对阵凯尔特人的伤病报告。可以出战：恩比德大概率出战：埃里2024-12-28
[流言板]网友偶遇刚出狱的前NBA球员德隆蒂-韦斯特，并与其合照由篮球资讯发表在篮球资讯 50212月05日讯 今日，INS上一位名为browardboy_flawda的网友，在大街上偶遇了刚出狱的前2024-12-28
意甲最新积分⚔️亚特兰大11连胜2分优势领跑！尤文终结连平仍第6
12月23日讯 本轮意甲，尤文2-1击败蒙扎，亚特兰大3-2绝杀恩波利，亚特兰大11连胜。最新积分榜情况如上图。亚特兰大目前40分领跑，那不勒斯38分第二，国米少赛2场34分第三，拉齐奥34分第四。国2024-12-28
第50000台小鹏MONA M03量产下线：当前每72秒可生产一台
12月27日消息，小鹏汽车官宣，今天迎来第五万台MONA M03量产下线，持续刷新新势力纯电下线速度纪录，目前可以做到72秒生产一台车，在新势力车企中算比较快的造车速度。小鹏MONA系列首车M03于今2024-12-28
12月26日消息，今晚，在2024理想AI Talk对话节目中，当主持人问及“什么时候可以100%用自动驾驶”时，理想CEO李想表示，给我三年的时间。他进一步解释道，它需要技术2024-12-28
最新评论