过去的一周,中国跨境行业发生了一起最致命的突发事故。
头部跨境ERP企业领星的WMS仓库管理系统全面崩盘,6000多家海外仓、数以万计卖家的履约链路全线停摆,大量订单停滞积压,摆在电脑前的只有满屏的系统报错截图、卡单预警、平台发货超时警告和处罚提醒。
从大规模宕机到局部修复,再到故障碎片化反复,整个事故已经持续了整整一周。
在黑五旺季备货的关键时刻,被波及的卖家损失惨重。在跨境行业,一个日处理5到8条柜的中型海外仓,系统每停机一小时,光滞港费、卡车待时费和人工闲置就是2000美金起步,一天就是4.8万美金。
这一周里,领星官方三缄其口。从4号故障发生至今,海外仓、卖家迟迟没有等来一份完整的技术故障公告,只能在客服几个小时才零散回复几句的状态中,了解系统修复进度。
作为一家号称市占率第一、ERP付费客户超过70万家,海外仓系统服务超过6000个仓库、20000+名企业用户,累计融资超6亿元的公司,在如此重大的事件面前选择隐身消失的作风,令外界费解。
领星事故全复盘:跨境人心有余悸的一周
先来复盘一下,在这场看不见硝烟的宕机事故中,跨境人是如何度过了这动荡起伏、焦虑不安的一周。
11月4日:故障初现
22:00左右(美西时间06:00):小红书上有网友发帖,领星WMS仓库系统的订单开始同步不出来,系统登录出现卡顿,但当时以为只是网络不好导致的临时卡顿,还未引起大规模警觉。
11月5日:故障全面爆发与人工救火
00:00左右(美西时间08:00):随着美西仓库开始早班作业,系统故障问题全面爆发。
大量仓库反馈无法登录、PDA扫不了码、面单打不出、订单推不动,出库和打单功能大面积瘫痪。与此同时,德国站点、墨西哥站点也出现类似的情况。
01:00左右(美西时间09:00),一些海外仓人员尝试联系领星客服,但未得到及时回应。
与此同时,CMZ海外仓、欧之萌等多家海外仓开始启动人工应急预案。所有订单改成原始的人肉模式:启用备用系统通道、导出订单表格,让国内客服团队通宵对着表格人工核对,确认哪单发了、哪单没发,再一条条发消息通知大洋彼岸的仓库工人去货架上找货、手动打单,尽量避免大面积超时。
09:00-18:00(美西时间05:00-14:00):系统持续瘫痪、数据开始混乱。
随着国内上班时间到,部分海外仓终于收到了客服的回复消息:系统故障、还在持续修复,但未明确修复时间。
同时有海外仓老板发布视频透露,自己连续12个小时没睡,带着全员拿笔和本子手工记录库位和订单,用纸质拣货单和临时线下打单来兜底,效率直接砍半。
始料不及的是,故障还在继续升级。海外仓库反馈系统不仅卡,还出现了一些数据错乱:已经出库并发走的订单,突然重新跳回“待处理”状态,导致仓库面临重复扫码、重复打单的巨大风险。
此时有大量网友在小红书上发帖表示,“不要用领星WMS,昨天已经发货的订单在系统里消失了,库存也没减,都混到今天的订单里了。”
在一片混乱中,卖家开始在微信群和小红书上奔走相告:“暂时不要用领星了”。
很快,一些用户开始反馈在社交平台上吐槽系统故障的内容被限流或封号,疑似被“压热度”。另一边,领星在客户群里的回复内容非常有限,没有分级应急方案,也没有损失兜底说明。
到了傍晚,系统故障仍未解除。在卖家的消息轰炸下,大批海外仓继续连夜加班,靠人工拆单出库。有网友发文表示:“作为领星WMS最早一批付费客户,这次故障的处理速度和应对方案,让我们很失望。”
11月6日:数据回滚引发“重复发货”惊魂
这一天,系统故障依旧。有仓库反馈领星后台可能还在进行数据回滚或升级,导致早上大量仓库出现订单重发、单据重复叠加的问题。
此时海外仓内惊险的一幕接连上演——有仓库扫完码才发现重复打单,货物已经交给了FedEx的收货员,最后紧急拦截才避免了巨额重复发货损失。但还有大量的订单,因为美东和美中的仓库因为时差问题,在等国内客服回复时已经错过了拦截窗口。
眼看系统迟迟未修复、事态失控,海外仓开始集体发布对外公告,向卖家同步仓内异常和仓内应急措施。
心安海外仓宣布启动双系统冗余,开放易境通、极风作为备选;CMZ海外仓也再度发声,如发现订单重复出库或未上线,及时联系客服调取出库记录。
11月7日:持续瘫痪与领星“失联”
这一天系统依然没能完全恢复功能,部分网友表示:登录页面一直转圈,打单、出库、订单同步一直卡住。
此时的海外仓线上作业大面积停摆,订单积压严重。讯易、递七方等海外仓陆续发声,已经启动人工方式保障订单继续处理。
其中一家日均处理6000多笔订单的海外仓,将原本由系统批量完成的工作改为人工操作,国内客服负责整理订单、核对发货状态,再将订单分批传给海外仓,由工作人员逐笔拣货、打单和复核。
另一边,大量卖家的后台开始收到平台超时未发货的警告信息。
有卖家反馈,自己500多笔订单死死卡在仓库,系统就是导不出来。现在距离大促极近,亚马逊自发货的迟发率红线只有4%。几百笔订单的延迟,会导致店铺评分暴跌、权重下滑,在旺季辛辛苦苦攒下的流量和排名,因为这一周的卡单直接清零。
因为系统迟迟未完成修复,且官方毫无回应。求告无门的卖家愤怒地在网上发帖,控诉领星。另有卖家表示,“延误了这么多订单、单据又错了这么多,领星一个解决问题的人都没有。”
11月8日:部分恢复但余波未平
在社交平台上,不少卖家和仓库反馈系统虽然能登录了,但依然非常卡顿,导单还是经常失败。
同一天里,领星发布了《系统计划维护公告》:11/812:00–15:00(北京时间)停机维护。这只是一份例行维护通知,只字未提故障原因、影响范围、数据校验方式、赔付安排。
对于被架在火上烤了四天的海外仓和卖家而言,这份公告并不能熄灭他们的怒气。
随着大量卖家在网上的大量继续发帖吐槽领星故障事件,引发了官方媒体的关注。南方日报/南方+首发《跨境头部ERP发生系统故障,大量跨境卖家订单“全乱套”》,同日AMZ123、派代跨境、跨境者资讯等垂直号集中跟进。
11月9日-10日:小范围故障仍在,损失惨重
虽然领星对客户宣称系统已经全部恢复,但仍有个别卖家反馈数据错乱,已出库订单回流、单据重复叠加的问题依然存在。
一位网友发文表示称,“领星技术把之前的异常订单处理了,但是这两天系统中待复核未出库订单也不见了,而且WMS操作记录都没有。”
领星的一些客户,如CMZ海外仓仍继续启用人工应急预案,所有订单都要人工核查是否有漏发与重复发货,确认后再出库。
这是慌乱、动荡的一周,也是不安与失望的一周。目前许多海外仓和卖家还在进行“灾后重建”工作,但截至雷峰网发稿前,领星官方依然没有对整起故障事件进行全面说明。
这起大规模事故引发的连锁后果还在继续产生。眼下,一些海外仓客户开始着手向领星官方索赔,按照一单40元的索赔金额算,单是一家海外仓的索赔金额或许就能达到一、两千万。
领星宕机事件,暴露了哪些问题
这场突如其来的大面积系统崩盘,给整个海外仓行业上了沉重的一课,一些海外仓开始启用备用系统。但更值得深思的是,作为一家跨境头部ERP企业,在发生如此重大级别的故障事件后为何反应这么慢?
至少从目前梳理的内容来看,领星的第一慢是,事故发生后,官方表态、客户服务及风险通知的缺位。第二慢是,故障时间居然长达一周。
在全球软件行业里,没有任何一家企业敢打包票自家的系统不会崩。哪怕是头部互联网大厂、银行系统、云厂商等都遭遇过技术故障,客户在意的是出现故障后能在多少时间内修复好。
领星这一次的反应速度,远远超过了行业对技术故障修复时间的均值,这显然不是一家头部软件公司应有的水准。
一个新的问题接踵而来,领星发生了什么?
过去几年,领星受竞争对手激进的价格战影响,服务售价也开始大幅下降。在竞争压力下,领星进行了多元化的业务布局,以开拓更多收入来源。其业务矩阵包括领星ERP、海外仓管理系统星链、国际物流查询平台track123、广告精细化运营管理工具夜莺等等,但这些都是已经有巨头存在的市场,领星多线扩张的压力不小。
随着这两年整个跨境行业持续受到国际政策的冲击,领星的核心基本盘也开始受到影响。早前,跨境圈内就有消息流传,领星在进行人员优化以压缩成本,其策略是“加前端减后端”,即减少研发投入,加大销售拓客。
针对这次故障事件,行业内众说纷纭。有业内人士猜测,是PHP漏洞导致的。另外有说法认为,领星这两年持续裁员、裁掉了研发大动脉。
但更多人认为,裁员是一方面,另一方面或许是领星系统的“AI代码”含量太高,又没有在生产中反复经过调试,导致系统稳定性变差了,否则不至于修了一周都没彻底恢复。
实际上,外界对AI降本增效的担忧,是有例可循的。过去两年,裁员降本、用AI增效几乎已经成为软件行业的通用做法。诚如,硅谷科技软件大厂的亚马逊、谷歌、微软等都在加速引入AI。
不过,这也给整个软件行业带来了一些新问题。
今年3月,亚马逊一周爆发了4次最高级别Sev1级的严重系统故障。亚马逊网站和购物App出现大规模故障,持续时间接近6小时。大量用户无法完成商品结算、查看账户信息、查询商品价格……整个电商核心流程几乎停摆。
为此,亚马逊内部紧急召开了一场工程深度复盘会议,其中一个被反复提及的关键词是:AI辅助代码。
尽管在后来的公告中,亚马逊否认与裁员有关,并试图淡化AI的直接责任,但内部仍然决定采取新的工程措施,最核心的一条规则是:今后任何AI辅助生成的代码修改,都需要更高级别工程师审批。
换言之,AI出现之后,虽然软件开发速度已经大幅提升,但AI带来的潜在问题也在持续爆发:一个小Bug可能瞬间影响大规模系统,使得系统修复时间变得更长、事故影响范围更大。
给行业的一记警钟
领星故障的真实原因到底为何,目前尚无说法明显证实。
只是,对领星这样一家融资规模大、技术积累深的头部跨境服务商来说,核心出库功能出现大面积异常,将近一周后仍有客户反馈未完全恢复,这样的应急表现显然无法向此前信赖它的广大客户交代。
这不是一次偶发事件,或许也不是最后一次。但领星这次事件,恰恰也给其他SaaS服务商敲响了警钟,在AI时代别忘了“安全”这个底座。
当下,AI的能力在飙升,改变企业软件的潜力刚刚开始被释放,在这之下中国软件行业都正在经历一场前所未有的狂奔。
在这场狂奔中,企业也正在进入一个新的竞争维度:不只比谁跑得快,还要比谁跑得稳、数据守得住。谁能在AI提效的同时,守住数据、控住风险、建起可信系统,谁就能在下一轮洗牌中站稳。
AI跑得越快,安全的锚就要扎得越深。因为安全本身就是增长的底座。(雷峰网)