恢复目标: 借用一部电影的名称<一个都不能少>!
已上飞机包裹的发货数据每个都能让大家找回来.
已抵达仓库的包裹一个不拉的给大家录入进去.除了速度慢一点(需纯手工一个个录入),一个不丢都会帮大家弄好.

----

恢复进度:

2月15日:
8:30
收到紧急通知

10:00
设计好恢复方案及步骤

22:30
收集了150个左右在库包裹的数据,等待系统恢复上线

2月16日:

9:00

后台恢复,已恢复数据的包裹可以正常打单发货了.

14:30

前台恢复,大家可以正常下单发货了.重新下单的包裹已经没有任何问题,这些我们都可以直接扫描出库.

23:00

已到库的包裹我们开始逐个录入,16日恢复了360多个包裹的数据.

2月17日:

10:00

2月10日-12日发货的原始数据已经找到了,我们现在开始写程序来批处理这些数据,预计18日就能把上周已发货的数据,都恢复出来.

16:00

今日DHL送来的包裹里面,需手动录入数据的是484个,按先进先出的原则放周六处理,16日下单的包裹180个已全部正常出单发货.

17:00

10-12日DHL以及Bpost渠道出库的包裹,18日开工后就验证一下数据的完整性,然后国内18日24点前就肯定能恢复出来给大家了.PostNL渠道出库的包裹,由于原始数据未含有所有发件人信息(企业客户的有,可直接恢复),私人客户的PostNL已发货包裹,需要大家准备好收件人名,邮编,以及电话,如果是上周已经发货的,你搜索到了就可以把自己的包裹数据领回去了.

23:00

17日手动录入了500-600个包裹的地址信息,预计积压的包裹本周日处理完.

2月18日:

10:00

今日DHL送了1546个包裹过来,其中1297个都是正常包裹,246个16日之前的包裹,部分在2月6日之前的也处理了.

17:00

10-12日已发货包裹,DHL和Bpost的都已恢复,其中只有部分找不到发件人是谁,进入了待认领包裹.

PostNL的企业客户的都正常恢复了.私人客户的大约3000个包裹,进入了待认领区.

新加了C2页面,大家只需要输入 收件人名+邮编+手机号 即可领回自己的包裹.暂时新领回的包裹还没有发货单号,这个晚上22点我再上传一次,今晚认领的就都有单号了.明天再来解决一认领就出单号的问题.

19:00

今日一共发货2056个包裹,相当于处理了700+的积压问题包裹.

清点了剩下的积压包裹区的数量,预计:

周五 能把周二抵达的全部整理完,并且整理好部分周三入库的包裹.

周六 再来把周三,周四,周五入库的问题包裹整理完.

2月19日:

23:00

今日DHL共送来了1548个包裹,大约100个积压包裹,1400个正常包裹.正常包裹里面还剩大概200-300没有处理完,主要是集中火力去处理积压包裹了,总共发货1925个包裹.

今天重新录入了大约700-800个包裹,争取周六都录入完,把第一遍的过滤全部筛完.

2月20日:

18:45

通过全体员工+紧急来帮忙的兄弟姐妹们的努力下,今天把最后剩下的1000个左右积压的包裹地址信息都补录入完了.第一遍的筛选全部结束,还剩下一些我们找不到发件人是谁的包裹,这部分我们会再过一遍,然后开始电话联系发件人.如果实在是联系不上,我们再来想办法.

还请大家检查一下补录入的地址:周五处理的包裹还没有拉走,如果有错误包裹还有可能找出来.万一碰上地址有错误的,比如完全填错了收件人,还请立刻通知我们,我们好来修改.

2月21日:

因为这几天服务器上加了好多新程序,没来得及验证和调优,所以今天我们会有多次的服务器重启,来优化内存的分配,连接的分配等,调优好后下周程序运行起来就会顺畅很多.

2月22:

今天仓库Team超级给力,周六周一送达的包裹(周一的包裹可能有部分周二送达),包括上周五周六补录入的包裹,全部处理完了.一共发货3249个包裹.

上周积压下来的绝大部分补录入的都已经发货,还剩下了5车大约125个包裹无法扫描出单号的需要今天开始手动处理贴单发货.补录入过程中还剩3车大约75个包裹无法找到发件人的客户号,这部分我们安排先用我们自己的客户号来补录入先发货,然后再通过待认领来分配给大家.这项工作从23日开始进行.

上周五比利时那边的包裹因为卡车预订的位子不够了,他们只拉走了10个托盘的包裹,所以还剩下了25个托盘的包裹全部是今天拉走的,周二就会被比利时接收扫描了.荷兰邮政那边周五拉了33个托盘回去,周一把积压的托盘也全部拉走了,一共发了2卡车78个托盘.等周二就都会被PostNL签收扫描了.

因为位子全部留给了上周五积压下来的包裹,所以周一处理完的包裹只能周二发往比利时和荷兰了.我们会尽量保证先进先出的FIFO来发货的.基本上周二再发3辆满卡车就能全部都发出去了.

祝大家元宵节快乐!

2月23日:

10-12日已发货包裹的发货数据也都已经恢复,现在大家一恢复就能看到发货单号了.3000多包裹已经认领了400+,还余下2600+等待认领.

大家的页面在认领的时候因为需要做到信息保护,所以查询条件比较严苛.如果手上还有留有当初发货的中文境内单的PDF的话,也可以通过工单把原单据文件给我们,由我们从后台来比对信息分配给您.

补录入的包裹部分会进入您朋友的账户,因为我们补录入的时候是通过发件人的地址和电话信息来查找对应的发件人的,如果您是A,曾今通过朋友B发过包裹,即B的发件人清单中也有您的发件地址信息,那么我们在恢复的时候就会看到AB 2个客户账号都有A的发货地址,那么在恢复的时候就有可能会恢复到B的B2页面中去,因为我们不知道AB 哪个是您的账户,哪个是您朋友的账户.这部分的包裹可以开工单给我们,我们来帮忙更正回来.

17:00

所有积压的托盘, 都已经发往了荷兰和比利时.

今日发货1844个,有部分到库包裹未处理完,有一定的积压,24日上午能处理完.

23:00

bp的服务器处理信息延迟的问题是22日晚上发生的.因此22日发货的bp包裹,大家是23日晚上才看到易优已发货和单号.

23日发货的,如果按照他们的速度,应该是24日晚上才能看到易优已发货.这部分我们已经在催bp的技术人员快点修复了.

这会导致一个情况,包裹会先比收件信息抵达比利时,包裹会在比利时显示Parcel is Rejected.这并不代表包裹被退回,只是包裹到的比信息早,因此不会有什么问题,他们的服务器收到信息后,就会再次处理这些包裹,然后就会自动上飞机了.

bpost渠道的10-12日的包裹,发货状态24日凌晨我们做了更新.部分已经正常为易优已发货, 部分还是eu处理中.处理中的在等bp的信息反馈,他们的服务器24日反馈信息回来后就正常了.

15-23日的包裹,其中状态有问题的,我们也都已处理完毕.部分已正常,部分在等bp的服务器返回信息.

2月24日:

12:30

早上上班就和bp的技术人员联系,告知他们bp服务器的问题,12:30我们收到了23日上传的包裹的信息回执,目前系统内bp包裹的发货状态就已经正常了.

比信息早到他们那里的包裹,状态为Rejected的包裹(很多都是23日15点之后的,因为信息他们24日12点系统才处理好),我也请他们的Operations部门尽快处理了.估计明天就能正常.

18:30

周一扫描无法出单的8车包裹,我们今天也抢着录入完了.今晚或者明早就都能扫描处理了.国内客服也在统计这几天大家需要查的包裹,她们核对好状态后,会把还有问题的包裹号汇报给德国我们这边,25日就来详细查找这些包裹.

今天大家还是在优先处理问题包裹,所以今天新到仓库的包裹只处理了大概一半.

2月26日:

今日PostNL的服务器发生了问题,整个荷兰使用他们的打单软件的商家都无法打单发货,这个问题从22日开始就有了,但不是整体一张单子都无法打,周一到周四只是15分钟断一次,重连即可.周五是整个断连.联系了他们的技术人员,他们周五晚上18点左右才帮我们修复好.因此周四晚上送到的一点点和周五送达的PostNL的包裹,就都只是提前做了称重入库的处理,等待周一扫描贴单然后就可以发走了.目前就都是在B4页面,显示"易优处理中",包裹还在库.周五送抵的DHL和bpost的包裹都已经正常发走.

Bpost的包裹,打单是正常的,发货也是正常的.但是我们每晚有一个上传发货清单和他们回传发货回执的一个过程.25日的发货回执,bpost一直没有回传给我们.周六和周日我们也都实验了好多次,到27日早上还是没好.因此这批包裹也是还在B4中,显示"易优处理中",但包裹实际上周五已运往比利时,这个和周五的PostNL包裹有一些区别.看看他们的技术人员什么时间能修复这个问题吧.

2月27日:

我们把超重和未到账还有截停区所有2月15日的包裹都登记整理一遍,这是最后一批可能有问题的包裹,29日全部处理掉,基本上这次的积压问题就都解决了.这里面超重的,我们就都直接采取特殊方法处理了,无需客户补款.

2月29日:

到这个周一,我们终于把所有的问题包裹都处理好发走了,包括2月15日之前的所有超重包裹,我们也都直接过掉发走了.

由于2月26日PostNL的系统完全无法出单,因此29日我们优先处理了周五积压下来的PNL包裹,导致周六和周一送达的包裹,我们只处理了一部分.这周包裹会有一点点延后,都需要到第二天中午才能把前一天的全部处理好.预计到周五的时候就能全清了.

3月4日:

如29日所说,我们到今天就把从2月26日到3月4日抵达仓库的所有包裹全部处理完毕,并且已经发往3个邮政的处理中心,全清!

感谢大家对易优的信任,在困难的问题时期还能这样继续支持我们,本周eu共处理发货13000多个包裹,全清的感觉真爽啊! 这3周压力确实大,一边要恢复之前的包裹,一边还要处理新到的包裹,还又连着碰上bpost的服务器和postnl的服务器的问题.给大家看看全清的仓库有多清爽 :)

2月份的理赔统计,也已经整理完毕,周二晚上我们会发布出来.但是这次的退款需要晚一点执行.因为负责退款的人从3月7日到3月16日休假,3月17日才回来.这点请大家耐心等等哈.

这次的事故,我们肯定会补偿大家的,等积分系统测试好上线后,大概3月底,我们就会把具体的方案公布出来了.所有有问题的包裹,订单号都是CW开头的,都有记录,所以到时候一次性补偿大家哈.

-----

突发情况描述:

大家新年好,

非常抱歉,一开年就出了个大问题. 年后第一天15日,因为在系统升级新功能的过程中操作服务器时输入错了一行命令,导致系统死机,然后只能被动重装系统才能恢复.连备份和做镜像都来不及了.

上次备份是16年2月6日中文12点,因此用户和包裹数据都只能恢复到这个时间点.2月6日-2月15日下单的包裹地址和详情数据全部丢失.

事发突然,所以从15日开始我们就紧急着手重构系统和数据库,然后16年2月16日13点30,终于把系统重装并测试好了.

因此从16日开始新下的包裹单不会有任何问题,一切照旧.

如果是GJ160205之前编号的包裹,数据也没有任何问题,我们正常操作就好了.

编号在GJ160206002279 - GJ160215xxxxxx的包裹分3种情况来处理:

1) 包裹在您手上还未发货的,

推荐重新填单,然后提交之前的付款凭证我们重新出单给您,这样子贴了之后发货数据会更完善.我们会记录好所有数据,需要之后退款的,我们也会算好账目后给大家安排退款.

2) 包裹已经发出来的,无论是否已经抵达EU仓库

我们会全部重新录入一遍所有的地址和物品数据.处理速度大概一天300-400个包裹,争取这周把在库积压的包裹处理完.好在上周过年包裹比平时少了很多,而且很多10,11,12日也都发走了.

3) 包裹在10,11,12日已经从EU发走了的,

如果您15日之前没有记录发货单号的,我们这周也会定好方案后逐步开始帮大家恢复这些数据.如果您之前已经记录好了单号的,国内查询和签收都不会有问题.

4) 2月6日至2月15日新注册的客户,
现在因为数据丢失,无法登陆系统,还请重新注册一个帐号,然后重新新建一个包裹,但是不用付款.只要发件人的地址和之前的一样,我们就能从在库包裹上您上次填写的发件人中找到您,然后把数据补录入给您.

经过此次突发问题的深刻的经验教训,我们准备在IT方面加大投入,做好每天的自动备份,今天就会去把这个搞好,等这次新功能测试,上线,运行稳定后,再来安排直接做热备,所有数据同时储存在两个不同的数据库当中.增强稳定性.

这周需要德国处理的工单和售后问题会延后到下周再去处理,集中人力把在库和在途包裹处理完,谢谢大家的理解,我们会抓紧时间来尽快恢复数据的.

再次对这次问题给大家增加的麻烦道歉,等这次事情都处理完毕后,我们会想办法给这次所有涉事包裹的客户一个补偿方案的.