洋米助力某国际化电商物流分拣系统7*24小时不间断运行-维修篇(三)
Part.1公司背景: 该物流公司成立于2013年,项目总投资10.4亿元,占地面积492亩,建筑总面积30.9万平方米。该物流公司建有自己的物流园区,该物流园是华东区域最大的物流园区之一,也是华东区域自动化程度最高、标准化建设最好、生产效率最高的示范园区之一。
Part.2项目背景: 昆山的客户现场投入使用的自动分拣系统分拣能力高达4万件/小时,整个分拣中心日分拣能力超过100万件,超过人工分拣效率的10倍,且准确率达到99.99%,如此关键的系统,必须要具有操作简单,高可靠性的措施来支持,该物流公司在建设期间就选用了ftServer高可用容错服务器的解决方案,不仅保证了数据“零丢失”,还保证了自动分拣系统在发生任何故障时,业务系统的无缝切换(自动),在业务不断的同时,最大限度的保障业务系统的持续稳定运行。
Part.3挑战: 客户使用的ftServer在今年的七月份出现了故障,但没有及时关注,直到十二月份与我们的沟通中才了解到事情的严重性,但由于时间过长,导致故障难以溯源,ftServer长期保持单机状态对业务的危险性极大,所以客户要求我们在不影响业务的情况下,对故障原因进行排查并迅速解决此次故障。
众所周知,硬件级服务器容错最大的挑战是,如何确保进程和线程的精确同步,即确保冗余系统的两个节点上在完全相同的时间发生完全相同的事情。 fServer容错服务器架构的创新之处在于,在其内部有两个相同的客户可更换单元(CRU),为确保两个CRU之间的进程和线程的精确同步,Stratus专门设计了专用FPGA电路,提供冗余的电源供给、风扇和磁盘,对核心系统组件包括母板、处理器、内存、I/O总线和I/O适配器进行保护。同时建立同步(lockstep)体系架构,保持多CPU/内存单元在精确的同步状态,系统可以在任何CPU/内存单元发生错误的情况下不丢失数据或状态,也不需产生中断进行错误处理,即使在故障出现也可保证连续处理的冗余部件来消除单点故障。
为保证业务数据的复制和同步, ftServer容错服务器内部所有关键PCI适配器也是冗余的,内部磁盘存储通过两条独立的存储I总线连接。对任何逻辑I/O操作,包括内部和外部存储操作,都是多路径可行的。任何I/O操作故障将引发选择另一条路径作操作重试,确保I/O操作的完成。通过独特的冗余现场可编程门阵列、数据路径和同步固件,容错服务器即使硬件组件出现故障,也能够提供确保持续可用性所需的处理器同步、数据复制和逻辑。为了便于维修,保障业务不间断运行,ftServer容错服务器支持热插拔更换故障硬件,所有的业务数据自动同步。
Part.4
维护过程:
客户在提出了故障问题后,洋米工程师第一时间找到客户现场的工程师提取了日志进行分析并提出会在近期赶往现场解决问题,洋米工程师在现场排查过后,发现该服务器的cpu故障灯亮起,同时ftServer也没有在容错状态。
通过与现场工程师的沟通以及现场环境的排查,初步判断故障为偶发性干扰造成。
确定问题方向后,我们开始尝试通过给主板放电的方式来解决此次故障问题。
服务器在经过放电重启之后恢复了正常容错状态,问题得到解决,为了客户现场ftServer没有其他方面的隐患,由洋米的工程师提取出ftServer容错服务器的日志来进行判断。
下面是具体维护过程中的具体操作步骤(30分钟)
1.将目前状态与网线接口进行记录(2分钟)
2.将ftServer下片服务器断掉电源(2分钟)
3.在等待4分钟作用将电源重新插入(6分钟)
4.等待下片服务器启动后自动加入(5分钟)
5.确认正常后进行日志提取(15分钟)
Part.5客户收益: 昆山此物流中心采用洋米的ftServer容错服务器解决方案,保证了系统的可靠性及稳定性,保证了业务的7*24的正常运行。
对于这种有0秒切换要求的不停机应用场景,ftServer容错服务器绝对是正确的选择,它是一种高可靠的冗余服务器。它是双模块冗余硬件级容错服务器,服务器采用英特尔 至强可扩展处理器,通过CPU芯片的LockStep锁步技术和容错同步设计,保障CPU、芯片组、总线、内存、硬盘、PCI设备、网络、风扇等硬件部件全冗余和实时数据同步,提供超过99.999%的可用性,可实现瞬间切换故障点。故障切换时客户端不需要重新连接,当前任务不需要重新开始;机器具有自监控、自诊断、自告警系统,硬件采用模块化设计,热插拔设计,便于维护和管理,使用人员不需要专门的维护技术基础。
如何咨询以及购买
对Stratus 方案感兴趣可以随时联系上海洋米信息科技有限公司(Stratus中国区优秀战略合作伙伴)
咨询热线:400 886 3606
洋米官网:https://www.data-aware.com
我们可以为您提供基于Stratus适合不同场景的连续高可用冗余解决方案(包括POC测试认证,售前咨询以及销售和售后支持技术服务)。
感知数据 创造价值