顺义一家三百人规模的制造兼贸易企业,机房用了六年没大动过。机柜里网线缠成死结,标签掉得只剩胶印;两台老核心交换机只剩一台带电,另一台早成了摆件;UPS 电池鼓包,市电一晃就报警。老板下了决心:趁周六一天,机柜、UPS、核心交换机全换。真到盘点才发现,仓库发运系统和财务共享盘周六上午照常跑单,供应商对账接口也在走。这一刀切下去,半天停摆谁也兜不住。
改造本身不难,难的是不停业。
犹豫的项目经理,最容易赌一把通宵。
赌输了,背锅的是 IT 部门。我们接手这类项目时,头一句话先泼冷水:不停业改造靠的不是工程师手速快,而是把一台大手术拆成四个能随时撤回的小步骤。能分四次、每次半小时切完的活,犯不上赌一次通宵全换。下面按北京中型企业的真实割接节奏,把这四步摊开讲,每步带核验动作和回退判据。
先把家底盘成双台账,再谈动哪根线
第一步不是买设备,是摸底。机柜里每根跳线的对端设备、所属 VLAN、华为 USG 防火墙的接口归属、虚拟化宿主机网口的对应关系,逐条登记成纸质加电子双台账。别嫌那点儿活琐碎:割接当夜灯一关、人一急,全靠这张纸说话。多少次半夜割接卡壳,不是设备不行,是没人说得清那根线通到哪。台账不清就动线,出了故障只能抓瞎,救都没处下手。
标签上省的事,日后都要加倍还。
摸底同期,在旧机柜旁边立起新机柜,或腾出空 U 位,把新核心交换机、新 UPS 和双路 PDU 提前上架加电烤机 48 小时。烤机不是走过场:新设备头两天的故障率远高于稳定期,让它空转着暴露毛病,比带业务时暴露强得多。旁路双活的位置也在这时定下来,新核心与旧核心之间预先拉好运维网,为后面的灰度切换搭好桥。
核心链路灰度切换:先切测试网段,再碰 ERP
第二阶段动真格的,但讲究先易后难。头一批切非核心办公区和测试网段,把网关指到新核心上,然后核三样东西:路由表条目齐全、华为 USG 防火墙策略命中计数正常、日志里没有丢包记录。三样都干净,观察半小时,再动第二批。
第二批才是硬骨头:ERP、共享存储和跨分支链路。
每切一组,留 15 分钟业务冒烟观察期。所谓冒烟,就是让仓库真打一张发运单、财务真登一次共享盘,用户自己点头了才算过。这一步千万别拿「接口灯是绿的」糊弄自己,灯绿只代表物理层通,业务通不通要用户说了算。跨分支的割接窗口里,羽信安 SD-WAN 隧道自动重连保活,走 sTrust 远程接入的同事最多在切换瞬间顿一下,分支那边不需要人守着,总部盯住汇聚口流量回稳即可。
虚拟机热迁移:业务不停,机器搬家
网络换完轮到计算层。借助虚拟化集群的在线迁移,把业务虚拟机逐台从旧宿主机挪到已接新核心的宿主机上,全程不停机。迁移顺序有讲究:先挪边缘系统,再挪 ERP 和数据库这类核心,每挪一台确认存储读写与网络延迟正常。旧宿主机彻底空载之后才允许下电,千万别图快提前拔电,省下的那几分钟毫无意义。宿主机维护窗口怎么排、补丁怎么错峰,我们在虚拟化宿主机补丁窗口一篇里写过细节,可以对照着排期。
热迁移的实质,是把停机窗口摊薄到秒级。
回退点写进方案里,别靠现场胆量
每次割接前必须写死超时回退点:比如切完 20 分钟关键业务仍不通,直接拔回原口,回退动作十分钟内完成,绝不在凌晨三点的机房里现场硬调。回退不丢人,硬扛出了事才是真丢人。所有涉及网络硬件运维与变更管理的环节,我们按 ISO 20000(注册号 03826IT00184R001,覆盖计算机应用软件开发与网络硬件运维的服务管理)落变更单与回滚记录:改了什么、为什么改、怎么退,白纸黑字。边界也要说清:这份证背书的是运维与开发的服务流程管理,机房土建、装修那类施工活不在覆盖范围里,接项目时别混着承诺。
干完靠口头回忆的账,三个月后谁都对不上。
这类不停业改造,考的是服务商的综合能力:既要摸得动机房与网络硬件,又要碰得了虚拟化和分支组网。中型企业选整包服务商该核哪些能力项,我们在中型企业 IT 外包服务范围里列过清单,交付形态与计费口径可看IT 运维外包服务页面说明。
四个割接阶段对照
| 割接阶段 | 提前准备与核验动作 | 业务影响窗口 | 触发回退的红线判据 |
|---|---|---|---|
| 资产摸底与旁路搭建 | 跳线对端、VLAN、防火墙接口逐条登记双台账;新核心、新 UPS 上架加电烤机 48 小时 | 零(新设备仅旁挂空转) | 烤机期反复重启或报错,先换货再谈切换 |
| 核心链路灰度切换 | 先切办公与测试网段,核路由表、策略命中计数与丢包日志,再切 ERP 与共享存储 | 每批 15~30 分钟冒烟观察 | 切换后 20 分钟关键业务不通,拔回原口 |
| 虚拟机热迁移 | 按先边缘后核心逐台在线迁移,每台确认存储读写与延迟 | 单台秒级顿挫 | 迁移后存储读写超时,该台迁回原宿主机 |
| 收尾下电与复盘 | 旧设备确认空载后下电拆线,台账更新,变更单与回滚记录归档 | 零 | 新核心 72 小时内反复告警,评估回切窗口 |
这张表建议直接抄进割接方案的封面,把签字栏放在最后一列旁边:红线判据一触发就回退,谁签字谁负责盯到底。留着旧设备多挂一周,看着新核心跑稳了再拆,这点耐心值得有。
常见问题
问:周六割接听着已经稳妥了,为什么还要分四个阶段,一个周末连切两阶段不行吗?
答:行不行取决于回退条件是否随时成立。两阶段连切的前提是新旧核心的旁路双活一直健在,切坏随时拔回去。一旦旧设备下了电拆了线,就没有退路了。所以拆线必须放在最后一个阶段,之前每一阶段都要实际验证过回退通道真的可用,而不是方案里写了一句「可回退」。
问:烤机 48 小时会不会拖工期?
答:不会,摸底和烤机是并行的。烤机那两天正好做台账、打标、定切换脚本,实际工期一点没多花。真拖工期的是跳过烤机的项目:新交换机带着业务第二天死机,那种停摆损失比两天工期贵得多。
问:UPS 和核心交换机一起换,供电怎么保?
答:新 UPS 先带着新设备独立运行,旧 UPS 扛旧负载,两边各自稳定后,再把负载逐路倒换到双路 PDU 上。倒换期间每一路都留一路旧供电兜底,全部稳定观察几天之后,才断旧 UPS。鼓包电池拆除要走专门回收,别当普通垃圾扔。
问:我们没有专职 IT,这种改造怎么盯?
答:小团队盯三样就够:每阶段开始前台账有没有签字、冒烟观察是不是真实业务动作、回退判据有没有写死。盯住这三样,外包团队糊弄不了你;盯不住,方案写得再漂亮也白搭。
关于作者
北京思文力得科贸有限公司,2011 年成立,国家高新技术企业,做企业 IT 运维外包、网络设备整包、弱电与异地组网,自研羽信安 SD-WAN 异地组网与 sTrust 零信任。持有 ISO 9001、ISO 20000 和《增值电信业务经营许可证》(编号 B1-20252821)。官网:www.siwenlide.com,咨询电话 400-686-2011。
割接提醒:签字排期之前,先问服务商三个问题:回退点怎么定、冒烟观察做多久、变更单谁归档。三个答案都具体,再谈价钱与档期;答不上来的,报价再低也别把周六的机房交给他们。改造费用按实际方案评估,把台账、阶段表和回退判据放进合同附件,比任何口头承诺都值钱。
