案例3 AIX cfgmgr扫描新磁盘,哐当一下,业务系统宕机

某金融用户报表业务系统,IBM P750*2 HDS VSP PowerHA环境,由于批处理IO时间较长,用户新购置了一台HDS闪存阵列解决目前存储性能瓶颈问题,新存储加电上架规划配置一番后,用户识别新存储准备数据迁移等一系列的工作,就在cfgmgr扫盘时候,没反应了,发现IBM P750分区宕掉了。收集日志厂商一轮分析过后。发现一个细节被大家忽略了,导致今天的后果。

欢迎大家竞猜交流讨论,本周内公布原因.

参与108

15同行回答

neilruleneilrule  系统运维工程师 , zhou
猜测是不是两边的存储都连接在了同一块HBA卡的两个口上面,然后HA没有停就扫描的,那样扫描链路会断一下的样子。显示全部

猜测是不是两边的存储都连接在了同一块HBA卡的两个口上面,

然后HA没有停就扫描的,那样扫描链路会断一下的样子。

收起
金融其它 · 2016-11-28
浏览12406
jakeyeaglelionjakeyeaglelion  其它 , kk
遇到过dml版本不兼容的情况显示全部

遇到过dml版本不兼容的情况

收起
互联网服务 · 2016-11-30
浏览12232
nihaoyaof1nihaoyaof1  交互工程师 , bbc
有个问题哈,如果是多路径软件兼容性导致的问题,那么我用cfgmgr -l fcsx 进行扫描,同样也会出现这种问题,只是指定具体的父设备进行扫描,减少了扫描到其它设备由于bug宕机的概率而已。那怎样才能彻底避免此种或者其他未知bug导致的风险了?...显示全部

有个问题哈,如果是多路径软件兼容性导致的问题,那么我用

cfgmgr -l fcsx 进行扫描,同样也会出现这种问题,只是指定具体的父设备进行扫描,减少了扫描到其它设备由于bug宕机的概率而已。那怎样才能彻底避免此种或者其他未知bug导致的风险了?

收起
IT咨询服务 · 2016-12-01
浏览11922
wangs0717wangs0717  系统工程师 , Teamsun
cfgmgr -l  指定设备,我觉得会比较安全。显示全部

cfgmgr -l  指定设备,我觉得会比较安全。

收起
IT咨询服务 · 2016-11-29
浏览12008
myciciymyciciy  IT顾问 , 某金融科技公司
大家说的都是出现此类的问题的点了。这个案例好在用户当初考虑到了安全起见扫盘的是备机,没有对业务产生影响。实际原因也让我们深思,有些事情不能想当然.大家继续交流,明天公布原因...显示全部

大家说的都是出现此类的问题的点了。这个案例好在用户当初考虑到了安全起见扫盘的是备机,没有对业务产生影响。实际原因也让我们深思,有些事情不能想当然.大家继续交流,明天公布原因

收起
银行 · 2016-11-29
浏览11774
mmsc5166mmsc5166  系统工程师 , 某金融公司信息技术中心
是不是cfgmgr扫描磁盘的时候,你新加的盘有点小多,导致扫描时间变长,而扫描设备会导致网络设备中断,最终触发导致HA发生切换,但又没切过去,系统guang~~~熄火了显示全部

是不是cfgmgr扫描磁盘的时候,你新加的盘有点小多,导致扫描时间变长,而扫描设备会导致网络设备中断,最终触发导致HA发生切换,但又没切过去,系统guang~~~熄火了

收起
金融其它 · 2016-11-29
浏览11950
dongfangxu87dongfangxu87  系统运维工程师 , BYT
磁盘锁的可能性比较大显示全部

磁盘锁的可能性比较大

收起
硬件生产 · 2016-11-29
浏览11950
永远在学习永远在学习  系统运维工程师 , 系统管理员
原来多路径也会 宕机,,醉了,,显示全部

原来多路径也会

宕机,,醉了,,收起
政府机关 · 2016-12-05
浏览6449
myciciymyciciy  IT顾问 , 某金融科技公司
由于当初用户使用的VSP 存储HDLM版本较老,不兼容新采购的HDS闪存。 导致了此次事件的发生.显示全部

由于当初用户使用的VSP 存储HDLM版本较老,不兼容新采购的HDS闪存。 导致了此次事件的发生.

收起
银行 · 2016-11-30
浏览12142
  • 这果断是HDS攻城狮的责任,新上设备一般都要support matrix查询一下。
    2016-12-04
flm20080704flm20080704  系统工程师 , XXXX
还在想dml是什么,原来是HDLM多路径兼容问题。一脸懵~显示全部

还在想dml是什么,原来是HDLM多路径兼容问题。一脸懵~

收起
IT其它 · 2016-11-30
浏览12278

提问者

myciciy
myciciy21035
IT顾问某金融科技公司
擅长领域: 服务器存储灾备

问题来自

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2016-11-28
  • 关注会员:29 人
  • 问题浏览:26516
  • 最近回答:2016-12-19
  • X社区推广