hp rp 7420 +EVA3000 ,硬盘丢失！！！！

Question

本帖最后由 reik_y 于 2011-03-19 23:01 编辑

hp  rp 7420 +EVA3000 ,硬盘丢失！！！！ioscan 显示硬盘驱动正常，

是两台rp7420的机器，跑的MC/SG集群，每台机器都是两块光纤卡双链路连到两台HP SAN交换机，存储是EVA3000也是双控制器双链路连接到莲台SAN交换机，现在是1号机的其中一块光纤卡有问题题，指示灯不亮，集群上的PKG包切换2号机上，应该是1号机上的存储硬盘丢失而导致集群切换的。现在是ioscan看到的状态时CLAIMED的，为什么ioscan -fnCdisk发现不了存储的上硬盘。PKG在2号机上的运行正常，1号机与2号机对存储的硬盘是共享主备的。

Class       I  H/W Path       Driver    S/W State   H/W Type     Description
=============================================================================
root        0                 root      CLAIMED     BUS_NEXUS   
cell        0  1              cell      CLAIMED     BUS_NEXUS   
ioa         0  1/0            sba       CLAIMED     BUS_NEXUS    System Bus Adapter (805)
ba          0  1/0/0          lba       CLAIMED     BUS_NEXUS    Local PCI Bus Adapter (782)
tty         0  1/0/0/0/0      asio0     CLAIMED     INTERFACE    PCI SimpleComm (103c1290)
tty         1  1/0/0/0/1      asio0     CLAIMED     INTERFACE    PCI Serial (103c104
ext_bus     0  1/0/0/3/0      c8xx      CLAIMED     INTERFACE    SCSI C1010 Ultra160 Wide LVD A6793-60001
target      0  1/0/0/3/0.6    tgt       CLAIMED     DEVICE      
disk        0  1/0/0/3/0.6.0  sdisk     CLAIMED     DEVICE       HP 36.4GMAU3036NC
target      1  1/0/0/3/0.7    tgt       CLAIMED     DEVICE      
ctl         0  1/0/0/3/0.7.0  sctl      CLAIMED     DEVICE       Initiator
ext_bus     1  1/0/0/3/1      c8xx      CLAIMED     INTERFACE    SCSI C1010 Ultra Wide Single-Ended A6793-60001
target      2  1/0/0/3/1.2    tgt       CLAIMED     DEVICE      
disk        1  1/0/0/3/1.2.0  sdisk     CLAIMED     DEVICE       _NEC    DVD+RW ND-2100AD
target      3  1/0/0/3/1.7    tgt       CLAIMED     DEVICE      
ctl         1  1/0/0/3/1.7.0  sctl      CLAIMED     DEVICE       Initiator
ba          1  1/0/1          lba       CLAIMED     BUS_NEXUS    Local PCI-X Bus Adapter (783)
ba          2  1/0/1/1/0      PCItoPCI  CLAIMED     BUS_NEXUS    PCItoPCI Bridge
ext_bus     2  1/0/1/1/0/1/0  c8xx      CLAIMED     INTERFACE    SCSI C1010 Ultra160 Wide LVD
target      4  1/0/1/1/0/1/0.7          tgt       CLAIMED     DEVICE      
ctl         2  1/0/1/1/0/1/0.7.0        sctl      CLAIMED     DEVICE       Initiator
ext_bus     3  1/0/1/1/0/1/1  c8xx      CLAIMED     INTERFACE    SCSI C1010 Ultra160 Wide LVD
target      5  1/0/1/1/0/1/1.6          tgt       CLAIMED     DEVICE      
disk        2  1/0/1/1/0/1/1.6.0        sdisk     CLAIMED     DEVICE       HP 36.4GMAU3036NC
target      6  1/0/1/1/0/1/1.7          tgt       CLAIMED     DEVICE      
ctl         3  1/0/1/1/0/1/1.7.0        sctl      CLAIMED     DEVICE       Initiator
lan         0  1/0/1/1/0/4/0  igelan    CLAIMED     INTERFACE    HP A6794-60001 PCI 1000Base-T
ba          3  1/0/2          lba       CLAIMED     BUS_NEXUS    Local PCI-X Bus Adapter (783)
fc          0  1/0/2/1/0      td        CLAIMED     INTERFACE    HP Tachyon XL2 Fibre Channel Mass Storage Adapter
ba          4  1/0/4          lba       CLAIMED     BUS_NEXUS    Local PCI-X Bus Adapter (783)
fc          1  1/0/4/1/0      td        CLAIMED     INTERFACE    HP Tachyon XL2 Fibre Channel Mass Storage Adapter
fcp         1  1/0/4/1/0.1    fcp       CLAIMED     INTERFACE    FCP Domain
ext_bus     8  1/0/4/1/0.1.1.0.0        fcparray  CLAIMED     INTERFACE    FCP Array Interface
target      7  1/0/4/1/0.1.1.0.0.0      tgt       CLAIMED     DEVICE      
ctl         8  1/0/4/1/0.1.1.0.0.0.0    sctl      CLAIMED     DEVICE       HP      HSV100
target      8  1/0/4/1/0.1.1.0.0.1      tgt       CLAIMED     DEVICE      
ctl        30  1/0/4/1/0.1.1.0.0.1.0    sctl      CLAIMED     DEVICE       HP      HSV100
target      9  1/0/4/1/0.1.1.0.0.2      tgt       CLAIMED     DEVICE      
ctl        31  1/0/4/1/0.1.1.0.0.2.0    sctl      CLAIMED     DEVICE       HP      HSV100
target     10  1/0/4/1/0.1.1.0.0.3      tgt       CLAIMED     DEVICE      
ctl        32  1/0/4/1/0.1.1.0.0.3.0    sctl      CLAIMED     DEVICE       HP      HSV100
target     11  1/0/4/1/0.1.1.0.0.4      tgt       CLAIMED     DEVICE      
ctl        33  1/0/4/1/0.1.1.0.0.4.0    sctl      CLAIMED     DEVICE       HP      HSV100
target     12  1/0/4/1/0.1.1.0.0.5      tgt       CLAIMED     DEVICE      
ctl        34  1/0/4/1/0.1.1.0.0.5.0    sctl      CLAIMED     DEVICE       HP      HSV100
target     13  1/0/4/1/0.1.1.0.0.6      tgt       CLAIMED     DEVICE      
ctl        35  1/0/4/1/0.1.1.0.0.6.0    sctl      CLAIMED     DEVICE       HP      HSV100
target     14  1/0/4/1/0.1.1.0.0.7      tgt       CLAIMED     DEVICE      
ctl        36  1/0/4/1/0.1.1.0.0.7.0    sctl      CLAIMED     DEVICE       HP      HSV100
target     15  1/0/4/1/0.1.1.0.0.8      tgt       CLAIMED     DEVICE      
ctl        37  1/0/4/1/0.1.1.0.0.8.0    sctl      CLAIMED     DEVICE       HP      HSV100
target     16  1/0/4/1/0.1.1.0.0.9      tgt       CLAIMED     DEVICE      
ctl        38  1/0/4/1/0.1.1.0.0.9.0    sctl      CLAIMED     DEVICE       HP      HSV100
target     17  1/0/4/1/0.1.1.0.0.10     tgt       CLAIMED     DEVICE      
ctl        39  1/0/4/1/0.1.1.0.0.10.0   sctl      CLAIMED     DEVICE       HP      HSV100
target     18  1/0/4/1/0.1.1.0.0.11     tgt       CLAIMED     DEVICE      
ctl        40  1/0/4/1/0.1.1.0.0.11.0   sctl      CLAIMED     DEVICE       HP      HSV100
target     19  1/0/4/1/0.1.1.0.0.12     tgt       CLAIMED     DEVICE      
ctl        41  1/0/4/1/0.1.1.0.0.12.0   sctl      CLAIMED     DEVICE       HP      HSV100
target     20  1/0/4/1/0.1.1.0.0.13     tgt       CLAIMED     DEVICE      
ctl        42  1/0/4/1/0.1.1.0.0.13.0   sctl      CLAIMED     DEVICE       HP      HSV100
target     21  1/0/4/1/0.1.1.0.0.14     tgt       CLAIMED     DEVICE      
ctl        43  1/0/4/1/0.1.1.0.0.14.0   sctl      CLAIMED     DEVICE       HP      HSV100
target     22  1/0/4/1/0.1.1.0.0.15     tgt       CLAIMED     DEVICE      
ctl        44  1/0/4/1/0.1.1.0.0.15.0   sctl      CLAIMED     DEVICE       HP      HSV100
ext_bus     9  1/0/4/1/0.1.1.255.0      fcpdev    CLAIMED     INTERFACE    FCP Device Interface
target     23  1/0/4/1/0.1.1.255.0.0    tgt       CLAIMED     DEVICE      
ctl         9  1/0/4/1/0.1.1.255.0.0.0  sctl      CLAIMED     DEVICE       HP      HSV100
ext_bus    10  1/0/4/1/0.1.2.0.0        fcparray  CLAIMED     INTERFACE    FCP Array Interface
target     24  1/0/4/1/0.1.2.0.0.0      tgt       CLAIMED     DEVICE      
ctl        10  1/0/4/1/0.1.2.0.0.0.0    sctl      CLAIMED     DEVICE       HP      HSV100
target     25  1/0/4/1/0.1.2.0.0.1      tgt       CLAIMED     DEVICE      
ctl        45  1/0/4/1/0.1.2.0.0.1.0    sctl      CLAIMED     DEVICE       HP      HSV100
target     26  1/0/4/1/0.1.2.0.0.2      tgt       CLAIMED     DEVICE      
ctl        46  1/0/4/1/0.1.2.0.0.2.0    sctl      CLAIMED     DEVICE       HP      HSV100
target     27  1/0/4/1/0.1.2.0.0.3      tgt       CLAIMED     DEVICE      
ctl        47  1/0/4/1/0.1.2.0.0.3.0    sctl      CLAIMED     DEVICE       HP      HSV100
target     28  1/0/4/1/0.1.2.0.0.4      tgt       CLAIMED     DEVICE      
ctl        48  1/0/4/1/0.1.2.0.0.4.0    sctl      CLAIMED     DEVICE       HP      HSV100
target     29  1/0/4/1/0.1.2.0.0.5      tgt       CLAIMED     DEVICE      
ctl        49  1/0/4/1/0.1.2.0.0.5.0    sctl      CLAIMED     DEVICE       HP      HSV100
target     30  1/0/4/1/0.1.2.0.0.6      tgt       CLAIMED     DEVICE      
ctl        50  1/0/4/1/0.1.2.0.0.6.0    sctl      CLAIMED     DEVICE       HP      HSV100
target     31  1/0/4/1/0.1.2.0.0.7      tgt       CLAIMED     DEVICE      
ctl        51  1/0/4/1/0.1.2.0.0.7.0    sctl      CLAIMED     DEVICE       HP      HSV100
target     32  1/0/4/1/0.1.2.0.0.8      tgt       CLAIMED     DEVICE      
ctl        52  1/0/4/1/0.1.2.0.0.8.0    sctl      CLAIMED     DEVICE       HP      HSV100
target     33  1/0/4/1/0.1.2.0.0.9      tgt       CLAIMED     DEVICE      
ctl        53  1/0/4/1/0.1.2.0.0.9.0    sctl      CLAIMED     DEVICE       HP      HSV100
target     34  1/0/4/1/0.1.2.0.0.10     tgt       CLAIMED     DEVICE      
ctl        54  1/0/4/1/0.1.2.0.0.10.0   sctl      CLAIMED     DEVICE       HP      HSV100
target     35  1/0/4/1/0.1.2.0.0.11     tgt       CLAIMED     DEVICE      
ctl        55  1/0/4/1/0.1.2.0.0.11.0   sctl      CLAIMED     DEVICE       HP      HSV100
target     36  1/0/4/1/0.1.2.0.0.12     tgt       CLAIMED     DEVICE      
ctl        56  1/0/4/1/0.1.2.0.0.12.0   sctl      CLAIMED     DEVICE       HP      HSV100
target     37  1/0/4/1/0.1.2.0.0.13     tgt       CLAIMED     DEVICE      
ctl        57  1/0/4/1/0.1.2.0.0.13.0   sctl      CLAIMED     DEVICE       HP      HSV100
target     38  1/0/4/1/0.1.2.0.0.14     tgt       CLAIMED     DEVICE      
ctl        58  1/0/4/1/0.1.2.0.0.14.0   sctl      CLAIMED     DEVICE       HP      HSV100
target     39  1/0/4/1/0.1.2.0.0.15     tgt       CLAIMED     DEVICE      
ctl        59  1/0/4/1/0.1.2.0.0.15.0   sctl      CLAIMED     DEVICE       HP      HSV100
ext_bus    11  1/0/4/1/0.1.2.255.0      fcpdev    CLAIMED     INTERFACE    FCP Device Interface
target     40  1/0/4/1/0.1.2.255.0.0    tgt       CLAIMED     DEVICE      
ctl        11  1/0/4/1/0.1.2.255.0.0.0  sctl      CLAIMED     DEVICE       HP      HSV100
ext_bus    13  1/0/4/1/0.1.3.255.0      fcpdev    CLAIMED     INTERFACE    FCP Device Interface
target     41  1/0/4/1/0.1.3.255.0.0    tgt       CLAIMED     DEVICE      
tape        1  1/0/4/1/0.1.3.255.0.0.0  stape     CLAIMED     DEVICE       HP      Ultrium 2-SCSI
autoch      1  1/0/4/1/0.1.3.255.0.0.1  schgr     CLAIMED     DEVICE       HP      MSL6000 Series
ctl        76  1/0/4/1/0.1.3.255.0.0.2  sctl      CLAIMED     DEVICE       HP      NS E1200-160
ba          5  1/0/6          lba       CLAIMED     BUS_NEXUS    Local PCI-X Bus Adapter (783)
lan         1  1/0/6/1/0      igelan    CLAIMED     INTERFACE    HP A6847-60101 PCI 1000Base-SX Adapter
ba          6  1/0/8          lba       CLAIMED     BUS_NEXUS    Local PCI-X Bus Adapter (783)
ba          7  1/0/10         lba       CLAIMED     BUS_NEXUS    Local PCI-X Bus Adapter (783)
ba          8  1/0/12         lba       CLAIMED     BUS_NEXUS    Local PCI-X Bus Adapter (783)
ba          9  1/0/14         lba       CLAIMED     BUS_NEXUS    Local PCI-X Bus Adapter (783)
lan         2  1/0/14/1/0     igelan    CLAIMED     INTERFACE    HP A6847-60101 PCI 1000Base-SX Adapter
memory      0  1/5            memory    CLAIMED     MEMORY       Memory
ipmi        0  1/6            ipmi      CLAIMED     INTERFACE    IPMI Controller
processor   0  1/10           processor CLAIMED     PROCESSOR    Processor
processor   1  1/11           processor CLAIMED     PROCESSOR    Processor
processor   2  1/12           processor CLAIMED     PROCESSOR    Processor
processor   3  1/13           processor CLAIMED     PROCESSOR    Processor
processor   4  1/14           processor CLAIMED     PROCESSOR    Processor
processor   5  1/15           processor CLAIMED     PROCESSOR    Processor
ba         10  255/255        swspBus   CLAIMED     VIRTBUS

但是ioscan -fnCdisk
确看不到存储硬盘
# strings /etc/lvmtab
/dev/vg00
/dev/dsk/c0t6d0
/dev/dsk/c3t6d0
/dev/vglock
/dev/dsk/c12t0d0
/dev/vgsybase
/dev/dsk/c12t0d1
/dev/vgdata
/dev/dsk/c12t0d2
/dev/vgdata01
/dev/dsk/c12t0d5
/dev/vgsybdata
/dev/dsk/c12t0d4
/dev/dsk/c12t0d6
之前是好的．麻烦各位大虾帮忙诊断一下，不胜感激．

Answer 1

但是ioscan -fnCdisk
# ioscan -fnCdisk
Class     I  H/W Path       Driver   S/W State   H/W Type     Description
==========================================================================
disk      0  1/0/0/3/0.6.0  sdisk    CLAIMED     DEVICE       HP 36.4GMAU3036NC
                           /dev/dsk/c0t6d0   /dev/rdsk/c0t6d0
disk      1  1/0/0/3/1.2.0  sdisk    CLAIMED     DEVICE       _NEC    DVD+RW ND-2100AD
                           /dev/dsk/c1t2d0   /dev/rdsk/c1t2d0
disk      2  1/0/1/1/0/1/1.6.0  sdisk    CLAIMED     DEVICE       HP 36.4GMAU3036NC
                           /dev/dsk/c3t6d0   /dev/rdsk/c3t6d0

只看到系统的硬盘

Answer 2

是两台rp7420的机器，跑的MC/SG集群，每台机器都是两块光纤卡双链路连到两台HP SAN交换机，存储是EVA3000也是双控制器双链路连接到莲台SAN交换机，现在是1号机的其中一块光纤卡有问题题，指示灯不亮，集群上的PKG包切换2号机上，应该是1号机上的存储硬盘丢失而导致集群切换的。现在是ioscan看到的状态时CLAIMED的，为什么ioscan -fnCdisk发现不了存储的上硬盘。PKG在2号机上的运行正常，1号机与2号机对存储的硬盘是共享主备的。

Answer 3

一窍不通。

Answer 4

连接结构是:每台机器两块HBA卡连接两个SAN 交换机,每个SAN交换机同时连接存储两个控制器.SAN 交换机上是默认配置,没有ZONE.
ioscan -fnC fc
Class     I  H/W Path   Driver S/W State   H/W Type     Description
==================================================================
fc        0  1/0/2/1/0  td   CLAIMED     INTERFACE    HP Tachyon XL2 Fibre Channel Mass Storage Adapter
                       /dev/td0
fc        1  1/0/4/1/0  td   CLAIMED     INTERFACE    HP Tachyon XL2 Fibre Channel Mass Storage Adapter
                       /dev/td1

fcmsutil /dev/td0 stat -s
Sun Mar 20 09:04:18 2011
Channel Statistics

Statistics From Link Status Registers ...
Loss of signal                    52     Bad Rx Char                  9806789
Loss of Sync                    6572     Link Fail                         78
Received EOFa                      0     Discarded Frame                    0
Bad CRC                            0     Protocol Error                     0

fcmsutil /dev/td1 stat -s
Sun Mar 20 09:04:52 2011
Channel Statistics

Statistics From Link Status Registers ...
Loss of signal                     0     Bad Rx Char                      255
Loss of Sync                       5     Link Fail                          0
Received EOFa                      0     Discarded Frame                    0
Bad CRC                            0     Protocol Error                     0

Answer 5

insf -e 看看

Answer 6

查看一下EVA的CV，是不是有报错？