V890性能问题

Question

硬件：SUN V890   系统：SUNOS 5.9

之前没发现什么，最近根据客户要求，给系统盘（146G）做了镜像，客户的应用程序在系统盘的/opt下
做完镜像后客户发现机器反应慢，收集信息如下:
root@GSCAPP # vmstat 1 5
kthr      memory            page            disk          faults      cpu
r b w   swap  free  re  mf pi po fr de sr m0 m1 m3 m4   in   sy   cs us sy id
0 8 0 26856784 7914448 592 19340 1811 933 1812 0 514 0 0 0 0 1766 39581 6674 18 8 74
0 0 0 28903456 9293904 317 12640 32 40 16 0 0 0 0 0 0 1375 49510 4841 24 5 71
0 0 0 28895680 9286144 348 7654 0 79 71 0 0 0 0  0  0 1117 52983 5636 28 6 66
8 0 0 18867872 8967984 520 85405 0 40 40 0 0 0 0 0  0 1627 36003 4521 35 41 24
5 0 0 16905976 8727728 446 328141 0 111 32 0 0 0 0 0 0 2977 32769 4681 62 38 0

root@GSCAPP # iostat -xnp
                    extended device statistics              
    r/s    w/s   kr/s   kw/s wait actv wsvc_t asvc_t  %w  %b device
    0.1    0.2    0.3    0.2  0.0  0.1    1.2  340.8   0   3 d0
  151.2   34.4 1209.6  833.9  0.0 208.6    0.0 1124.0   0  32 d1
    0.1    3.3    1.6   89.9  0.0  0.6    0.3  180.9   0  13 d3
    1.5    1.9   16.1    8.6  0.0  0.6    0.4  170.0   0  16 d4
    0.0    8.6    0.1   31.5  0.0  0.1    0.0   15.5   0  12 d5
   13.6   20.8  580.9  324.6  0.0  6.2    0.4  179.7   1  34 d6
    0.0    0.5    0.8   15.6  0.0  0.2    2.0  324.7   0   5 d7
    0.0    0.2    0.2    0.2  0.0  0.1    0.0  293.9   0   2 d10
   75.6   34.4  604.8  833.9  0.0 181.0    0.0 1645.1   0  30 d11
    0.0    3.3    0.8   89.9  0.0  0.4    0.0  123.6   0  10 d13
    0.8    1.9    8.0    8.6  0.0  0.4    0.0  138.1   0  12 d14
    0.0    8.6    0.1   31.5  0.0  0.1    0.0   11.6   0   9 d15
    6.8   20.8  290.4  324.6  0.0  4.5    0.0  162.4   0  31 d16
    0.0    0.5    0.4   15.6  0.0  0.1    0.0  277.0   0   4 d17
    0.0    0.2    0.2    0.2  0.0  0.1    0.0  308.0   0   2 d20
   75.6   34.4  604.8  833.9  0.0 180.5    0.0 1640.5   0  30 d21
    0.0    3.3    0.8   89.9  0.0  0.4    0.0  126.1   0  10 d23
    0.8    1.9    8.0    8.6  0.0  0.4    0.0  141.7   0  13 d24
    0.0    8.6    0.1   31.5  0.0  0.1    0.0   11.7   0   9 d25
    6.8   20.8  290.5  324.6  0.0  4.5    0.0  164.0   0  31 d26
    0.0    0.5    0.4   15.6  0.0  0.1    0.0  282.7   0   4 d27
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.2   0   0 c0t0d0
   84.5   70.7  904.6 1304.1  7.5 16.7   48.6  107.9   4  40 c1t1d0
    0.0    0.2    0.2    0.2  0.0  0.0   27.2  115.3   0   1 c1t1d0s0
   75.6   34.4  604.7  833.8  7.0 13.8   63.5  125.0   4  30 c1t1d0s1
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 c1t1d0s2
    0.0    3.7    0.8   89.8  0.0  0.3    8.8   78.4   1   9 c1t1d0s3
    0.8    1.9    8.0    8.6  0.1  0.2   19.7   67.4   2  10 c1t1d0s4
    0.0    8.6    0.1   31.5  0.0  0.1    0.3   10.1   0   9 c1t1d0s5
    8.0   21.3  290.5  324.5  0.4  2.4   15.3   80.8   3  29 c1t1d0s6
    0.0    0.6    0.4   15.6  0.0  0.0   36.4   70.4   1   2 c1t1d0s7
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 c1t2d0
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 c1t2d0s2
    0.0    5.8    0.0    2.9  0.0  0.0    0.0    4.8   0   2 c1t3d0
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 c1t3d0s0
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 c1t3d0s2
    0.0    5.8    0.0    2.9  0.0  0.0    0.0    4.8   0   2 c1t3d0s7
   84.5   70.7  904.5 1304.1  7.6 16.6   48.9  107.1   4  40 c1t0d0
    0.0    0.2    0.2    0.2  0.0  0.0   23.7  105.9   0   1 c1t0d0s0
   75.6   34.4  604.7  833.9  7.0 13.7   64.0  124.4   4  30 c1t0d0s1
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 c1t0d0s2
    0.0    3.7    0.8   89.8  0.0  0.3    9.2   75.9   1   8 c1t0d0s3
    0.8    1.9    8.0    8.6  0.0  0.2   18.3   64.6   2   9 c1t0d0s4
    0.0    8.6    0.1   31.5  0.0  0.1    0.3    9.9   0   8 c1t0d0s5
    8.0   21.3  290.4  324.5  0.4  2.3   15.0   79.3   3  29 c1t0d0s6
    0.0    0.6    0.4   15.6  0.0  0.0   30.9   71.7   1   2 c1t0d0s7
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.1   0   0 GSCAPP:vold(pid663)

root@GSCAPP # dmesg
Sep 10 00:18:25 GSCAPP tmpfs: [ID 518458 kern.warning] WARNING: /tmp: File system full, swap space limit exceeded
Sep 10 00:20:53 GSCAPP last message repeated 1 time
Sep 10 01:19:10 GSCAPP tmpfs: [ID 518458 kern.warning] WARNING: /tmp: File system full, swap space limit exceeded
Sep 10 01:20:35 GSCAPP last message repeated 14 times
Sep 10 01:20:37 GSCAPP genunix: [ID 470503 kern.warning] WARNING: Sorry, no swap space to grow stack for pid 4924 (mail)
Sep 10 01:21:02 GSCAPP tmpfs: [ID 518458 kern.warning] WARNING: /tmp: File system full, swap space limit exceeded
Sep 10 01:21:02 GSCAPP last message repeated 11 times
Sep 10 02:33:32 GSCAPP tmpfs: [ID 518458 kern.warning] WARNING: /tmp: File system full, swap space limit exceeded
Sep 10 02:33:32 GSCAPP last message repeated 3 times
Sep 10 04:45:30 GSCAPP elfexec: [ID 163280 kern.notice] sh: Cannot map /usr/lib/ld.so.1
Sep 10 08:02:55 GSCAPP tmpfs: [ID 518458 kern.warning] WARNING: /tmp: File system full, swap space limit exceeded
Sep 10 08:02:55 GSCAPP last message repeated 1 time

大家给看一下有什么问题么···

Answer 1

WARNING: /tmp: File system full

Answer 2

关键还是/tmp满了。

/var   /tmp   /等满了，是很慢的。

Answer 3

回复 2# 东方蜘蛛

    root@GSCAPP # df -k
Filesystem            kbytes    used   avail capacity  Mounted on
/dev/md/dsk/d0       8268461 2895731 5290046    36%    /
/dev/md/dsk/d4       7235693 2743827 4419510    39%    /usr
/proc                      0       0       0     0%    /proc
mnttab                     0       0       0     0%    /etc/mnttab
fd                         0       0       0     0%    /dev/fd
/dev/md/dsk/d3       15493995 1497853 13841203    10%    /var
swap                 28956080     112 28955968     1%    /var/run
swap                 28994808   38840 28955968     1%    /tmp
/dev/md/dsk/d6       63000156 26151683 36218472    42%    /opt
/dev/md/dsk/d7       7235693 2810967 4352370    40%    /export/home
/dev/md/dsk/d5       5170926    7331 5111886     1%    /var/mqm

root@GSCAPP # metastat
d0: 镜像
    次镜像 0: d10
      状态： 确定         
    次镜像 1: d20
      状态： 确定         
    传送： 1
   读入选项： roundrobin (缺省)
    写入选项： parallel (缺省)
    大小： 16790400 块 (8.0 GB)
d10: d0 的次镜像
    状态: 确定         
    大小： 16790400 块 (8.0 GB)
    条 0:
        设备       引导块       Dbase         状态 Reloc 热备援
        c1t0d0s0          0     否            确定    是
d20: d0 的次镜像
    状态: 确定         
    大小： 16790400 块 (8.0 GB)
    条 0:
        设备       引导块       Dbase         状态 Reloc 热备援
        c1t1d0s0          0     否            确定    是
d7: 镜像
    次镜像 0: d17
      状态： 确定         
    次镜像 1: d27
      状态： 确定         
    传送： 1
   读入选项： roundrobin (缺省)
    写入选项： parallel (缺省)
    大小： 14694144 块 (7.0 GB)
d17: d7 的次镜像
    状态: 确定         
    大小： 14694144 块 (7.0 GB)
    条 0:
        设备       引导块       Dbase         状态 Reloc 热备援
        c1t0d0s7          0     否            确定    是
d27: d7 的次镜像
    状态: 确定         
    大小： 14694144 块 (7.0 GB)
    条 0:
        设备       引导块       Dbase         状态 Reloc 热备援
        c1t1d0s7          0     否            确定    是
d6: 镜像
    次镜像 0: d16
      状态： 确定         
    次镜像 1: d26
      状态： 确定         
    传送： 1
   读入选项： roundrobin (缺省)
    写入选项： parallel (缺省)
    大小： 127932672 块 (61 GB)
d16: d6 的次镜像
    状态: 确定         
    大小： 127932672 块 (61 GB)
    条 0:
        设备       引导块       Dbase         状态 Reloc 热备援
        c1t0d0s6          0     否            确定    是
d26: d6 的次镜像
    状态: 确定         
    大小： 127932672 块 (61 GB)
    条 0:
        设备       引导块       Dbase         状态 Reloc 热备援
        c1t1d0s6          0     否            确定    是
d5: 镜像
    次镜像 0: d15
      状态： 确定         
    次镜像 1: d25
      状态： 确定         
    传送： 1
   读入选项： roundrobin (缺省)
    写入选项： parallel (缺省)
    大小： 10501632 块 (5.0 GB)
d15: d5 的次镜像
    状态: 确定         
    大小： 10501632 块 (5.0 GB)
    条 0:
        设备       引导块       Dbase         状态 Reloc 热备援
        c1t0d0s5          0     否            确定    是
d25: d5 的次镜像
    状态: 确定         
    大小： 10501632 块 (5.0 GB)
    条 0:
        设备       引导块       Dbase         状态 Reloc 热备援
        c1t1d0s5          0     否            确定    是
d4: 镜像
    次镜像 0: d14
      状态： 确定         
    次镜像 1: d24
      状态： 确定         
    传送： 1
   读入选项： roundrobin (缺省)
    写入选项： parallel (缺省)
    大小： 14694144 块 (7.0 GB)
d14: d4 的次镜像
    状态: 确定         
    大小： 14694144 块 (7.0 GB)
    条 0:
        设备       引导块       Dbase         状态 Reloc 热备援
        c1t0d0s4          0     否            确定    是
d24: d4 的次镜像
    状态: 确定         
    大小： 14694144 块 (7.0 GB)
    条 0:
        设备       引导块       Dbase         状态 Reloc 热备援
        c1t1d0s4          0     否            确定    是
d3: 镜像
    次镜像 0: d13
      状态： 确定         
    次镜像 1: d23
      状态： 确定         
    传送： 1
   读入选项： roundrobin (缺省)
    写入选项： parallel (缺省)
    大小： 31464192 块 (15 GB)
d13: d3 的次镜像
    状态: 确定         
    大小： 31464192 块 (15 GB)
    条 0:
        设备       引导块       Dbase         状态 Reloc 热备援
        c1t0d0s3          0     否            确定    是
d23: d3 的次镜像
    状态: 确定         
    大小： 31464192 块 (15 GB)
    条 0:
        设备       引导块       Dbase         状态 Reloc 热备援
        c1t1d0s3          0     否            确定    是
d1: 镜像
    次镜像 0: d11
      状态： 确定         
    次镜像 1: d21
      状态： 确定         
    传送： 1
   读入选项： roundrobin (缺省)
    写入选项： parallel (缺省)
    大小： 67120896 块 (32 GB)
d11: d1 的次镜像
    状态: 确定         
    大小： 67120896 块 (32 GB)
    条 0:
        设备       引导块       Dbase         状态 Reloc 热备援
        c1t0d0s1          0     否            确定    是
d21: d1 的次镜像
    状态: 确定         
    大小： 67120896 块 (32 GB)
    条 0:
        设备       引导块       Dbase         状态 Reloc 热备援
        c1t1d0s1          0     否            确定    是
设备重新分配信息:
设备     重新定位       设备 ID
c1t1d0   是     id1,ssd@w500000e018062390
c1t0d0   是     id1,ssd@w500000e018077f90
c1t3d0   是     id1,ssd@w500000e018080980

Answer 4

1./tmp满了
2.镜像同步没完成吧？