<div dir="ltr"><div><div>Hi,<br>
<br>
My OI box is expreiencing slow zfs writes ( around 30 times slower ). 
iostat reports below error though pool is healthy. This is happening in 
past 4 days though no change was done to system. Is the hard disks 
faulty ?<br>
Please help.<br>
<br>
<br>
# zpool status -v<br>
root@host:~# zpool status -v<br>
  pool: test<br>
 state: ONLINE<br>
status: The pool is formatted using a legacy on-disk format.  The pool can<br>
        still be used, but some features are unavailable.<br>
action: Upgrade the pool using 'zpool upgrade'.  Once this is done, the<br>
        pool will no longer be accessible on software that does not support feature flags.<br>
config:<br>
<br>
        NAME         STATE     READ WRITE CKSUM<br>
        test       ONLINE       0     0     0<br>
          raidz1-0   ONLINE       0     0     0<br>
            c2t0d0   ONLINE       0     0     0<br>
            c2t1d0   ONLINE       0     0     0<br>
            c2t2d0   ONLINE       0     0     0<br>
            c2t3d0   ONLINE       0     0     0<br>
            c2t4d0   ONLINE       0     0     0<br>
          raidz1-1   ONLINE       0     0     0<br>
            c2t5d0   ONLINE       0     0     0<br>
            c2t6d0   ONLINE       0     0     0<br>
            c2t7d0   ONLINE       0     0     0<br>
            c2t8d0   ONLINE       0     0     0<br>
            c2t9d0   ONLINE       0     0     0<br>
          raidz1-3   ONLINE       0     0     0<br>
            c2t12d0  ONLINE       0     0     0<br>
            c2t13d0  ONLINE       0     0     0<br>
            c2t14d0  ONLINE       0     0     0<br>
            c2t15d0  ONLINE       0     0     0<br>
            c2t16d0  ONLINE       0     0     0<br>
            c2t17d0  ONLINE       0     0     0<br>
            c2t18d0  ONLINE       0     0     0<br>
            c2t19d0  ONLINE       0     0     0<br>
            c2t20d0  ONLINE       0     0     0<br>
            c2t21d0  ONLINE       0     0     0<br>
            c2t22d0  ONLINE       0     0     0<br>
            c2t23d0  ONLINE       0     0     0<br>
          raidz1-4   ONLINE       0     0     0<br>
            c2t24d0  ONLINE       0     0     0<br>
            c2t25d0  ONLINE       0     0     0<br>
            c2t26d0  ONLINE       0     0     0<br>
            c2t27d0  ONLINE       0     0     0<br>
            c2t28d0  ONLINE       0     0     0<br>
            c2t29d0  ONLINE       0     0     0<br>
            c2t30d0  ONLINE       0     0     0<br>
          raidz1-5   ONLINE       0     0     0<br>
            c2t31d0  ONLINE       0     0     0<br>
            c2t32d0  ONLINE       0     0     0<br>
            c2t33d0  ONLINE       0     0     0<br>
            c2t34d0  ONLINE       0     0     0<br>
            c2t35d0  ONLINE       0     0     0<br>
            c2t36d0  ONLINE       0     0     0<br>
            c2t37d0  ONLINE       0     0     0<br>
          raidz1-6   ONLINE       0     0     0<br>
            c2t38d0  ONLINE       0     0     0<br>
            c2t39d0  ONLINE       0     0     0<br>
            c2t40d0  ONLINE       0     0     0<br>
            c2t41d0  ONLINE       0     0     0<br>
            c2t42d0  ONLINE       0     0     0<br>
            c2t43d0  ONLINE       0     0     0<br>
            c2t44d0  ONLINE       0     0     0<br>
        spares<br>
          c5t10d0    AVAIL  <br>
          c5t11d0    AVAIL  <br>
          c2t45d0    AVAIL  <br>
          c2t46d0    AVAIL  <br>
          c2t47d0    AVAIL  <br>
<br>
<br>
<br>
# iostat -En<br>
<br>
c4t0d0           Soft Errors: 0 Hard Errors: 5 Transport Errors: 0<br>
Vendor: iDRAC    Product: Virtual CD       Revision: 0323 Serial No: <br>
Size: 0.00GB <0 bytes><br>
Media Error: 0 Device Not Ready: 5 No Device: 0 Recoverable: 0<br>
Illegal Request: 1 Predictive Failure Analysis: 0<br>
c3t0d0           Soft Errors: 0 Hard Errors: 0 Transport Errors: 0<br>
Vendor: iDRAC    Product: LCDRIVE          Revision: 0323 Serial No: <br>
Size: 0.00GB <0 bytes><br>
Media Error: 0 Device Not Ready: 0 No Device: 0 Recoverable: 0<br>
Illegal Request: 0 Predictive Failure Analysis: 0<br>
c4t0d1           Soft Errors: 0 Hard Errors: 0 Transport Errors: 0<br>
Vendor: iDRAC    Product: Virtual Floppy   Revision: 0323 Serial No: <br>
Size: 0.00GB <0 bytes><br>
Media Error: 0 Device Not Ready: 0 No Device: 0 Recoverable: 0<br>
<br>
<br>
root@host:~# fmadm faulty<br>
--------------- ------------------------------------  -------------- ---------<br>
TIME            EVENT-ID                              MSG-ID         SEVERITY<br>
--------------- ------------------------------------  -------------- ---------<br>
Jan 05 08:21:09 7af1ab3c-83c2-602d-d4b9-f9040db6944a  ZFS-8000-HC    Major    <br>
<br>
Host        : host<br>
Platform    : PowerEdge-R810  <br>
Product_sn  :<br>
<br>
Fault class : fault.fs.zfs.io_failure_wait<br>
Affects     : zfs://pool=test<br>
                  faulted but still in service<br>
Problem in  : zfs://pool=test<br>
                  faulted but still in service<br>
<br>
Description : The ZFS pool has experienced currently unrecoverable I/O<br>
                    failures.  Refer to <a href="http://illumos.org/msg/ZFS-8000-HC">http://illumos.org/msg/ZFS-8000-HC</a> for<br>
              more information.<br>
<br>
Response    : No automated response will be taken.<br>
<br>
Impact      : Read and write I/Os cannot be serviced.<br>
<br>
Action      : Make sure the affected devices are connected, then run<br>
                    'zpool clear'.<br>
<br>
<br>
</div>Regards,<br></div><div>Ram<br></div><div><div>
<br>
<br>
</div></div></div>