<html>
  <head>
    <meta content="text/html; charset=windows-1252"
      http-equiv="Content-Type">
  </head>
  <body bgcolor="#FFFFFF" text="#000000">
    <div class="moz-cite-prefix">Hi Garret,<br>
      <br>
      Thanks again.<br>
      <br>
      <br>
      On 08/10/13 11:10, Garrett D'Amore wrote:<br>
    </div>
    <blockquote
      cite="mid:B3AF82F4-7A33-45F9-A5B2-025E263678D5@dey-sys.com"
      type="cite">
      <meta http-equiv="Content-Type" content="text/html;
        charset=windows-1252">
      <br>
      <div>
        <div>On Oct 7, 2013, at 4:29 PM, Tom Robinson <<a
            moz-do-not-send="true"
            href="mailto:tom.robinson@motec.com.au">tom.robinson@motec.com.au</a>>
          wrote:</div>
        <br class="Apple-interchange-newline">
        <blockquote type="cite">
          <meta content="text/html; charset=windows-1252"
            http-equiv="Content-Type">
          <div bgcolor="#FFFFFF" text="#000000">
            <div class="moz-cite-prefix"><tt>Hi Garret,<br>
                <br>
                Thanks for your message.<br>
                <br>
                The host configuration is as follows:<br>
                <br>
                Supermicro X9DRi-F<br>
              </tt><tt><tt>256GB RAM (16x Hynix 16GB ECC Reg. DDR3
                  1600MHz)<br>
                </tt>2 x Intel Xeon E5-2620<br>
                2 x Intel SSD 320 80GB (rpool)<br>
                4 x STEC Enterprise S842 200GB (ARC)<br>
                1 x STEC ZeusRAM 8GB 3.5" SAS SSD (ZIL)<br>
                1 x LSI SAS 9207-8i (internal drives)<br>
                1 x Intel Ethernet Server Adapter X520-DA2, Dual Port
                10Gbps SFP+ Direct Attach Copper, PCI-e 2.0 5GT/s 1<br>
                2 x Mellanox ConnectX®-2 VPI<br>
                2 x LSI SAS 9207-8e (JBODS)<br>
              </tt></div>
          </div>
        </blockquote>
        <div><br>
        </div>
        I'd be suspicious of the Mellanox cards.  Are these the hermon
        driver?  It looks like there is an attempt to do the right thing
        for those drivers, but… I don't know if I believe it all works
        properly.  The other cards should be fine.</div>
      <div><br>
      </div>
      <div><span class="Apple-tab-span" style="white-space:pre"> </span>-
        Garrett</div>
    </blockquote>
    <br>
    It is indeed the hermon driver:<br>
    <br>
    /etc/driver_aliases<br>
    <br>
    hermon "pciex15b3,6340"<br>
    hermon "pciex15b3,634a"<br>
    hermon "pciex15b3,6732"<br>
    hermon "pciex15b3,673c"<br>
    hermon "pciex15b3,6746"<br>
    <br>
    <br>
    <br>
    <blockquote
      cite="mid:B3AF82F4-7A33-45F9-A5B2-025E263678D5@dey-sys.com"
      type="cite">
      <div><br>
        <blockquote type="cite">
          <div bgcolor="#FFFFFF" text="#000000">
            <div class="moz-cite-prefix"><tt> <br>
                That is connected via external SAS to two JBODS
                containing 28 x 1TB disks each for mirrored zfs vdevs.<br>
                <br>
                The output from prtconf -vp is attached as it's very
                long (2042 lines).<br>
                <br>
                Kind regards,<br>
                Tom<br>
                <br>
              </tt>On 08/10/13 02:06, Garrett D'Amore wrote:<br>
            </div>
            <blockquote
              cite="mid:60E1FD35-1059-4D6F-9DE8-415591598581@dey-sys.com"
              type="cite">
              <meta http-equiv="Content-Type" content="text/html;
                charset=windows-1252">
              If you're seeing hangs like this, I would appreciate
              knowing the hardware configuration.  Prtconf -vp might be
              helpful.  Presumably this is the result of one or more
              devices not doing the right thing for quiesce(). 
              <div><br>
              </div>
              <div><span class="Apple-tab-span" style="white-space:pre">
                </span>- Garrett</div>
              <div><br>
                <div>
                  <div>On Oct 7, 2013, at 4:34 AM, Narayan Desai <<a
                      moz-do-not-send="true"
                      href="mailto:narayan.desai@gmail.com">narayan.desai@gmail.com</a>>

                    wrote:</div>
                  <br class="Apple-interchange-newline">
                  <blockquote type="cite">
                    <div dir="ltr">This is caused by the system
                      attempting to use fastboot on default reboot.
                      We've disabled that and things seem to work
                      properly; the following commands do the trick.
                      (the first changes reboot not to use fastboot, the
                      second causes the system to do a full reboot upon
                      panic)
                      <div>  -nld</div>
                      <div><br>
                      </div>
                      <div>
                        <pre style="margin-top:10px;margin-bottom:10px;color:rgb(85,85,85);font-size:12px;line-height:18px"># svccfg -s "system/boot-config:default" setprop config/fastreboot_default=false
# svcadm refresh svc:/system/boot-config:default
</pre>
                        <pre style="margin-top:10px;margin-bottom:10px;color:rgb(85,85,85);font-size:12px;line-height:18px"><pre style="margin-top:10px;margin-bottom:10px"># svccfg -s "system/boot-config:default" setprop config/fastreboot_onpanic=false
# svcadm refresh svc:/system/boot-config:default</pre></pre>
                      </div>
                      <div><br>
                      </div>
                    </div>
                  </blockquote>
                </div>
              </div>
            </blockquote>
          </div>
        </blockquote>
      </div>
    </blockquote>
    <br>
    I did have fastreboot set to true (installed default setting):<br>
    <br>
    # svcs -vl system/boot-config | grep fastreboot<br>
    config/fastreboot_default (boolean) = true <br>
    config/fastreboot_onpanic (boolean) = true <br>
    fastreboot_blacklist (application)<br>
    fastreboot_blacklist/platforms (astring) = VirtualBox "VMware
    Virtual Platform"MCP55 "Precision WorkStation 650    ""PowerEdge
    1600SC           "<br>
    fastreboot_blacklist/stability (astring) = Unstable <br>
    <br>
    I'm not sure what the fastboot_blacklist settings are or why they
    are there. Should I remove that? Looks like some sort of remnant I
    don't need.<br>
    <br>
    I have set config/fastreboot_default=false and
    config/fastreboot_onpanic=false. I now get:<br>
    <br>
    "bootadm: failed to find boot signature. Reboot with arguments
    failed."<br>
    <br>
    but the system does reboot every time now. What is the significance
    of the above message? Does that indicate that the "-r" option will
    be ignored on reboot?<br>
    <br>
    Regards,<br>
    Tom<br>
    <br>
  </body>
</html>