<div dir="ltr">Well, I have a dumb question, if everyone isn't fed up with me.  This board appears to have a hardware fault, and I'm trying to figure out the exact details for the RMA exchange.   First of all the second Ethernet port doesn't work.  If you plug it into a switchport, the speed/duplex led comes on seeming to indicate that it is linking up at 1000/full duplex, but the link/activity light never comes on.  OmniOS only sees one ethernet port on the motherboard.<div><br></div><div>The issue I'm struggling with, however is identifying a failed PCIEX device.  When the machine boots right before the login prompt comes up I get an error:</div><div><br></div><div>Warning: one or more I/O devices have been retired.</div><div><br></div><div>When i check to see what the device is using "fmadm faulty" i get the following:</div><div><br></div><div>Fault Class: fault.io.pciex.device-interr</div><div>Affects: dev:////pci@0,0/pci1002,5a1d@a/pci15d9,a711@0  faulted and taken out of service</div><div>FRU: "MB" (hc://:product-id=H8SLG:server-id=omnistor1:chassis-id=1234567890/motherboard=0)</div><div><br></div><div>Description:  A problem was detected for a PCIEX device.  Rever to <a href="http://illumos.org/msg/PCIEX-8000-0A">http://illumos.org/msg/PCIEX-8000-0A</a> for more information.</div><div><br></div><div>I'm having trouble identifying exactly what device it's referring to.  Seems like something on the motherboard, or is it referring to the motherboard itself?  It would make sense that it was referring to the ethernet port, but I'm pretty ignorant about PCIEX and haven't been able to find any info that corresponds to those numbers.  If someone could point me in the right direction, I'd be grateful.</div><div><br></div><div>Best regards,</div><div>Joe Boren</div></div><div class="gmail_extra"><br clear="all"><div><div class="gmail_signature"><div dir="ltr"><span style="border-collapse:collapse"><p style="font-size:13px;margin-top:0px;margin-right:0px;margin-bottom:0px;margin-left:0px"></p><p><font face="Arial, sans-serif"></font></p><p><font face="Arial, sans-serif"><span style="font-family:arial"><span style="font-family:Arial;text-decoration:none;vertical-align:baseline;white-space:pre-wrap">-jb-</span></span></font></p><div style="font-family:Helvetica;color:rgb(96,96,96);margin:0px"><b>Joseph Boren</b></div><p style="font-family:Helvetica;color:rgb(96,96,96);margin:0px 0px 12px">IT Specialist</p><div style="font-family:Helvetica;color:rgb(255,147,0);margin:0px"><b>DRAKE COOPER</b></div><div style="font-family:Helvetica;color:rgb(102,102,102);margin:0px"><span style="color:rgb(192,192,192)">+</span><span style="color:rgb(0,0,0)"> </span>c: <a value="+12084725666" style="color:rgb(17,85,204)">(208) 891-2128</a> <span style="color:rgb(192,192,192)">+</span> o: <a value="+12084725666" style="color:rgb(17,85,204)">(208) 342-0925</a></div><div style="font-family:Helvetica;color:rgb(102,102,102);margin:0px"><span style="color:rgb(192,192,192)">+</span><span style="color:rgb(0,0,0)"> </span>416 S. 8th St., Boise, ID 83702</div><div style="font-family:Helvetica;margin:0px"><span style="color:rgb(192,192,192)">+</span><span style="color:rgb(255,153,0)"> </span><span style="color:rgb(102,102,102)">w: </span><a href="http://drakecooper.com/" style="color:rgb(17,85,204)" target="_blank"><font color="#ff9300">drakecooper.com</font></a> <span style="color:rgb(192,192,192)">+ </span><span style="color:rgb(102,102,102)">f:</span><span style="color:rgb(255,153,0)"> </span><a href="http://facebook.com/drakecooper" style="color:rgb(17,85,204)" target="_blank"><font color="#ff9300">/drakecooper</font></a> <span style="color:rgb(192,192,192)">+</span> <span style="color:rgb(102,102,102)">t:</span><font color="#ff9900"> </font><a href="http://twitter.com/drakecooper" style="color:rgb(17,85,204)" target="_blank"><font color="#ff9300">@drakecooper</font></a><font color="#ff9300"> </font></div><p></p>







<p style="font-size:13px"></p></span></div></div></div>
<br><div class="gmail_quote">On Sun, Mar 22, 2015 at 3:05 PM, Joseph Boren <span dir="ltr"><<a href="mailto:jboren@drakecooper.com" target="_blank">jboren@drakecooper.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr">Hi Ben,<div><br>Thanks for the tip.  It turns out that board had some actual physical defects that were causing some weird behaviour that was confusing the whole issue.  What you suggest should work perfectly for that scenario.  I'm exchanging the board and I'm sure the new one will be fine.<br><br>Thanks again for the idea.<br><br>Best regards,</div><div>joe boren</div></div><div class="gmail_extra"><span class=""><br clear="all"><div><div><div dir="ltr"><span style="border-collapse:collapse"><p style="font-size:13px;margin-top:0px;margin-right:0px;margin-bottom:0px;margin-left:0px"></p><p><font face="Arial, sans-serif"></font></p><p><font face="Arial, sans-serif"><span style="font-family:arial"><span style="font-family:Arial;text-decoration:none;vertical-align:baseline;white-space:pre-wrap">-jb-</span></span></font></p><div style="font-family:Helvetica;color:rgb(96,96,96);margin:0px"><b>Joseph Boren</b></div><p style="font-family:Helvetica;color:rgb(96,96,96);margin:0px 0px 12px">IT Specialist</p><div style="font-family:Helvetica;color:rgb(255,147,0);margin:0px"><b>DRAKE COOPER</b></div><div style="font-family:Helvetica;color:rgb(102,102,102);margin:0px"><span style="color:rgb(192,192,192)">+</span><span style="color:rgb(0,0,0)"> </span>c: <a value="+12084725666" style="color:rgb(17,85,204)">(208) 891-2128</a> <span style="color:rgb(192,192,192)">+</span> o: <a value="+12084725666" style="color:rgb(17,85,204)">(208) 342-0925</a></div><div style="font-family:Helvetica;color:rgb(102,102,102);margin:0px"><span style="color:rgb(192,192,192)">+</span><span style="color:rgb(0,0,0)"> </span>416 S. 8th St., Boise, ID 83702</div><div style="font-family:Helvetica;margin:0px"><span style="color:rgb(192,192,192)">+</span><span style="color:rgb(255,153,0)"> </span><span style="color:rgb(102,102,102)">w: </span><a href="http://drakecooper.com/" style="color:rgb(17,85,204)" target="_blank"><font color="#ff9300">drakecooper.com</font></a> <span style="color:rgb(192,192,192)">+ </span><span style="color:rgb(102,102,102)">f:</span><span style="color:rgb(255,153,0)"> </span><a href="http://facebook.com/drakecooper" style="color:rgb(17,85,204)" target="_blank"><font color="#ff9300">/drakecooper</font></a> <span style="color:rgb(192,192,192)">+</span> <span style="color:rgb(102,102,102)">t:</span><font color="#ff9900"> </font><a href="http://twitter.com/drakecooper" style="color:rgb(17,85,204)" target="_blank"><font color="#ff9300">@drakecooper</font></a><font color="#ff9300"> </font></div><p></p>







<p style="font-size:13px"></p></span></div></div></div>
<br></span><div><div class="h5"><div class="gmail_quote">On Sat, Mar 21, 2015 at 1:08 AM, Ben Kitching <span dir="ltr"><<a href="mailto:narratorben@icloud.com" target="_blank">narratorben@icloud.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div style="word-wrap:break-word">Hi Joe,<div><br></div><div>I’ve had similar problems with Supermicro boards in the past.</div><div><br></div><div>Have you tried disabling the option ROMs for your HBA’s in the BIOS?</div><div><br></div><div>That solved it for us.</div><div><div><div><br><div><blockquote type="cite"><div>On 20 Mar 2015, at 23:15, Joseph Boren <<a href="mailto:jboren@drakecooper.com" target="_blank">jboren@drakecooper.com</a>> wrote:</div><br><div><div dir="ltr">Sorry to dredge this old thread up, but I wanted to add my experience with the Supermicro H8SGL-F motherboard, on the off chance someone is considering using that motherboard and reads this thread.   And this is in no way a criticism of Fábio, or complaint about his recommendations.  I appreciate the advice and I'm sure his use case is just different enough from mine that he didn't surface these issues.<div><div><br></div><div>This board has some limitations that may make it not a great choice depending on your intentions for it.  First of all, the BIOS can see a maximum of 12 attached HDs.  And for some strange reason it sees HDs attached to HBAs before it sees HDs attached to the onboard SATA connectors, so if you have 12 drives attached to HBAs you cannot use the onboard SATA, BIOS can't see it (if you have 11 drives on HBAs you can see 1 local drive, etc).  In addition, if you have more than 12 drives attached to HBAs, you can't boot from the drives higher than 12.   So I have 14 drives attached to 2 8port HBAs, I can only set any of the first 12 as boot devices.  13 and 14 cannot be used.   Finally (i think), if you have 12 or more drives attached to any HBA, on board SATA, whatever, you cannot boot from a flash drive.  Even if you set it as the ONLY boot device it will just skip it and complain that there is no bootable device.  If you only have 11 drives you can boot from USB Flash no problem.  Interestingly, a USB CDROM is unaffected by this.  You can select and boot from a USB CDROM regardless of how many drives are attached.  Finally (actually this time I think), it appears to be impossible to set up a mirrored syspool on this motherboard, because there is only one slot in the Bios boot order menu for Hard Disk.  So you can only choose one of the mirror pair as a boot device.  There is no way to specify another HD as a second priority boot device.  Now once you get OmniOS loaded it can see and make use of all drives attached to the system, but you are very restricted in what you can use for boot devices.</div></div><div><br></div><div>After the better part of 2 weeks of back and forth with Supermicro support (who have been really nice and cooperative, but unable to do anything about it), I'm going to have to eat cost of this board/cpu/memory and get something else.  If your use case is 12 total drives or less, and no mirrored boot, this board will work fine.  If you need more than 12 drives, or mirrored syspool, it will not work.</div><div><br></div><div>Thanks</div><div>Joe</div></div><div class="gmail_extra"><br clear="all"><div><div><div dir="ltr"><span style="border-collapse:collapse"><p style="font-size:13px;margin-top:0px;margin-right:0px;margin-bottom:0px;margin-left:0px"></p><div><font face="Arial, sans-serif"></font><br></div><p><font face="Arial, sans-serif"><span style="font-family:arial"><span style="font-family:Arial;text-decoration:none;vertical-align:baseline;white-space:pre-wrap">-jb-</span></span></font></p><div style="font-family:Helvetica;color:rgb(96,96,96);margin:0px"><b>Joseph Boren</b></div><p style="font-family:Helvetica;color:rgb(96,96,96);margin:0px 0px 12px">IT Specialist</p><div style="font-family:Helvetica;color:rgb(255,147,0);margin:0px"><b>DRAKE COOPER</b></div><div style="font-family:Helvetica;color:rgb(102,102,102);margin:0px"><span style="color:rgb(192,192,192)">+</span><span> </span>c: <a value="+12084725666" style="color:rgb(17,85,204)">(208) 891-2128</a> <span style="color:rgb(192,192,192)">+</span> o: <a value="+12084725666" style="color:rgb(17,85,204)">(208) 342-0925</a></div><div style="font-family:Helvetica;color:rgb(102,102,102);margin:0px"><span style="color:rgb(192,192,192)">+</span><span> </span>416 S. 8th St., Boise, ID 83702</div><div style="font-family:Helvetica;margin:0px"><span style="color:rgb(192,192,192)">+</span><span style="color:rgb(255,153,0)"> </span><span style="color:rgb(102,102,102)">w: </span><a href="http://drakecooper.com/" style="color:rgb(17,85,204)" target="_blank"><font color="#ff9300">drakecooper.com</font></a> <span style="color:rgb(192,192,192)">+ </span><span style="color:rgb(102,102,102)">f:</span><span style="color:rgb(255,153,0)"> </span><a href="http://facebook.com/drakecooper" style="color:rgb(17,85,204)" target="_blank"><font color="#ff9300">/drakecooper</font></a> <span style="color:rgb(192,192,192)">+</span> <span style="color:rgb(102,102,102)">t:</span><font color="#ff9900"> </font><a href="http://twitter.com/drakecooper" style="color:rgb(17,85,204)" target="_blank"><font color="#ff9300">@drakecooper</font></a><font color="#ff9300"> </font></div><div><br></div><div style="font-size:13px"><br></div></span></div></div></div>
<br><div class="gmail_quote">On Wed, Nov 19, 2014 at 4:54 PM, Joseph Boren <span dir="ltr"><<a href="mailto:jboren@drakecooper.com" target="_blank">jboren@drakecooper.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr">Wow, Fábio, thanks so much, that is very helpful.  I was looking at supermicro motherboards, so your info is perfect.  <div><br></div><div>I will have a look at those, I'm guessing I can find something that fits my use case.  Thanks again, the help is much appreciated.</div><div><br></div><div>Best regards,<br><div><table cellpadding="0" style="font-family:arial,sans-serif;font-size:13px"><tbody></tbody></table></div></div></div><div class="gmail_extra"><span><br clear="all"><div><div><div dir="ltr"><span style="border-collapse:collapse"><p style="font-size:13px;margin-top:0px;margin-right:0px;margin-bottom:0px;margin-left:0px"></p><div><font face="Arial, sans-serif"></font><br></div><p><font face="Arial, sans-serif"><span style="font-family:arial"><span style="font-family:Arial;text-decoration:none;vertical-align:baseline;white-space:pre-wrap">-jb-</span></span></font></p><div style="font-family:Helvetica;color:rgb(96,96,96);margin:0px"><b>Joseph Boren</b></div><p style="font-family:Helvetica;color:rgb(96,96,96);margin:0px 0px 12px">IT Specialist</p><div style="font-family:Helvetica;color:rgb(255,147,0);margin:0px"><b>DRAKE COOPER</b></div><div style="font-family:Helvetica;color:rgb(102,102,102);margin:0px"><span style="color:rgb(192,192,192)">+</span><span> </span>c: <a value="+12084725666" style="color:rgb(17,85,204)">(208) 891-2128</a> <span style="color:rgb(192,192,192)">+</span> o: <a value="+12084725666" style="color:rgb(17,85,204)">(208) 342-0925</a></div><div style="font-family:Helvetica;color:rgb(102,102,102);margin:0px"><span style="color:rgb(192,192,192)">+</span><span> </span>416 S. 8th St., Boise, ID 83702</div><div style="font-family:Helvetica;margin:0px"><span style="color:rgb(192,192,192)">+</span><span style="color:rgb(255,153,0)"> </span><span style="color:rgb(102,102,102)">w: </span><a href="http://drakecooper.com/" style="color:rgb(17,85,204)" target="_blank"><font color="#ff9300">drakecooper.com</font></a> <span style="color:rgb(192,192,192)">+ </span><span style="color:rgb(102,102,102)">f:</span><span style="color:rgb(255,153,0)"> </span><a href="http://facebook.com/drakecooper" style="color:rgb(17,85,204)" target="_blank"><font color="#ff9300">/drakecooper</font></a> <span style="color:rgb(192,192,192)">+</span> <span style="color:rgb(102,102,102)">t:</span><font color="#ff9900"> </font><a href="http://twitter.com/drakecooper" style="color:rgb(17,85,204)" target="_blank"><font color="#ff9300">@drakecooper</font></a><font color="#ff9300"> </font></div><div><br></div><div style="font-size:13px"><br></div></span></div></div></div>
<br></span><div><div><div class="gmail_quote">On Wed, Nov 19, 2014 at 4:48 PM, Fábio Rabelo <span dir="ltr"><<a href="mailto:fabio@fabiorabelo.wiki.br" target="_blank">fabio@fabiorabelo.wiki.br</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div><div><div><div>I can show you what motherboards I have installed and fully working in the customers of mine :<br><br><a href="http://www.supermicro.com/Aplus/motherboard/Opteron6000/SR56x0/H8DG6-F.cfm" target="_blank">http://www.supermicro.com/Aplus/motherboard/Opteron6000/SR56x0/H8DG6-F.cfm</a><br><br><a href="http://www.supermicro.com/Aplus/motherboard/Opteron6000/SR56x0/H8DG6.cfm" target="_blank">http://www.supermicro.com/Aplus/motherboard/Opteron6000/SR56x0/H8DG6.cfm</a><br><br><a href="http://www.supermicro.com/Aplus/motherboard/Opteron6000/SR56x0/H8DGi-F.cfm" target="_blank">http://www.supermicro.com/Aplus/motherboard/Opteron6000/SR56x0/H8DGi-F.cfm</a><br><br><a href="http://www.supermicro.com/Aplus/motherboard/Opteron6000/SR56x0/H8DGi.cfm" target="_blank">http://www.supermicro.com/Aplus/motherboard/Opteron6000/SR56x0/H8DGi.cfm</a><br><br><a href="http://www.supermicro.com/Aplus/motherboard/Opteron6000/SR56x0/H8SGL-F.cfm" target="_blank">http://www.supermicro.com/Aplus/motherboard/Opteron6000/SR56x0/H8SGL-F.cfm</a><br><br><a href="http://www.supermicro.com/Aplus/motherboard/Opteron6000/SR56x0/H8SGL.cfm" target="_blank">http://www.supermicro.com/Aplus/motherboard/Opteron6000/SR56x0/H8SGL.cfm</a><br><br></div>The ones with LSI SAS controler needs to be flashed with IT firmware, you can find them in the official Supermicro FTP site :<br><br><a href="ftp://ftp.supermicro.com/Driver/SAS/LSI/" target="_blank">ftp://ftp.supermicro.com/Driver/SAS/LSI/</a><br><br></div>Opterons from 8 to 24 cores, no issue whats soever ...<br><br></div>Some of them are up and running for over an year !!!<br><br><br></div>Fábio Rabelo<br></div><div class="gmail_extra"><br><div class="gmail_quote">2014-11-19 21:35 GMT-02:00 Joseph Boren <span dir="ltr"><<a href="mailto:jboren@drakecooper.com" target="_blank">jboren@drakecooper.com</a>></span>:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div><div><div dir="ltr">Is anyone aware of a list, even a short list, of motherboards that are known to be compatible with OmniOS?  The illumos HCL doesn't list any motherboards.  <div><br></div><div>Thanks,<br clear="all"><div><div><div dir="ltr"><span style="border-collapse:collapse"><p style="font-size:13px;margin-top:0px;margin-right:0px;margin-bottom:0px;margin-left:0px"></p><div><font face="Arial, sans-serif"></font><br></div><p><font face="Arial, sans-serif"><span style="font-family:arial"><span style="font-family:Arial;text-decoration:none;vertical-align:baseline;white-space:pre-wrap">-jb-</span></span></font></p><div style="font-family:Helvetica;color:rgb(96,96,96);margin:0px"><b>Joseph Boren</b></div><p style="font-family:Helvetica;color:rgb(96,96,96);margin:0px 0px 12px">IT Specialist</p><div style="font-family:Helvetica;color:rgb(255,147,0);margin:0px"><b>DRAKE COOPER</b></div><div style="font-family:Helvetica;color:rgb(102,102,102);margin:0px"><span style="color:rgb(192,192,192)">+</span><span> </span>c: <a value="+12084725666" style="color:rgb(17,85,204)">(208) 891-2128</a> <span style="color:rgb(192,192,192)">+</span> o: <a value="+12084725666" style="color:rgb(17,85,204)">(208) 342-0925</a></div><div style="font-family:Helvetica;color:rgb(102,102,102);margin:0px"><span style="color:rgb(192,192,192)">+</span><span> </span>416 S. 8th St., Boise, ID 83702</div><div style="font-family:Helvetica;margin:0px"><span style="color:rgb(192,192,192)">+</span><span style="color:rgb(255,153,0)"> </span><span style="color:rgb(102,102,102)">w: </span><a href="http://drakecooper.com/" style="color:rgb(17,85,204)" target="_blank"><font color="#ff9300">drakecooper.com</font></a> <span style="color:rgb(192,192,192)">+ </span><span style="color:rgb(102,102,102)">f:</span><span style="color:rgb(255,153,0)"> </span><a href="http://facebook.com/drakecooper" style="color:rgb(17,85,204)" target="_blank"><font color="#ff9300">/drakecooper</font></a> <span style="color:rgb(192,192,192)">+</span> <span style="color:rgb(102,102,102)">t:</span><font color="#ff9900"> </font><a href="http://twitter.com/drakecooper" style="color:rgb(17,85,204)" target="_blank"><font color="#ff9300">@drakecooper</font></a><font color="#ff9300"> </font></div><div><br></div><div style="font-size:13px"><br></div></span></div></div></div>
</div></div>
<br></div></div>_______________________________________________<br>
OmniOS-discuss mailing list<br>
<a href="mailto:OmniOS-discuss@lists.omniti.com" target="_blank">OmniOS-discuss@lists.omniti.com</a><br>
<a href="http://lists.omniti.com/mailman/listinfo/omnios-discuss" target="_blank">http://lists.omniti.com/mailman/listinfo/omnios-discuss</a><br>
<br></blockquote></div><br></div>
</blockquote></div><br></div></div></div>
</blockquote></div><br></div>
_______________________________________________<br>OmniOS-discuss mailing list<br><a href="mailto:OmniOS-discuss@lists.omniti.com" target="_blank">OmniOS-discuss@lists.omniti.com</a><br><a href="http://lists.omniti.com/mailman/listinfo/omnios-discuss" target="_blank">http://lists.omniti.com/mailman/listinfo/omnios-discuss</a><br></div></blockquote></div><br></div></div></div></div></blockquote></div><br></div></div></div>
</blockquote></div><br></div>