<div dir="ltr"><br><div>Hi guys! <br><br>Thanks for the input. I've had a second look at the backplane and you were right Chris, it's not dual port. Should i set mpxio-disable="yes" to disable mpxio on the sas driver or should i leave it as is? My guess would be to disable mpxio to actually see which controller holds which disk, this to be able to spread the mirror-sets across multiple controllers. Would you agree? <br>
<br>Best regards,<br><br>Martin<br></div></div><div class="gmail_extra"><br><br><div class="gmail_quote">On Wed, Mar 26, 2014 at 8:02 PM, Russell Hansen <span dir="ltr"><<a href="mailto:russhan@new-swankton.net" target="_blank">russhan@new-swankton.net</a>></span> wrote:<br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">Because those disks don't have Sun/Oracle firmware I believe you need to update /kernel/drv/scsi_vhci.conf<br>
<br>
scsi-vhci-failover-override =<br>
"SEAGATE ST3300657SS", "f_sym",<br>
"SEAGATE ST4000NM0023", "f_sym";<br>
<br>
You can double-check the VID/PID string by running format -> disk# -> inquiry<br>
<br>
-Russ<br>
<br>
<br>
<br>
From: OmniOS-discuss [<a href="mailto:omnios-discuss-bounces@lists.omniti.com">omnios-discuss-bounces@lists.omniti.com</a>] on behalf of Chris Ferebee [<a href="mailto:cf@ferebee.net">cf@ferebee.net</a>]<br>
<br>
Sent: Wednesday, March 26, 2014 10:33 AM<br>
<br>
To: <a href="mailto:omnios-discuss@lists.omniti.com">omnios-discuss@lists.omniti.com</a><br>
<br>
Subject: Re: [OmniOS-discuss] Multipathing, only one path visible - there ought to be two, what am i doing wrong?<br>
<div class="HOEnZb"><div class="h5"><br>
<br>
<br>
<br>
<br>
<br>
Martin,<br>
<br>
<br>
<br>
Are you sure you have SAS expanders in your backplane? Supermicro will sell you the same chassis with or without expanders, with almost identical model numbers.<br>
<br>
<br>
<br>
You’ve described a typical JBOD configuration (i. e., no expanders): Each LSI 2308 has 8 SAS/SATA ports, 4 ports on each of 2 Mini-SAS SFF8087 connectors. Thus, with 3 controllers you are running 3 x 8 = 24 SAS ports to the backplane.<br>

<br>
<br>
<br>
Do you have the exact model number of the chassis or backplane?<br>
<br>
<br>
<br>
Best,<br>
Chris<br>
<br>
<br>
Am 26.03.2014 um 14:05 schrieb Nitram Grebredna <<a href="mailto:nitram@konsortit.se">nitram@konsortit.se</a>>:<br>
<br>
<br>
<br>
<br>
<br>
<br>
<br>
<br>
<br>
<br>
<br>
<br>
<br>
<br>
<br>
<br>
Hi!<br>
<br>
<br>
<br>
<br>
I'm having issues with multipathing, and i cant seem to figure out what is wrong.<br>
<br>
<br>
<br>
<br>
<br>
The setup is a Supermicro 24 disk-box with 3 controllers (1 pcs internal SAS2308, two 9207i-cards, same firmware on all units), identified as follows:<br>
<br>
<br>
<br>
Num   Ctlr            FW Ver        NVDATA        x86-BIOS         PCI Addr<br>
<br>
----------------------------------------------------------------------------<br>
<br>
<br>
<br>
0  SAS2308_2(D1)   18.00.00.00    11.00.00.05    07.33.00.00     00:01:00:00<br>
<br>
1  SAS2308_2(D1)   18.00.00.00    11.00.00.05    07.33.00.00     00:02:00:00<br>
<br>
2  SAS2308_2(D1)   18.00.00.00    11.00.00.05    07.33.00.00     00:03:00:00<br>
<br>
<br>
<br>
<br>
The machine has 12 ST4000NM0023 (seagate 4TB DP) disks in it and a couple or bootdisks. The controllers are connected via 2 cables per controller to the backplane/expander. I've Installed latest stable omnios on it.<br>

<br>
<br>
<br>
<br>
Excerpt from dmesg:<br>
<br>
<br>
<br>
[...]<br>
<br>
<br>
<br>
genunix: [ID 936769<br>
<a href="http://kern.info" target="_blank">kern.info</a>] mpt_sas2 is /pci@0,0/pci8086,e06@2,2/pci1000,3020@0<br>
<br>
scsi: [ID 583861<br>
<a href="http://kern.info" target="_blank">kern.info</a>] mpt_sas7 at mpt_sas2: scsi-iport 4<br>
<br>
genunix: [ID 936769<br>
<a href="http://kern.info" target="_blank">kern.info</a>] mpt_sas7 is /pci@0,0/pci8086,e06@2,2/pci1000,3020@0/iport@4<br>
<br>
genunix: [ID 408114<br>
<a href="http://kern.info" target="_blank">kern.info</a>] /pci@0,0/pci8086,e06@2,2/pci1000,3020@0/iport@4 (mpt_sas7) online<br>
<br>
scsi: [ID 583861<br>
<a href="http://kern.info" target="_blank">kern.info</a>] sd11 at scsi_vhci0: unit-address g5000c50057c1fce3: conf f_sym<br>
<br>
genunix: [ID 936769<br>
<a href="http://kern.info" target="_blank">kern.info</a>] sd11 is /scsi_vhci/disk@g5000c50057c1fce3<br>
<br>
genunix: [ID 408114<br>
<a href="http://kern.info" target="_blank">kern.info</a>] /scsi_vhci/disk@g5000c50057c1fce3 (sd11) online<br>
<br>
genunix: [ID 483743<br>
<a href="http://kern.info" target="_blank">kern.info</a>] /scsi_vhci/disk@g5000c50057c1fce3 (sd11) multipath status: degraded: path 4 mpt_sas15/disk@w5000c50057c1fce1,0 is online<br>
<br>
scsi: [ID 583861<br>
<a href="http://kern.info" target="_blank">kern.info</a>] mpt_sas11 at mpt_sas1: scsi-iport 2<br>
<br>
genunix: [ID 936769<br>
<a href="http://kern.info" target="_blank">kern.info</a>] mpt_sas11 is /pci@0,0/pci8086,e04@2/pci1000,3020@0/iport@2<br>
<br>
genunix: [ID 408114<br>
<a href="http://kern.info" target="_blank">kern.info</a>] /pci@0,0/pci8086,e04@2/pci1000,3020@0/iport@2 (mpt_sas11) online<br>
<br>
scsi: [ID 583861<br>
<a href="http://kern.info" target="_blank">kern.info</a>] sd2 at scsi_vhci0: unit-address g5000c50057ca74bb: conf f_sym<br>
<br>
genunix: [ID 936769<br>
<a href="http://kern.info" target="_blank">kern.info</a>] sd2 is /scsi_vhci/disk@g5000c50057ca74bb<br>
<br>
genunix: [ID 408114<br>
<a href="http://kern.info" target="_blank">kern.info</a>] /scsi_vhci/disk@g5000c50057ca74bb (sd2) online<br>
<br>
<br>
<br>
[...]<br>
<br>
<br>
<br>
<br>
Excerpt from mpathadm:<br>
<br>
<br>
<br>
# mpathadm list lu<br>
<br>
        /dev/rdsk/c1t5000C5006C0BF63Fd0s2<br>
<br>
                Total Path Count: 1<br>
<br>
                Operational Path Count: 1<br>
<br>
        /dev/rdsk/c1t5000C5006C0B29C7d0s2<br>
<br>
                Total Path Count: 1<br>
<br>
                Operational Path Count: 1<br>
<br>
        /dev/rdsk/c1t5000C50057C1F5BFd0s2<br>
<br>
                Total Path Count: 1<br>
<br>
<br>
<br>
[...]<br>
<br>
<br>
<br>
<br>
<br>
<br>
Excerpt from format:<br>
<br>
<br>
<br>
# format<br>
<br>
Searching for disks...done<br>
<br>
<br>
<br>
<br>
<br>
AVAILABLE DISK SELECTIONS:<br>
<br>
       0. c1t5000C5006C0B29C7d0 <SEAGATE-ST3300657SS-0008 cyl 36469 alt 2 hd 255 sec 63><br>
<br>
          /scsi_vhci/disk@g5000c5006c0b29c7<br>
<br>
       1. c1t5000C5006C0BF63Fd0 <SEAGATE-ST3300657SS-0008 cyl 36469 alt 2 hd 255 sec 63><br>
<br>
          /scsi_vhci/disk@g5000c5006c0bf63f<br>
<br>
       2. c1t5000C50057C1F5BFd0 <SEAGATE-ST4000NM0023-0003-3.64TB><br>
<br>
          /scsi_vhci/disk@g5000c50057c1f5bf<br>
<br>
       3. c1t5000C50057C1FCE3d0 <SEAGATE-ST4000NM0023-0003-3.64TB><br>
<br>
          /scsi_vhci/disk@g5000c50057c1fce3<br>
<br>
<br>
<br>
[...]<br>
<br>
<br>
<br>
<br>
If i set mpxio-disable="yes"; in mpt_sas.conf the error above obviously dissapears and also i can see the 'real' device/controller id's when issuing the format command.<br>
<br>
<br>
<br>
<br>
<br>
If things were working correctly i assume i would see a total path count of 2 per disk, and the multipath status wouldn't be set as degraded in the log? What am i doing wrong? I've asked google and since they dont know the answer to the question i'd thought<br>

 i'd try a post here ;)<br>
<br>
<br>
<br>
<br>
Thanks in advance for any help,<br>
<br>
<br>
<br>
<br>
Martin<br>
<br>
<br>
<br>
<br>
<br>
_______________________________________________<br>
<br>
OmniOS-discuss mailing list<br>
<br>
<a href="mailto:OmniOS-discuss@lists.omniti.com">OmniOS-discuss@lists.omniti.com</a><br>
<br>
<a href="http://lists.omniti.com/mailman/listinfo/omnios-discuss" target="_blank">http://lists.omniti.com/mailman/listinfo/omnios-discuss</a><br>
<br>
<br>
<br>
<br>
<br>
<br>
_______________________________________________<br>
OmniOS-discuss mailing list<br>
<a href="mailto:OmniOS-discuss@lists.omniti.com">OmniOS-discuss@lists.omniti.com</a><br>
<a href="http://lists.omniti.com/mailman/listinfo/omnios-discuss" target="_blank">http://lists.omniti.com/mailman/listinfo/omnios-discuss</a><br>
</div></div></blockquote></div><br></div>