<div dir="ltr">Yep, I am another <span style="font-size:12.8px">crypto currencies miner.  But in all truth, I find the hardware challenge more fun then the bitcoin stuff.</span><div><span style="font-size:12.8px"><br></span></div><div><span style="font-size:12.8px">Power is not the issue (any more).  I have 2Kw worth of PSU. 2X HP Common slot 750W PSU + Thermaltake 500W PSU.  Currently, with all 8 cards running full tilt, across two motherboards, and I am drawing 960~1000W.  Those numbers are according to a Kill-A-Watt meter.</span></div><div><span style="font-size:12.8px"><br></span></div><div><span style="font-size:12.8px">Hardware wise, this is all x86_64.  </span></div><div><span style="font-size:12.8px"><br></span></div><div><span style="font-size:12.8px">Arthur: Thanks for the details.  I have a board that with give me a "missing memory"  beep code with more then 6 GPUs.  Now I understand why!</span></div><div><span style="font-size:12.8px"><br></span></div><div><span style="font-size:12.8px">How can I track down how much system DRAM a GPU is using?  These are all the newest Nvidia Pascal based cards.  Mostly GTX 1070's.</span></div><div><span style="font-size:12.8px"><br></span></div><div>On an interesting note, one of my oldest motherboards, a Gigabyte GA-970A-UD3 will boot with all 8 cards, but gives me the no VGA beep code.  Serial console for the win!</div><div><br></div><div>Is this just a BIOS level issue?  Or is there some hardware component I should be aware of?</div><div><br></div><div>Thanks for the help.</div><div>-Adam</div><div><br></div></div><div class="gmail_extra"><br><div class="gmail_quote">On Thu, Jan 4, 2018 at 8:14 PM, Zoran Stojsavljevic <span dir="ltr"><<a href="mailto:zoran.stojsavljevic@gmail.com" target="_blank">zoran.stojsavljevic@gmail.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><span class="">> I am totally off the deep end and don't know where else to turn<br>
> for help/advice.  I am trying to get 16 GPU's on one motherboard.<br>
<br>
</span>Hmmmm. Yet another crypto currencies miner. ;-)<br>
<span class=""><br>
> Whenever I attach more then 3~5 GPU's to a single motherboard,<br>
> it fails to post.  To make matters worse, my post code reader(s) don't<br>
> seem to give me any good error codes.  Or at least nothing I can go on.<br>
<br>
</span>You should have at minimum 1KW PSU for this job. At least... I guess,<br>
even more (for 16 discrete GPUs) 2 x 1KW would be reasonable.<br>
<br>
Zoran<br>
_______<br>
<div class="HOEnZb"><div class="h5"><br>
On Thu, Jan 4, 2018 at 8:38 PM, Adam Talbot <<a href="mailto:ajtalbot1@gmail.com">ajtalbot1@gmail.com</a>> wrote:<br>
> -Coreboot<br>
> I am totally off the deep end and don't know where else to turn for<br>
> help/advice.  I am trying to get 16 GPU's on one motherboard. Whenever I<br>
> attach more then 3~5 GPU's to a single motherboard, it fails to post.  To<br>
> make matters worse, my post code reader(s) don't seem to give me any good<br>
> error codes.  Or at least nothing I can go on.<br>
><br>
> I am using PLX PEX8614 chips (PCIe 12X switch) to take 4 lanes and pass them<br>
> to 8 GPU's, 1 lane per GPU. Bandwidth is not an issues as all my code runs<br>
> native on the GPUs. Depending on the motherboard, I can get up to 5 GPU's to<br>
> post.  After many hours of debugging, googling, and trouble shooting, I am<br>
> out of ideas.<br>
><br>
> At this point I have no clue. I think there is a hardware, and a BIOS<br>
> component? Can you help me understand the post process and where the hang up<br>
> is occurring?  Do you think Coreboot will get around this hangup and, if so,<br>
> can you advise a motherboard for me to test with?<br>
><br>
> Its been a long time sense I last compiled linuxbios. ;-)<br>
><br>
> Thanks<br>
> -Adam<br>
><br>
</div></div><span class="HOEnZb"><font color="#888888">> --<br>
> coreboot mailing list: <a href="mailto:coreboot@coreboot.org">coreboot@coreboot.org</a><br>
> <a href="https://mail.coreboot.org/mailman/listinfo/coreboot" rel="noreferrer" target="_blank">https://mail.coreboot.org/<wbr>mailman/listinfo/coreboot</a><br>
</font></span></blockquote></div><br></div>