ESXi bootar om utan förvarning eller anledning

Kör ESXi 6 med diverse vm som två ggr på kort tid (~1,5 månad) har bootat om/resettat,
I loggar m.m så ser jag ingen anledning till varför detta skulle ske. Båda ggr har varit vid olika tid på dygnet.

Komponenter i burken är som följer:
Moderkort: Asus Z9PA-D8
CPU: Intel Xeon E5-2670 (2st)
CPU-fläkt: Noctua NH-U9S (2st)
RAM: 64GB ECC (Samsung har jag för mig)
HDD: WD Red 3TB (6st)
SSD: 60GB & 256GB (kommer ej ihåg märke)
PSU: EVGA SuperNova 750 B1 NEX750B
UPS: Eaton 5P 850IR (~20% belastning)
+ diverse chassifläktar

Låter i mina öron nästan direkt som problem med nätagget, men det är inga tunga saker som har körts när den har "dött"
så frågan är om det är jag i min okunskap som har missat något uppenbart?
Eller det är så enkelt att jag måste byta nätagg? Är nog fortfarande garanti men kul att vara utan i flera veckor.

Alla förslag/svar uppskattas.
Mvh

Glömde givetvis nämna att jag har en ups. Eaton 5P 850IR.
Belastningen på den ligger på ~20% Uppdaterar första inlägget med det.

De enda saker som var igång när den dog senast var Synology (xpenology), Domoticz, Plex, Transmission och 2-3 labb-vm.
M.a.o under 10% belastning om ens så mycket. CPU-temperatur ligger runt 40-45 grader.

Minnestest har jag inte gjort, får kanske försöka ta mig tiden att göra det.

På vilket sätt visar sig hårdvaru/mjukvarufel i bios?
Är inget kritiskt som körs på servern men väntar gärna inte uppåt en månad på eventuell omstart..
Ingen gpu, kör helt headless.

Skickades från m.sweclockers.com

@Sins: Ah på så vis.
Felsökning överlag är inte särskilt roligt, men ett sånt här fel är riktigt trist.
Maskinen har rullat 24/7 i ca ett års tid utan omstart och nu dessa omstarter relativt nära inpå varandra.

Ska köra igång memtest när jag kommer hem från jobbet inatt. Har dock aldrig använt det förr. Hur lång tid kan det tänkas ta per pass med 64GB?

Skickades från m.sweclockers.com

@Danne: Vad jag kunde se i loggar så var det bara ett abrupt slut innan det står att den bootar. Men ska kolla en gång till.

@modaset: Värt en titt, men ska det verkligen ge sig efter så kort tid?

@Sins: Inhandlat i början av förra året, cpu/ram är från ebay, resten köptes nytt. Börjar med memtest ikväll som sagt så förhoppningsvis är det snabbt hittat.

Skickades från m.sweclockers.com

@Micke O: Har innan det här inte haft några som helst problem.

@Mr_Lazy: Jag har dessvärre inga andra ECC-minnen liggandes, men i värsta fall kan jag gå ner till 32GB om det visar sig att en eller flera stickor är dåliga.

@modaset: Alla kondingar ser fina ut, högkvalitetskomponenter av vad jag kunde se, inte den typiska designen med "krysset" på toppen.

@superegg: Har faktiskt varit lite dum/lat gällande min ups, den gör inte annat än skicka mail om strömmen går ner, meningen har varit att ta tag i det men tiden har inte funnits.
Bios är inte uppdaterat.

@Sins: Har gått igenom mina bilder från den tiden nu och hittar dessvärre ingen närbild på cpu. Däremot så är det mig veterligen enbart stepping C2 (SR0KX) som stödjer VT-d och det nyttjar jag, och nu när det är på tal så vill jag minnas att jag var glad för att jag fått tag på "rätt" stepping.

Har nu kört memtest i lite drygt 8h och inga fel är påträffade än. Jag kommer låta det stå igång i ett par timmar till då jag ändå ska var iväg större delen av dagen/kvällen. Har det inte dykt upp några fel efter det så tycker jag att jag borde kunna utesluta fel på minnena åtminstone.

Tack till er alla för alla tips/förslag än så länge, det uppskattas.

Skickades från m.sweclockers.com

@superegg: Har kollat på bios nu, jag har tydligen den nyaste från dess att jag köpte moderkortet.

@grogt: Man kan tycka att det borde leda till PSOD. Just el är det första jag tänker på också, men den har inte legat ens i närheten av gränsen för vad den kan leverera och datorn har inte varit under belastning när det har skett. Har inte varit hemma och haft möjlighet att kolla närmre på loggen. Koppla bort UPS kan jag göra, men har för tillfället inget annat nätagg liggandes så det får i värsta fall beställas/köpas.

Memtest har stått igång i ca 24h nu utan error, det i kombination med att det som sagt borde leda till PSOD och inte reset tar jag som att felet borde ligga någon annanstans.

Får kolla loggar och lite annat imorgon, nu kallar nämligen sängen.

Har kollat en del på loggarna nu och ser som sagt inget annat än att den har resettat.

Normal omstart: (från igår)

heartbeat: up 10d9h23m9s, 4 VMs; [[35447 vmx 972996kB] [35533 vmx 1695744kB] [35658 vmx 4194304kB]] [[671939 sh 0%max] [671941 python 0%max] [671942 hostd-probe 0%max]]
heartbeat: up 10d10h23m9s, 4 VMs; [[35447 vmx 972984kB] [35533 vmx 1695744kB] [35658 vmx 4194304kB]] [[674453 sh 0%max] [674455 python 0%max] [674456 hostd-probe 0%max]]
bootstop: Host is powering off
bootstop: Host has booted
heartbeat: up 0d0h22m58s, 4 VMs; [[35455 vmx 745460kB] [35538 vmx 1005568kB] [35697 vmx 4194304kB]] [[36504 sh 0%max] [36505 sh 0%max] [36519 localcli 0%max]]
heartbeat: up 0d1h22m58s, 4 VMs; [[35455 vmx 660936kB] [35538 vmx 1005568kB] [35697 vmx 4194304kB]] [[38980 sh 0%max] [38981 sh 0%max] [38996 localcli 0%max]]

Startat om av sig själv: (från senast den dog)

heartbeat: up 38d17h0m16s, 5 VMs; [[35919 vmx 4185756kB] [35763 vmx 4194304kB] [37708 vmx 7524352kB]] [[35763 vmx 0%max] [35919 vmx 0%max] [37708 vmx 0%max]]
heartbeat: up 38d18h0m15s, 5 VMs; [[35919 vmx 4185756kB] [35763 vmx 4194304kB] [37708 vmx 7524352kB]] [[35763 vmx 0%max] [35919 vmx 0%max] [37708 vmx 0%max]]
bootstop: Host has booted
heartbeat: up 0d0h23m9s, 4 VMs; [[35533 vmx 716732kB] [35447 vmx 778436kB] [35658 vmx 4194304kB]] [[36442 sh 0%max] [36443 hostd-probe 0%max] [36459 logger 0%max]]
heartbeat: up 0d1h23m8s, 4 VMs; [[35533 vmx 753592kB] [35447 vmx 792324kB] [35658 vmx 4194304kB]] [[38923 sh 0%max] [38924 python 0%max] [38940 logger 0%max]]

Hittade däremot detta, repeteras många ggr:

cpu6:32821)NMP: nmp_ThrottleLogForDevice:3178: Cmd 0x1a (0x439d805e5c40, 0) to dev "mpx.vmhba33:C0:T0:L0" on path "vmhba33:C0:T0:L0" Failed: H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x20 0x0. Act:NONE
cpu6:32821)ScsiDeviceIO: 2629: Cmd(0x439d805e5c40) 0x1a, CmdSN 0x4f8e from world 0 to dev "mpx.vmhba33:C0:T0:L0" failed H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x20 0x0.
cpu7:32822)NMP: nmp_ThrottleLogForDevice:3178: Cmd 0x9e (0x439d80618b40, 0) to dev "mpx.vmhba32:C0:T0:L0" on path "vmhba32:C0:T0:L0" Failed: H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x20 0x0. Act:NONE
cpu7:32822)NMP: nmp_ThrottleLogForDevice:3178: Cmd 0x1a (0x439d80618b40, 0) to dev "mpx.vmhba32:C0:T0:L0" on path "vmhba32:C0:T0:L0" Failed: H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x24 0x0. Act:NONE
cpu7:32822)ScsiDeviceIO: 2645: Cmd(0x439d80618b40) 0x1a, CmdSN 0x4fab from world 0 to dev "mpx.vmhba32:C0:T0:L0" failed H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x24 0x0.
cpu7:32822)NMP: nmp_ThrottleLogForDevice:3178: Cmd 0x9e (0x439d88656e80, 0) to dev "mpx.vmhba32:C0:T0:L0" on path "vmhba32:C0:T0:L0" Failed: H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x20 0x0. Act:NONE
cpu7:32822)NMP: nmp_ThrottleLogForDevice:3178: Cmd 0x1a (0x439d88656e80, 0) to dev "mpx.vmhba32:C0:T0:L0" on path "vmhba32:C0:T0:L0" Failed: H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x24 0x0. Act:NONE
cpu7:32822)ScsiDeviceIO: 2645: Cmd(0x439d88656e80) 0x1a, CmdSN 0x4fb1 from world 0 to dev "mpx.vmhba32:C0:T0:L0" failed H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x24 0x0.
cpu7:32822)NMP: nmp_ThrottleLogForDevice:3178: Cmd 0x9e (0x439d805fe800, 0) to dev "mpx.vmhba32:C0:T0:L0" on path "vmhba32:C0:T0:L0" Failed: H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x20 0x0. Act:NONE
cpu7:32822)NMP: nmp_ThrottleLogForDevice:3178: Cmd 0x1a (0x439d805fe800, 0) to dev "mpx.vmhba32:C0:T0:L0" on path "vmhba32:C0:T0:L0" Failed: H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x24 0x0. Act:NONE
cpu7:32822)ScsiDeviceIO: 2645: Cmd(0x439d805fe800) 0x1a, CmdSN 0x4fb7 from world 0 to dev "mpx.vmhba32:C0:T0:L0" failed H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x24 0x0.

Här är enheten i fråga:

usb.vmhba32-usb.0:0-mpx.vmhba32:C0:T0:L0
   UID: usb.vmhba32-usb.0:0-mpx.vmhba32:C0:T0:L0
   Runtime Name: vmhba32:C0:T0:L0
   Device: mpx.vmhba32:C0:T0:L0
   Device Display Name: Local USB Direct-Access (mpx.vmhba32:C0:T0:L0)
   Adapter: vmhba32
   Channel: 0
   Target: 0
   LUN: 0
   Plugin: NMP
   State: active
   Transport: usb
   Adapter Identifier: usb.vmhba32
   Target Identifier: usb.0:0
   Adapter Transport Details: Unavailable or path is unclaimed
   Target Transport Details: Unavailable or path is unclaimed
   Maximum IO Size: 122880

Försökt tyda vad felet kan vara, men med den tid jag har att lägga för tillfället är tyvärr markant mindre än vad jag själv hade önskat. Jag får ta lite då och då helt enkelt.

Som det står just nu så ska jag kolla över kylningen i chassit och se om jag kan få det mer effektivt och beställa hem ett nytt nätagg för att vara på säkra sidan gällande det, i värsta fall så har jag ett reserv sen. Är redundanta nätagg i ATX-format något att ha? Går dom att få tag på av oss vanliga dödliga som jobbar ihop sina pengar?

@superegg: ESXi är installerat där, så bootar från usb.

@sweloop64: Det har jag gjort ja, har inte ens tänkt tanken att det kan vara det som strular. Hur känsliga är usb-minnen för värme? Sitter nämligen precis intill moderkortets nord(?)brygga som blir rätt varm. Ska leta fram ett annat och testa.