ESXi-bygge för labbande, HTPC och lagring/backup

Hej!

Jag har funderat ett tag på att bygga en ESXi-server. Huvudanledningen till detta är väl mest labbande. Jag skulle vilja pröva köra lite olika operativsystem i inlärningssyfte samt lära mig mer hur man bygger upp nätverk med VLAN, DMZ och liknande. Sen om det är möjligt skulle jag vilja få in både funktionalitet för lagring/backup och HTPC. Helt enkelt för att slippa ha en massa olika maskiner som står och drar ström.

Jag kommer med största sannolikhet inte att köra något som kräver några enorma resurser, men jag kör hellre på lite för bra komponenter än tvärtom. Det jag kommit fram till hittills är:

• Moderkort: ASRock C226M WS

• Processor: Intel Xeon E3-1231v3 3,4GHz

• Minne: Kingston KVR1333D3E9SK2/16G

• Lagring (för virtuella maskiner): Samsung 850 EVO Series MZ-75E250B 250GB

• Chassi: Lian Li PC-V351

• Nätaggregat: Be-Quiet Straight Power 10 400W

Min tanke är att skippa lagrings-biten till en början eftersom jag inte känner att jag har det behovet just för tillfället. I så fall blir det att jag utökar med några hårddiskar (och kanske mer minne) vid ett senare tillfälle.

Så nu undrar jag:

• Skulle komponenterna över huvud taget fungera med ESXi?

• Jag har inte tagit med något grafikkort eftersom jag inte har en aning om vad som fungerar eller inte. Finns det något goto-kort som borde fungera med GPU passthrough?

• Är moderkortet något att ha? Borde jag satsa på ett Supermicro-kort?

Det jag har som mål är att få nåt som är hyfsat strömsnålt och tyst. Skulle även vilja hålla mig under 10 000 kronor på den första vändan (utan lagrings-diskar då).

Några kommentarer till detta?

Tack på förhand för all hjälp och feedback!

Min tanke var att satsa på server-grejer ifall det blir så att jag vid ett senare tillfälle vill köra lite seriösare lagring med ZFS. Det kanske blir overkill, men det känns bättre med en "riktig" server. Men jag ska fundera lite, kanske blir så att jag snålar ändå.

Vad kör du för saker på din?

Aha, där ser man. Bild skulle jag gärna vilja ha! Tror du ett X10SLL-F skulle fungera? Skillnaden mot X10SL7-F verkar vara att den saknar LSI2308 som du nämner. Den verkar däremot innehålla integrerad grafik, vilket vore trevligt så jag slipper köra på en CPU som innehåller det.
Är det i värsta fall möjligt att konfigurera allt över IPMI? Eller kommer det till en början krävas någon grafiklösning?

Japp, passthrough ska funka i grejerna jag kollat på. Och precis, jag har hört att det ska finnas bättre stöd för AMD. Det jag tänkte på var nåt litet billigt kort som Radeon R5 230.
Dock vore det trevligt om man kunde hitta ett kort som man vet någon har lyckats få till passthrough med. Har prövat googla lite, men tycker mest jag hittar äldre inlägg (typ från 2013). Men får söka vidare.

Tack för hjälpen hittills!

Det blev så att jag köpte grejerna jag pratade om (med ett Supermicro X10SLL-F) så tänkte ge en liten uppdatering.

För att svara på min egen fråga angående IPMI så är svaret ja, allt går att konfigurera över nätet. Jag kopplade bara in den dedikerade IPMI-porten till min router och lät den få en adress genom DHCP. Sen konfigurerade jag BIOS och installerade ESXi i webbgränssnittet. Helt sjukt smidigt.

ESXi-installationen gick bra, alla komponenter hittades out of the box. Det första jag gjorde var att installera en Windows 8-maskin för att testa att GPU passthrough fungerade, vilket det också gjorde. Jag fick däremot bluescreens vid uppgradering till 8.1 vilket var relaterat till ljuddrivrutinerna till AMD-kortet. Efter en omstart av hosten fungerade det dock bra igen.
Så HTPC-biten fungerar hittills klockrent. Jag fjärrstyr maskinen med en kombination av RDP, VNC och Remote Mouse. Ska dock införskaffa trådlöst tangentbord och mus för att slippa detta i fortsättningen.

Sen har jag konfigurerat upp nätet så att allt ligger bakom en virtuell brandvägg (även mina fysiska enheter). Har delat upp det i ett LAN och ett management-nät med hjälp av VLAN. Nästa steg blir att införskaffa en VLAN-kapabel switch så att jag kan dela in mina fysiska enheter i olika VLAN.

Jag är väldigt nöjd med hur allt har fungerat hittills i alla fall. Administrationen av ESXi tycker jag är riktigt enkel (kör med vSphere Client). Så jag rekommenderar denna lösning ifall någon annan är ute efter en kombinerad HTPC/virtualiserings-maskin.

Herregud vad mycket grejer man kan trycka in. Drygt att det inte gick att uppgradera ordentligt heller! Är det lätt att backa tillbaka till en äldre version med ESXi?

Ja, verkligen. Man förväntar sig som att åtminstone någonting ska strula.

rem 10.10.10.22 vcentersrv v5.5
c:
cd \

"C:\Program Files (x86)\VMware\VMware vSphere CLI\bin\esxcli.exe" -s 10.10.10.23 -u root -p FiktivitPassword system version get
if errorlevel 1 goto no23
copy /y c:\esxi23.backup.tgz \\N54L\smb500GB\vmware-bck\esxi23.backup.tgz
perl "C:\Program Files (x86)\VMware\VMware vSphere CLI\bin\vicfg-cfgbackup.pl" --server 10.10.10.23 --username root --password FiktivitPassword --save c:\esxi23.backup.tgz
perl esx-health.pl --server 10.10.10.23 --username root --password FiktivitPassword --mailhost mail2.bahnhof.se --maildomain andersbrink.se --mailfrom anders@brink.guru --mailto anders@brink.guru --concise --memwarnpc 90
goto go24

:no23
PowerShell -Command "& {Send-MailMessage -from 'anders@brink.guru' -to 'anders@brink.guru' -subject 'ESXI 10.10.10.23 is down' -body 'ESXI 10.10.10.23 is down' -smtpServer mail2.bahnhof.se }"
goto go24

:go24
rem
"C:\Program Files (x86)\VMware\VMware vSphere CLI\bin\esxcli.exe" -s 10.10.10.24 -u root -p FiktivitPassword system version get
if errorlevel 1 goto no24
copy /y c:\esxi24.backup.tgz \\N54L\smb500GB\vmware-bck\esxi24.backup.tgz
perl "C:\Program Files (x86)\VMware\VMware vSphere CLI\bin\vicfg-cfgbackup.pl" --server 10.10.10.24 --username root --password FiktivitPassword --save c:\esxi24.backup.tgz
perl esx-health.pl --server 10.10.10.24 --username root --password FiktivitPassword --mailhost mail2.bahnhof.se --maildomain andersbrink.se --mailfrom anders@brink.guru --mailto anders@brink.guru --concise --memwarnpc 90
goto go25

:no24
PowerShell -Command "& {Send-MailMessage -from 'anders@brink.guru' -to 'anders@brink.guru' -subject 'ESXI 10.10.10.24 is down' -body 'ESXI 10.10.10.24 is down' -smtpServer mail2.bahnhof.se }"
goto end

:end

Tack för scriptet! Ska kika på det.

Det fungerade helt ok. Körde lite Spelunky på TV:n igår.

Jag körde PCI passthrough på en USB host controller för att kunna plugga in min Xbox 360-kontroll. Då dök även en "ESXi"-enhet upp i Windows. Kan jag ha lyckats få med mig själva ESXi-disken in i Windows-gästen? (Jag kör ESXi på en USB-sticka.) Vore väldigt konstigt om det är möjligt känns det som.

Jag verkar ha råkat ut för det här: Unable to disable USB controller for passthrough after it is enabled (2068645). Vilket innebär att inga inställningar sparas av ESXi.

Jag löste det genom att helt enkelt flytta USB-stickan som ESXi ligger på till en annan USB controller, boota, ta bort controllern från passthrough och flytta tillbaka stickan igen. Trodde jag hade tappat en VM som jag lagt ner några timmar på att konfigurera. Men disken låg kvar, så det var bara att skapa en ny VM och återanvända den.

Så mitt tips är att vara försiktig med vilken USB controller man kör passthrough på! Jag borde nog ha läst på lite innan jag prövade det där.