Stenulls ESXi bygge

Hårdvara inköpt och bygget så gott som färdigställt. Rensar lite i OP och lägger till viktiga saker som dykt upp under resans gång.

Hårdvara:
Mobo: Supermicro X10SL7-F
Minnen: Samsung Server DDR3L PC12800/1600MHz ECC CL11 LV 8GB (M391B1G73QH0-YK0) 3st stickor till en början med
Cpu: xeon E3-1240v3
Datastore: 3 * 128gb ssd
Freenas pool 5 * WD red 3tb
NIC: Intel quad gbit PCIe

Inköpslistan

Saker som dykt upp och kan vara värt att tänk på

• Kingston minnen är ajabaja för detta moderkort!

• Chipset Intel® C222 Express PCH är så kallad mjukvaru-RAID. ESXi stöder Ej detta default. Värt att tänka på om man tänkte ha en array för datastores. Om LSI 2308 är upptagen på annat håll är det att införskaffa ett RAID-kort. Forskning pågår...

• PCIe NIC dök ej upp i ESXi. Åtgärdades genom att aktivera "Detect Non-Compliance Device" i BIOS.

• Kunde ej skapa Datastore på två av SSD. Detta pga där fanns partitioner på dessa. Här finns en beskrivning på hur man tar bort partitioner via ESXi shell.

  Visa innehåll

  Useful commands:

  # esxcfg-scsidevs -l

  this lists the disk devices, the device file will be /dev/disks/<NAME>

  output looks like:

  t10.ATA_____ST3320620AS_________________________________________6QF1PZXB

  Device Type: Direct-Access

  Size: 305245 MB

  Display Name: Local ATA Disk (t10.ATA_ST3320620AS_6QF1PZXB)

  Multipath Plugin: NMP

  Console Device: /vmfs/devices/disks/t10.ATA_____ST3320620AS_________________________________________6QF1PZXB

  Devfs Path: /vmfs/devices/disks/t10.ATA_____ST3320620AS_________________________________________6QF1PZXB

  Vendor: ATA Model: ST3320620AS Revis: 3.AA

  SCSI Level: 5 Is Pseudo: false Status: on

  Is RDM Capable: false Is Removable: false

  Is Local: true Is SSD: false

  Other Names:

  vml.010000000020202020202020202020202036514631505a5842535433333230

  VAAI Status: unknown

  # partedUtil get /dev/disks/t10.ATA_...

  this shows the partitions on the device

  output looks like:

  38913 255 63 625142448

  1 63 514079 130 128

  2 514080 625137344 253 0

  this disk has 2 partitions, numbers 1 and 2

  # partedUtil delete /dev/disks/t10.ATA_... 2

  deletes partition 2

  # partedUtil delete /dev/disks/t10.ATA_... 1

  deletes partition 1

  Dold text

Tack för input. Jag försöker förstå varför och vilka konsekvenser det får men hittar inga svar i manualen. Har brädan inte stöd för inbyggd cpu? Och en fråga som dök upp i huvudet, skulle det gå att köra Vt-d till en vm på den inbyggda gpun om man väljer en E3-12x5 cpu?
Misstänker att IPMI har egen grafikdel och därför som gpu inte behövs?

ser att där inte finns någon hdmi, DisplayPort eller liknande så blir ju svårt att få ut någon vettig signal från en integrerad gpu tror polletten börjar trilla ner där.
Då lutar det åt 1240 eller 1230 så länge det inte finns något bra argument för 1270 eller 1280.
Vad jag kan se så är det bara lite mer GHz som skiljer dem. Stämmer det?
Och vad jag förstått så har inte det så stor inverkan på en virtuell miljö så då kan jag lika bra köra på 1230?

Ja 300:- för den extra 0.1 GHz från 1230 till 1240 känns obefogat. Jag kan inte se någon annan skillnad på de två modellerna, men jag missar kanske något.
Min kännsla säger att 1230 räcker för min leksak, men det hade varit bra att förankra det i verkligeheten. Jag får nog heltenkelt köra på den och räcker det inte till så blir det att byta cpu

Ska du virtualizera NASen?
Jag var först inne på Supermicro X1SLM-F men X10SL7-F har en SAS controller som jag kan göra Vt-d till NASen med. Då slipper jag köpa ett IBM 1015 till detta. Får iof en pci platts mindre vilket som..
På X10SL7-F har man mycket riktigt bara 2 sata6 portar men 8 sas portar som går att köra sata6 diskar på = 10 sata6 diskar allt som allt
Och förstår jag det rätt (Någon som har bättre vetande om SAS måste kontra mig här) så kan man köra en omvänd fan-out kontakt på SAS portarna för att koppla till ett SAS bakplan och sedan vidare till fler bakplan med expanders och då kan man få in rätt många diskar... Men jag kan ha missförstått detta helt.

Visst tusan, det hade jag helt glömt, läste det för någon vecka sedan. Tack för heads up!

Ingen fara

Vad kör du på din maskin? Och vilken modell har du på minnena?
Jag funderar på att ha en Noctua NH-D14 som kylning, den borde kunna köra på riktigt låga varv och ändå hålla cpun kall tänker jag..
Min router står idag i köket/vardagsrummet och för att slippa dra ny TP så tänkte jag sätta servern där så ljudnivån är rätt viktig för mig.

Förresten kan någon vänlig själ ge förslag på AMD diton. Känner mig smått vilsen på AMD marknaden...
Krav dubbla Ethernet interface, IPMI med kvm på eget interface, svälja mer än 32gb ram.
Börjar känna att 32gb ram kan bli lite trångt iom freenas ska rulla på maskinen...

Tack på förhand
/t

Will do! Ska bara få de sista bitarna på plats i planeringen sen blir det shopping och bygge av

Frugan tyckte vi skulle köpa hus så leksakskontot blev fruset tillsvidare...

Ett år och ett hus senare blir det åka av lite tajtare budget så det blir bara inköp av det viktigaste

ett 10" vägghängt rack fick jag platts med

Kingstons minnen ska man visst akta sig för så jag kör på Samsung ist
https://forums.freenas.org/index.php?threads/ram-recommendati...

3st 8gb stickor blir det freenas kommer få 16gb direkt. Kompletterar med en extra sticka lite längre fram, budgeten tillät inte fyra direkt IOM kingston minnena blev bytts till samsung :/
Datastore får vara en 60gb ssd så länge men tänker mig speglade intel 520 240gb senare. Det mesta nu i början körs egentligen från ram.
Kommer förmodligen inte ha så jättestora maskiner på den. Och krisar det så får jag köra några maskiner från nasen.
Nasen blir freenas som får direktaccess till LSI kontrollern. Sitter 4*500gb i den idag men planen är att byta diskanrna till 3tb alt 4tb. Det blir i upgrade fasen efter julstöket med lite tur kanske diskarna är på rea nu på fredag

Med lite tur kan jag få loss 3st 120gb ssd från jobb blir att köra dom i raid5 som datastore isf

Jag måste varit extra snäll i år fick igenom att köpa nya hårddiskar! Sitter på jobb med 5st RED 3tb och väntar på att få åka hem

Burken mer eller mindre byggd nu... skall "bara" installera allt.

Startade åbäket igår vilken fröjd det är med IPMI!!

Jaha då stötte man på första bakslaget.... verkar som att RAID byggda i intel controllern inte stöds i ESXi :/
Byggde en raid5 med tre diskar men ESXi ser de individuella diskarna...
lite sökande så verkar det som att den controllern är ett "mjukvaru raid tjosan"?? och detta funkar inte i esxi...
Någon som har bra koll som kan kommentera? är jag rökt? är det bara att bita ihop och ha tre separata datstores ist? i förlängningen spelar det ju egentligen inte så stor roll prestandamessigt, "bara" pariteten jag förlorar...

ok, läst lite... känns som att jag kör med 3x datastores så länge. Sen när ekonomin hämtat sig efter bygget så blir det att köpa ett raid kort och flytta maskinerna dit i efterhand. Vill inte meka med "fakeraid" som kanske pajar i nästa upgradering av hypervisorn :/