Lämpligt antal NIC i en server

Permalänk
Medlem

Lämpligt antal NIC i en server

Hej,

Håller på att uppgradera en server för VMs och funderar på om man behöver mer än två NICs?
Har tänkt köra ett antal VMs och Pfsense är en av dessa.
Med två NICs har man WAN och LAN men behöver man flera för övriga funktioner, tex filserver?

Permalänk
Medlem

Beror väl på vad man vill få ut av det. T ex. kanske man vill ha ett för WAN, ett för LAN och ett separat för AP till WLAN om man vill separera det. Sen om man bygger på sin VM-miljö kan det bli intressant med flera NIC:ar om man kombinerar det med en switch som stödjer link aggregration så flera NIC:ar kan kan kombineras för att få upp bandbredden. Eller för den delen bara sprida lasten/få redundans utan LACP funktionen. Detta är väl mest intressant om antalet VM på servern blir många eller om man vill köra VM lagrade på någon form av nätverkslagring via NFS eller iSCSI.

EDIT:

Sitter själv o skissar på hur jag ska byta vidare på nätet till mina esxi hostar här hemma. Just nu ser det ut såhär:

Olika färger på kablarna för olika VLAN. Rött är kontorsnät/management där alla prylar i hemmet pratar med varandra och de VM som de behöver kunna komma åt, grönt är WAN och det är bara PfSenes VM:en som kommer åt det. Dom två övre hostarna ligger i ett kluster så PfSense burken "flyter" mellan dom beroende på last, tillgänglighet osv. tillsammans med dom andra VM i klustret. Sist men inte minst har vi det blå nätet som är storage nätet där trafiken för den delade lagringen på chappie flödar till jarvis och gideon.

Disclaimer: Nu är detta som sagt bara planer i ett tidigt stadie så finns säkert något jag missat eller inte tänkt på. Är ingen expert på nätverk själv, än. Men jobbar på det

Visa signatur

Stationära | Define 7 Compact | RM750x White | X570S AERO G | Ryzen 5 5600x | NH-D15 Chromax | Flare X 4x8GB 3200MHz | RTX 4070 Super | MP600 1TB | 980 1TB | A2000 1TB | 970 EVO 500GB | 850 EVO 500GB |
Acer X34A + 2x Dell U2719D | Wave 1 | Arctis Nova Pro Wireless |
Laptop | Macbook Air M1 2020 | 16GB | 256GB |
3dkatten.se

Permalänk
Medlem

Du behöver i regel minst 2 stycken pNIC. Sen med hjälp av VLAN om enheterna stödjer det så kan Du via en VLAN kapabel nätverksswitch separera trafiken med hjälp av vSwitchar.

Visa signatur

Grundregel för felsökning: Bryt och begränsa.

Permalänk
Rekordmedlem

Så många som behövs för att du ska nå den bandbredd som behövs ? Det kan ju vara lättare att ha fysiska kort konfigurationsmässigt men det går att använda vlan, tänk efter hur du tänker ansluta servern fysiskt för det kan ju vara rätt bökigt att ha olika fysiska nät också speciellt om du behöver dra en massa kabel hit o dit för att ansluta allt, på ett företag kan det kanske vara motiverat att ha flera fysiskt olika nät för att få redundans men hemma är det troligen inte lika viktigt utan det blir antagligen mest bökigt om du har för många fysiskt olika nät.

Visa signatur

R5 5600G, Asus ROG STRIX X470-F Gaming, WD SN850X 2TB, Seasonic Focus+ Gold 650W, Aerocool Graphite v3, Tittar på en Acer ET430Kbmiippx 43" 4K. Lyssnar på Behringer DCX2496, Truth B3031A, Truth B2092A. Har också oscilloskop, mätmikrofon och colorimeter.

Permalänk
Medlem

Beror helt på vad du ska göra. Själv så har jag 8st NIC i varje ESXi server.

Permalänk
Medlem

IPMI kan ju vara bra att ha om man har stöd för det. Finns ju 4-portars nätverkskort på E-bay för inte alltför mycket pengar (max 500:-) då klarar du dig framöver.

Visa signatur

Riggen:ASRock X570M Pro4 - AMD Ryzen 7 3700X - Corsair 32GB DDR4 3200MHz - Corsair MP510 960Gb NVME - EVGA 1080ti SC2 - 3x Samsung 840 500GB - EVGA SuperNOVA G1+ 650W - Fractal Design Meshify C Mini Dark TG
NAS: FreeNAS @ HP Proliant MicroServer Gen 8 - Xeon E3-1230 V2 - 16Gb Kingston ECC RAM - Intel 530 120Gb - IBM m1015/LSI 9220-8i - 4x WD Red 3Tb

Permalänk
Medlem

Från början var jag ute efter en NAS/Backup för att få ordning på de digitala arkiv som jag har. När jag skulle välja HW fann jag att man kunde få en enklare server för samma pris som en NAS och det kändes mera intressant att ha möjlighet att uppgradera, funktionalitet etc.
och på den vägen är det.

Servern skall ta hand om hemmanätverket och de funktioner som behövs. Under den pågående renoveringen har jag passat på att dra kablar för den funktionalitet jag planerat idag så det är mera förberett än i de flesta hus. Har inga färdiga lösningar idag utan bara funderat på vad jag skulle vilja ha. Ideen är att göra systemet flexibelt, säkert och enkelt att underhålla.

WLAN
- Gästnätverk
- Nätverk för de trådlösa enheter som finns i ett hem.
- AP från Ubiquiti.
LAN
- Fast anslutna datorer och mediaenheter.

Router
- Pfsense samt övervakning och loggning av aktiviteter via internet.
Filserver
- Areor med access enbart från LAN.
- Areor som alla behöriga kommer åt från LAN och WLAN, ej Gästnätverket.
- Media som delas globalt via tex. Subsonic.
- Backup.
Styrning av funktioner/logik för "smarta hus"
- Elsystem
- Larm
- IP kamera
- Lagring av vald data från dessa funktionaliteter.
- Dessa skall kunna skicka status utanför huset men inte lyssna på inkommande trafik.
- Kommunikation mellan enheterna.
Windows
- Köra program som enbart finns för Windows, tex. konfigurering av "smarta hus".

Permalänk

@wurpan: Väldigt intressant och snygg lösning. Blev lite sugen på att göra om mitt nät på liknande sätt. Har dock en fråga behöver jag köpa licens för ESXI för klara att att köra cluster?

Visa signatur

Fractal Design Define R5 Svart, Intel Core i7 7700K 4.2 GHz 8MB, Noctua NH-D15, Corsair 32GB (2x16GB) DDR4 2666Mhz CL15, MSI GeForce GTX 1080 Ti 11GB Gaming X, MSI Z270 GAMING M5, Samsung 960 EVO 500GB, EVGA Supernova G2 850W

Permalänk
Medlem

Jag har 2 NIC i servern och 4 i brandväggen. Kör 15 subnet på det, funkar bra.

Visa signatur

Citera för svar

Stora Owncloud/Nextcloud-tråden: http://www.sweclockers.com/forum/122-server/1212245-officiell...
Jobb: Datacenter Manager
Grundare: https://www.hanssonit.se

Permalänk
Medlem

@Joulester: Ja det krävs en licens för vCenter för att komma åt dom funktionerna och för att sedan kunna koppla upp hostarna mot vCenter måste även dom ha betalda licenser.

Tyvärr är ju licenserna inte jättebilliga om man ska köpa dom. Man behöver väl upp på minst Essentials Plus Kit:et för 50 000 SEK eller så kan man gå med i vmug.com och köra på deras VMUG Advantage för ~1750 SEK/år så får man tillgång till lite licenser att leka med.

Eftersom jag håller på endel med ESXi på jobbet så har jag fått låna licenser därifrån för att pilla med det hemma och lära mig mer om det.

Visa signatur

Stationära | Define 7 Compact | RM750x White | X570S AERO G | Ryzen 5 5600x | NH-D15 Chromax | Flare X 4x8GB 3200MHz | RTX 4070 Super | MP600 1TB | 980 1TB | A2000 1TB | 970 EVO 500GB | 850 EVO 500GB |
Acer X34A + 2x Dell U2719D | Wave 1 | Arctis Nova Pro Wireless |
Laptop | Macbook Air M1 2020 | 16GB | 256GB |
3dkatten.se

Permalänk
Medlem
Skrivet av Danne:

Beror helt på vad du ska göra. Själv så har jag 8st NIC i varje ESXi server.

8 fysiska kretsar utan portdelning så ev mer än 8 portar?

Permalänk

@enoch85: Vad kör du för brandvägg?

Visa signatur

Fractal Design Define R5 Svart, Intel Core i7 7700K 4.2 GHz 8MB, Noctua NH-D15, Corsair 32GB (2x16GB) DDR4 2666Mhz CL15, MSI GeForce GTX 1080 Ti 11GB Gaming X, MSI Z270 GAMING M5, Samsung 960 EVO 500GB, EVGA Supernova G2 850W

Permalänk
Medlem
Skrivet av aluser:

8 fysiska kretsar utan portdelning så ev mer än 8 portar?

Yes 8 fysiska NIC.

Permalänk
Medlem

@Joulester: OPNsense. Riktigt nice!

Visa signatur

Citera för svar

Stora Owncloud/Nextcloud-tråden: http://www.sweclockers.com/forum/122-server/1212245-officiell...
Jobb: Datacenter Manager
Grundare: https://www.hanssonit.se

Permalänk

@enoch85: såg trevligt ut. Dock lite mer intresserad av hårdvaran?

Visa signatur

Fractal Design Define R5 Svart, Intel Core i7 7700K 4.2 GHz 8MB, Noctua NH-D15, Corsair 32GB (2x16GB) DDR4 2666Mhz CL15, MSI GeForce GTX 1080 Ti 11GB Gaming X, MSI Z270 GAMING M5, Samsung 960 EVO 500GB, EVGA Supernova G2 850W

Permalänk
Medlem

@Joulester: Jag kör en gammal HTPC bara. 4 GB RAM, 2-kärning AMD CPU ( E-450), och ett Intel 350 4 portas NIC köpt på Ebay. Lite overkill kanske, men köpte en 120 GB SSD som lagring också.

Nuvarande stats:

State table size
0 % ( 1821/365000 )
MBUF Usage
4 % ( 9110/225774 )
Memory usage
22 % ( 805/3657 MB )
SWAP usage
0 % ( 0/8192 MB )
Disk usage
1% / [ufs] (1.1G/101G)

Dold text
Visa signatur

Citera för svar

Stora Owncloud/Nextcloud-tråden: http://www.sweclockers.com/forum/122-server/1212245-officiell...
Jobb: Datacenter Manager
Grundare: https://www.hanssonit.se

Permalänk
Medlem

Nu har jag inte provat OPNsense själv men jag fann följande för ett tag sen när jag satt och kikade igenom tänkbara alternativ till pfSense.

http://m0n0.ch/wall/list/showmsg.php?id=376/07

Edit: TLDR

Citat:

If you don’t care for the background and details, I’ll TLDR it as
this: OPNsense is extraordinarily shady, proceed with caution.

Visa signatur

Marantz NR1605, Rotel RB1090, Ino Audio piPs
SMSL SP200 THX Achromatic Audio Amplifier 888, SMSL M400, Audio-Gd NFB-11 (2015), Objective2+ODAC RevB, Audeze LCD-2 Rosewood, Monoprice M1060, ATH-M40x, Sennheiser HD660S, DROP X KOSS ESP/95X, Koss KPH30i, DROP X HiFiMan HE4XX

Permalänk
Medlem
Skrivet av backspace:

Nu har jag inte provat OPNsense själv men jag fann följande för ett tag sen när jag satt och kikade igenom tänkbara alternativ till pfSense.

http://m0n0.ch/wall/list/showmsg.php?id=376/07

Edit: TLDR

Sjukt. Då ska man inte köra det!

Permalänk
Medlem
Skrivet av backspace:

Nu har jag inte provat OPNsense själv men jag fann följande för ett tag sen när jag satt och kikade igenom tänkbara alternativ till pfSense.

http://m0n0.ch/wall/list/showmsg.php?id=376/07

Edit: TLDR

Skrivet av Danne:

Sjukt. Då ska man inte köra det!

Kanske inte så konstigt att Chris Buechler talar illa om OPNsense då han själv jobbar på Pfsense... Det har varit ett öppet krig mellan de två på reddit och över hela internet.

Kolla källan.

Visa signatur

Citera för svar

Stora Owncloud/Nextcloud-tråden: http://www.sweclockers.com/forum/122-server/1212245-officiell...
Jobb: Datacenter Manager
Grundare: https://www.hanssonit.se

Permalänk
Medlem
Skrivet av enoch85:

Kanske inte så konstigt att Chris Buechler talar illa om OPNsense då han själv jobbar på Pfsense... Det har varit ett öppet krig mellan de två på reddit och över hela internet.

Kolla källan.

Och det framgår väldigt tydligt i brevet och det är inte direkt okänt att han var en av 2 person som skapade forken för 12 år sen
. Kan du peka på ett lika välformulerat inlägg från opnsense? Som lika bra redovisar dessa 3 utvecklares "credz" så att säga.
Sen att dom forsätter att dra nytta av credzen från pfsense genom att döpa sig till opnsense istället för att som pfsense byta hela namnet är ju inget som ger mig något extra förtroende.

Permalänk
Medlem

@enoch85: Jag har inte rotat ner mig för mycket i just det det "internetdramat" så jag tänker inte säga bu eller bä.
Jag delar mest med mig av information jag fann sist jag kikade runt lite.

Men vad är det man säger? Ingen rök utan eld.

Visa signatur

Marantz NR1605, Rotel RB1090, Ino Audio piPs
SMSL SP200 THX Achromatic Audio Amplifier 888, SMSL M400, Audio-Gd NFB-11 (2015), Objective2+ODAC RevB, Audeze LCD-2 Rosewood, Monoprice M1060, ATH-M40x, Sennheiser HD660S, DROP X KOSS ESP/95X, Koss KPH30i, DROP X HiFiMan HE4XX

Permalänk
Medlem

@backspace: Nu ska vi inte diskutera OPNsense vs Pfsense, men efter det jag läst, så finns det många haters som använder Pfsense idag och dissar OPNsense av måånga olika anledningar, om ens kvalificerade.

Visa signatur

Citera för svar

Stora Owncloud/Nextcloud-tråden: http://www.sweclockers.com/forum/122-server/1212245-officiell...
Jobb: Datacenter Manager
Grundare: https://www.hanssonit.se