Mitt internet dör när jag ska spela Cs:s!

Hej!
Jag har ett problem angående Cs:s och internet. Jag startar Cs:s och väljer en server från mina favoriter, jag låter ingen serverlista uppdateras! Utan klickar på en server på mina favoriter, men redan då så har mitt internet stängts av och jag kan inte gå med på någon server. Sen dröjer det 3-4 minuter innan internet är tillbaka. Jag har provat att "Verify integruty of game cache...". Inatt kunde jag spela i någon timme innan internet lade av. Men nu idag kan jag inte spela det i huvud taget. Detta har även hänt när jag spelat Team Fortress 2. Jag vet inte hur jag ska lösa detta riktigt.
Har hört att det kan vara min familjs router; SpeedTouch 585.
Men jag är helt värdelös på sådant... Så vad ska man då köpa för något istället för denna? Vi är 4 datorer i hemmet, 2 på sladd och 2 sladdlösa (till routern). Och jag spelar på min dator. Så 4 datorer är kopplade till nätverket. 2 med sladd, 2 utan sladd. Jag spelar på min, de andra används till att surfa på och spela på exempelvis facebook. Vad ska man göra för att fixa detta problem, om jag måste köpa en ny router, vad ska jag då köpa för någon?
Tack på förhand!
Tom
*Redigering* : Och nej, jag kan inte hitta någon firmware!

Svar till krilleoh:
Har du testat några andra spel? Jaa... Jag är ett hängivet Bf3 fan som spelar det varje dag utan några som helst problem. Spelar även League of Legends och Minecraft utan problem, ser ut som det är problem med Valve spel!
Har du mycket jitter/packet loss om du kör något test? Vet inte vad detta är, förklara gärna så provar jag.
Tappar dom andra internet? Hela husets internet försvinner, om man springer o kollar på routern när nätet försvinner så lyser 1 av de 5 lamporna på Routern rött. Det är "power" lampan som lyser rött då och de resterande lamporna är släckta... sen sakta men säkert kommer nätet tillbaka... 1 lampa i taget.

Vad för internetleverantör har du, och vad för bredbandsalternativ? Vi kör med Glocalnet 8 mb/s... Om det är det du syftar på?

Svar till wartech:
Japp, löser inte mitt problem!

Jag gjorde nu Pingtest.net och jag fick betuyget "A" . Alltså är det väldigt bra..
Har 0% Packet loss
Ping: 17 ms
Jitter: 1ms

Så det kan inte vara detta... Tror de är routern asså, men någon som kan komma med förslag på bra routers enligt beskrivningen högst upp i tråden?
Tack!

Nej, har ju inte den möjligheten :/ Därför jag undra om någon som vet något om routers kan kolla net on net eller nått efter en router som passar min familj behov!

Joo jag förstod det... Jag har ju cash från julafton osv... Men kan du eller någon annan lägga ett förslag på en bra router med behoven jag skrev där uppe? Max 1000 kr ungefär..!

KOllar brandvägg och hela skiten, men inget har hjälpt! :/
Och det här är den andra routern vi fått från dem, den första pajjade på annat vis. Så jag undrar om det inte är bättre att köpa ny router endå asså...

Men ska man då köpa en router med inbyggt modem? Jag är såå jäv*a grön på sånt här...
Har dock kollat på 3 olika från D-link... alla 3 i olika prisklasser ( http://www.netonnet.se/CompareView/5415?itemList=114798&compa... ). Vilken ska man köpa? Vill ju helst inte lägga ut 1500 på en router... tror ni att den för 8-900 duger?