Kraftiga fps-drop, Anledning?

Tjena! Har på senaste tiden noterat att jag får kraftiga fps drop när jag spelar.
Ta CS:GO t.ex. som jag spelar regelbundet. Jag ligger på stadiga 250+ fps för att helt plötsligt droppa ner till 40-50 i någon sekund innan det går tillbaka till 250. Sådär håller det på. Efter ett tag så når jag inte ens mina vanliga 250, utan bara 170-140. För att sedan droppa ner till 30-40 i några sekunder som innan.

Jag har verkligen ingen aning om vad som orsakar detta. Har byggt min dator själv, för kanske 2-3 veckor sedan.
Specs:
MSI Z97 GAMING 7, Socket-1150
MSI GeForce GTX 960 Gaming 2GB
Intel Core i5-4690K
HyperX Fury DDR3 1866MHz 16GB
Kingston SSDNow V300 240GB 2.5" OEM

Nätagget är av lite äldre model, ligger på 630 watt. Kan det vara det som är felet?

Tackar på förhand!