Steam Home Streaming - Udda stuttering problem

När provar spela ett spel över Steams streaming-tjänst, t.ex. Borderlands, flyter allt på tills jag stannar upp.
Jag har på "Display Performance Information" så jag kan se när det börjar "hacka" i streamen. Allt ligger på bra, låga nivåer så länge en knapp är intryckt, när man släpper alla knappar och sluta sända kontrollmeddelanden får jag massor av stora "spikar" och flytet försvinner tills dess jag trycker ned en knapp igen.

Host PC: i7-4770k & GTX770 1080p (Hardware Decoding, Prioritize Network Traffic).
Client: i5-2450M & Intel Graphics Family (Limit resolution 720p, bandwidth Auto, Hardware Decoding).
2,4GHz Wifi (ac router men laptopen har inte 5Ghz).

Någon som vet möjlig orsak och kanske en lösning på problemet?