AMD3000 dålig prestanda med Teamspeak

Jag kör VR (rift) med en AMD 3600 och GTX2080 och har funnit att så fort jag slår på TS så tappar jag otroligt mycket fps. Jag kör fpsvr och ser att cpu frametime hoppar upp från 7-10 ms till 15ms. Jag har testat med andra ljudkort och hörlurar men problemet kvarstår.
CPU max/tread går från 40-70 upp till 80-95%. Förutom att det triggar ASW så är är det i långa loppet fullständigt okörbart. Det gäller alla spel jag kör. rF2, ACC, R3E, IL-2, DCS etc.

Jag har hittat en tråd om denna kombo där man påpekade att CPU volten ökade markant.
Kollar man i task managern så tar TS ca 1-2% cpu och 50 mb minne så det ser bra ut där.

https://forum.teamspeak.com/threads/140586-Teamspeak3-client-...

Är det någon mer som har samma problem, men framför allt en lösning på detta?
Har gått så långt att jag funderar på att skaffa en mixer och köra in TS via en laptop på hörlurarna. Vet inte om det skulle fungera.
Och nej, jag är tyvärr tvingad att köra TS på några av spelen så jag kan inte köra discord eller annat.