Jag har noll koll på funktionen Live Server i Visual Studio.
Men rent antagande är att det är en inbyggd webbserver för att du snabbt ska kunna få ditt resultat.
Då jag inte vet vad den kommer med för paket så vet jag iaf 2 lösningar på detta.
Det ena är att du installerar OpenSSL på windows och genererar ditt self signed cert därifrån.
Denna verkar se korrekt ut hur du genererar upp den.
https://improveandrepeat.com/2019/03/create-self-signed-certi...
Om du ska importera i keystoret eller inte kan jag inte svara på utan att veta hur visual code studio vill importera nyckeln och certet.
Mer native till Windows är att använda powershell däremot.
https://docs.microsoft.com/en-us/powershell/module/pkiclient/...