Instruções de como instalar aqui https://github.com/FiloSottile/mkcert
No Ubuntu o root CA gerado é no arquivo .pem, e o Windows não aceita este formato, por isso usar o .pfx. O site sslshopper.com faz isto online, mas é recomendado fazer pelo openssl.
cd ~/.local/share/mkcert
openssl pkcs12 -export -out rootCA.pfx -inkey rootCA-key.pem -in rootCA.pem
Baixe o arquivo rootCA.pfx gerado para importação no Windows.
Use as instruções aqui contidas ssls.com
Mas atenção, você precisa importar/instalar o certificado como Autoridades de Certificação Raiz Confiável.