Olá Douglas, tudo bem?
Para testar código JS junto com HTML, você pode utilizar uma ferramenta online, como o JSFiddle, que considero muito bom. Ele tem todas as ferramentas do VSCode para JavaScript+HTML, e mais algumas, além de uma boa interface: https://jsfiddle.net/Lv7vy6kk/.
Se está no começo do aprendizado, essa pode ser a melhor maneira, pois é a ferramenta mais intuitiva e tranquila de se trabalhar.
Entretanto, se quiser fazer pelo vscode mesmo, também é possível, claro.
Você pode fazer de duas maneiras:
A primeira, (funciona em todos os sistemas operacionais), é: abra o arquivo HTML conectado ao JavaScript que você quer testar pelo Explorador de Arquivos. Depois clique em 'abrir com', e execute com o navegador de sua preferência.
A segunda (funciona apenas no windows) é: abra um terminal no VSCode (no menu superior: "terminal" -> "novo terminal"), e execute o comando "start NOME_DO_ARQUIVO", isso vai abrir o arquivo HTML no seu navegador padrão.
Uma vez no navegador, você pode ver os resultados da execução do seu script JS apertando a tecla F12, e depois clicando na opção "console" que vai aparecer.
Se isso respondeu sua pergunta, peço que por favor marque a dúvida como concluída, se não, por favor, pergunte novamente e vou tentar ajudar mais.
Boa sorte :)