Solucionado
Faz um tempo que comecei o projeto do Alura Space e percebi que na pasta templates, os arquivos HTML estão ficando com ícone "DJ", além disso eu não consigo utilizar nenhum atalho em relação ao HTML, o código continua funcionando normalmente, mas, queria entender o que seria esse problema...! Imagem de como fica no Vscode
Vc pode estar usando um tema de ícones para o vs code. Vc pode alterar para outro tema de ícones apertando F1 e procurando por "File Icon Theme". Na opção pode tentar escolher outro tema de ícones.
Tentei verificar isso, mas o problema não é o ícone, e sim o formato do arquivo, quando crio arquivos fora da pasta templates, ele fica normalmente em html...
Procurei mais aqui e parece que ele reconhece como se fosse um html para o Django. Tenta alguma das soluções aqui desse post:
https://stackoverflow.com/questions/46044475/html-files-recognized-as-django-template-in-vs-code
Realmente, encontrei a solução! Os arquivos HTML estavam ficando como Django HTML, a solução foi colocar esse código no settings.json do Django e alterar qual o formato de arquivo para o final .html.
"emmet.includeLanguages": {"django-html": "html"}