André, tudo bom?
Existem algumas distribuições mais leves que podem te ajudar, uma delas é o Lubuntu:
Outra alternativa é instalar o linux sem interface gráfica, sugiro o Debian e isso não vai atrapalhar o andamento do curso:
https://www.youtube.com/watch?v=RhdYkMb-9n4
Ressalva, alguns comandos podem não estar instalados de forma default. Isso é normal, quando um comando digitado pelo instrutor não for encontrado leia o que o Debian diz e instale o pacote necessário.
Não entendi direito se você pode ou não formatar esse computador e se nele já tem o Windws. De qualquer forma, 4GB para o Windows começa a ser pouco e você não conseguirá rodar uma máquina virtual, por exemplo. Se esse for o seu caso pode tentar usar o CyWin, mas ele teria algumas limitações para o curso. Você consegue instalar ele no Windows como um software:
Na Windows Store tem o Ubuntu para instalar ( Windows Subsystem for Linux ou WSL). Talvez seja uma alternativa também, procura lá na Srote.
Opa! Não esquece de marcar uma resposta como solução.