Acredito que o curso do NGINX já está bem desatualizado, pois no curso a última versão do NGINX era a 1.19.8, uma versão que utiliza o Buster (10) do Debian, o qual não recebe mais suporte. Logo, qualquer tentativa de dar um apt-get update dá erro. Além disso, o arquivo de configuração aparentemente também sofreu uma mudança, principalmente no "objeto" server.
Edição:
Encontrei o arquivo de configuração.
Fica no caminho /etc/nginx/conf.d
cd /etc/nginx/conf.d
Quando você der um ls, verá que existe um arquivo default.conf, basta abrí-lo com o vim e poderá seguir o curso normalmente (acredito).
vim default.conf
Conte com o apoio da comunidade Alura na sua jornada. Abraços e bons estudos!