Oi, Alan, tudo bem?
Isso pode ser tanto por causa do FPS que o jogo tá rodando talvez quando você buildar melhora, ou também porque ao seguir o Y do personagem ele está dando pulinhos pelo cenário mesmo então você pode cancelar o Y se quiser. Algo como:
transform.position = new Vector3(Jogador.transform.position.x, 0, Jogador.transform.position.y) + distCompensar;
De qualquer forma, nas próximas partes do curso nós tratamos desse problema fazendo a câmera seguir o jogador não de forma linear sempre acompanhando sua posição mas andando suavemente, o que dá uma fluidez bem melhor.