Solucionado
Estou utilizando o Git também no Windows, e o Git Bash está bem lento na minha máquina, abre rapidamente, mas até aparecer as linhas de comando leve mais ou menos 30 segundos, também demora pra responder a cada comando, a única configuração diferente que fiz foi para não considerar as quebras de linha nos arquivos, já no Git CMD está rápido, tenho 16gb de RAM, mais alguém teve esse problema no Windows?.
Oi Antonio, tudo bem? No Windows o Git Bash pode sim ser um pouco mais lento por que por baixo dos panos ele ainda carrega um "simulador" unix. Perceba por exemplo, que o mesmo ls que você usa no Linux, não funciona no CMD, mas funciona no Git Bash.
Obrigado Wanderson, vou utilizar via Ubuntu mesmo, já que não é problema de configuração.