Encontrei muita dificuldade para mudar a linguagem e resolvi compartilhar a solução já que eu não encontrei em lugar nenhum.
O erro que dava era :"pt-BR.yml" is not a valid locale
Dentro de config/locales tinha um documento en.yml (que é a versão em inglês), deduzi que teria que ter um documento com a versão em português brasil. Procurei no git hub e encontrei o código de pt-BR.yml: https://github.com/svenfuchs/rails-i18n/blob/master/rails/locale/pt-BR.yml Salvei o documento e reiniciei o servidor e o erro sumiu ;)