Se alguém tiver problemas para salvar um arquivo parquet da forma ensinada na vídeo aula:
Tente desta forma, incluindo a config de rebaseamento:
Se alguém tiver problemas para salvar um arquivo parquet da forma ensinada na vídeo aula:
Tente desta forma, incluindo a config de rebaseamento:
Oii Leonardo, tudo bem?
Obrigada por compartilhar essa dica valiosa! O erro que você encontrou ao salvar arquivos Parquet é um problema comum relacionado a datas antigas e a forma como diferentes versões do Spark lidam com elas. A configuração de rebaseamento de datetime que você mencionou é uma excelente solução para contornar esse problema.
Um abraço e bons estudos.