Entrar Ainda não tem acesso?
1
resposta

[Sugestão] URL Not Found https://dlcdn.apache.org/spark/spark-3.1.3/spark-3.1.3-bin-hadoop3.2.tgz

Referente ao curso Apache Airflow: transformação de dados com Spark

por Gabriel Galani Silva
| 198.3k xp | 2 posts
Coordenador comercial

Galera, no curso somos instruidos a fazer a instalação do spark submit e o hadoop. Porém a URL que é passada na aula e na transcrição, está fora do ar.

No site do apache (https://www.apache.org/dyn/closer.lua/spark/spark-3.4.1/spark-3.4.1-bin-hadoop3.tgz)

Encontra-se o link: https://dlcdn.apache.org/spark/spark-3.4.1/spark-3.4.1-bin-hadoop3.tgz

Sei que não é exatamente a mesma versão que o professor está utilizandom contudo para mim funcionou normal.

wget https://dlcdn.apache.org/spark/spark-3.4.1/spark-3.4.1-bin-hadoop3.tgz

1 resposta
por Igor Nascimento Alves
| 492.1k xp | 707 posts
Instrutor Instrutor

Olá Gabriel, tudo bem ? Espero que sim.

Muito obrigado por avisar, gostei da sua sugestão, muito obrigado por compartilhar ela aqui.

E que bom que seu projeto funcionou mesmo em outra versão. Nós fixamos uma versão porque eventualmente alguma atualização da ferramenta pode não ser compatível com o projeto.

Caso você queira encontrei a versão do curso nos arquivos do apache:

https://archive.apache.org/dist/spark/spark-3.1.3/spark-3.1.3-bin-hadoop3.2.tgz

Vou corrigir o link lá no curso.

Novamente muito obrigado pelo aviso e pela solução.

Bons Estudos.