O que você aprenderá_
- Aprenda a integrar o poder do Spark com a facilidade do Pandas para manipulação de dados em larga escala
- Compreenda as diferenças entre Pandas e Spark e qual a melhor opção para diferentes cenários
- Domine a manipulação de dados com Pandas em larga escala com o Spark
- Crie visualizações poderosas com a Plotly em conjunto com a API de Pandas do Spark
- Aprenda a otimizar o desempenho do processamento de dados com o Spark DataFrame e a API de Pandas do Spark
Público alvo_
Cientistas de dados que estão se deparando com as primeiras bases de dados grandes.
Allan Segovia Spadini
Allan trabalha como instrutor de Ciência de dados na Alura desde 2019. Também é um dos autores do livro Séries temporais com Prophet pela Casa do Código.
Curso atualizado em 09/02/2024
Já estuda na Alura?
Comece o curso agoraEmenta
Primeiros passos
- Carregamento e leitura de dados
- Entendendo o conjunto de dados
- Operações e opções
- Resumo do DataFrame
Queries
- Query
- Gráficos a partir do DataFrame
- SQL com Pandas
- Mapeamento
Comparação entre variáveis
- Correlação e linha de tendência
- Boxplots
- Métodos de string
I/O (Input/Output)
- Do Pandas para o Spark
- Leitura de página html
- Saída
- Entregando os resultados
Descubra se esse curso é pra você! Leia as primeiras aulas
-
Formação
Engenharia de dados com Databricks
8h
De curso
42
Atividades
Escola
Data Science
Pessoas estudando esse curso nesse mês:
Estude com elas
David Vieira
Júlia Junqueira
Klaudius Henrique dos Santos Soares
Mateus Jordão Da Silva
Rogerio Dourado Félix
e mais 149 pessoas
e mais 149 pessoas
Faça parte da nossa comunidade no discord!
Troque conhecimentos com a comunidade da Alura
Aprenda Engenharia de Dados com esse e outros cursos, comece agora!
Plus
De
R$ 1.800
12X
R$109
à vista
R$1.308
- Acesso a TODOS os cursos da Alura
Mais de 1500 cursos completamente atualizados, com novos lançamentos todas as semanas, emProgramação, Front-end, UX & Design, Data Science, Mobile, DevOps e Inovação & Gestão.
- Alura Challenges
Desafios temáticos para você turbinar seu portfólio. Você aprende na prática, com exercícios e projetos que simulam o dia a dia profissional.
- Alura Cases
Webséries exclusivas com discussões avançadas sobre arquitetura de sistemas com profissionais de grandes corporações e startups.
- Certificado
Emitimos certificados para atestar que você finalizou nossos cursos e formações.
Pro
De
R$ 2.400
12X
R$149
à vista
R$1.788
- Acesso a TODOS os cursos da Alura
Mais de 1500 cursos completamente atualizados, com novos lançamentos todas as semanas, emProgramação, Front-end, UX & Design, Data Science, Mobile, DevOps e Inovação & Gestão.
- Alura Challenges
Desafios temáticos para você turbinar seu portfólio. Você aprende na prática, com exercícios e projetos que simulam o dia a dia profissional.
- Alura Cases
Webséries exclusivas com discussões avançadas sobre arquitetura de sistemas com profissionais de grandes corporações e startups.
- Certificado
Emitimos certificados para atestar que você finalizou nossos cursos e formações.
- Luri, a inteligência artificial da Alura
Luri é nossa inteligência artificial que tira dúvidas, dá exemplos práticos e ajuda a mergulhar ainda mais durante as aulas. Você pode conversar com Luri até 100 mensagens por semana.
- Alura Língua (incluindo curso Inglês para Devs)
Estude a língua inglesa com um curso 100% focado em tecnologia e expanda seus horizontes profissionais.
Acesso completo
durante 1 ano
Estude 24h/dia
onde e quando quiser
Novos cursos
todas as semanas