Big Data - Processamento de dados com Spark e PySpark
- Descrição
- Currículo
- FAQ
- Revisões
Não se assuste mais com as tecnologias de Big Data! Aprenda o essêncial para processar grandes quantidades de dados em memória com o melhor Framework do mercado: O Apache Spark!
Iniciaremos do zero, explicando o que é Big Data e o que é necessário para que um dado seja categorizado como tal. Tudo de forma simples, com uma linguagem leve e agradável!
Após nos situarmos entre as tecnologias explicadas, dentre elas, o Hadoop, criaremos um servidor Apache Spark em uma instalação Windows e então prosseguiremos o curso explicando todo o framework e analisando dados. Vale ressaltar que instalaremos o Spark no Windows para os usuários menos experientes. Caso você seja usuário Linux, não se preocupe: Os comandos são os mesmos!
Explicaremos detalhadamente o que são as variáveis de ambiente e como elas influenciam na instalação e configuração de programas, como por exemplo o Java e a sua máquina virtual, a JVM.
Aplicaremos Map Reduce e outras funções nativas do Spark, utilizaremos o Spark SQL, criaremos RDDs e os novos Dataframes! Tudo isso do zero, passo a passo, explicado com que você já conhece!
Preocupado com os softwares? Você terá um drive com todos os programas e scripts do curso, exlusivo para o nosso material, além de, é claro, também ter os links oficiais, caso deseje baixar os programs direto do fabricante!
E aí? Curtiu a ementa?
Vem comigo aprender a processar Big Data!!
-
1Introdução ao cursoVídeo Aula
-
2O que é um cluster?Vídeo Aula
-
3Introdução a Big DataVídeo Aula
-
4Aplicações de Big DataVídeo Aula
-
5A História do HadoopVídeo Aula
-
6Infraestrutura - Crescimento Vertical e HorizontalVídeo Aula
-
7Funcionamento do HDFSVídeo Aula
-
8Hadoop Map ReduceVídeo Aula
-
9Entenda agora! Resumão do CapítuloVídeo Aula
-
10Resumo do AmbienteVídeo Aula
-
11Instalando o VirtualBoxVídeo Aula
-
12Instalando o Windows 10Vídeo Aula
-
13Habilitando e configurando os adicionais de convidadosVídeo Aula
-
14Entendendo as variáveis de ambienteVídeo Aula
-
15Executando o programa pelo PathVídeo Aula
-
16Instalação e configuração do JDK e do JREVídeo Aula
-
17Instalando o Anaconda e verificando as variáveis de ambienteVídeo Aula