Crie o seu servidor Apache Spark, processe grandes quantidades e faça um streaming em tempo real utilizando PySpark :)
Não se assuste mais com as tecnologias de Big Data! Aprenda o essêncial para processar grandes quantidades de dados em memória com o melhor Framework do mercado: O Apache Spark!
Iniciaremos do zero, explicando o que é Big Data e o que é necessário para que um dado seja categorizado como tal. Tudo de forma simples, com uma linguagem leve e agradável!
Após nos situarmos entre as tecnologias explicadas, dentre elas, o Hadoop, criaremos um servidor Apache Spark em uma instalação Windows e então prosseguiremos o curso explicando todo o framework e analisando dados. Vale ressaltar que instalaremos o Spark no Windows para os usuários menos experientes. Caso você seja usuário Linux, não se preocupe: Os comandos são os mesmos!
Explicaremos detalhadamente o que são as variáveis de ambiente e como elas influenciam na instalação e configuração de programas, como por exemplo o Java e a sua máquina virtual, a JVM.
Aplicaremos Map Reduce e outras funções nativas do Spark, utilizaremos o Spark SQL, criaremos RDDs e os novos Dataframes! Tudo isso do zero, passo a passo, explicado com que você já conhece!
Preocupado com os softwares? Você terá um drive com todos os programas e scripts do curso, exlusivo para o nosso material, além de, é claro, também ter os links oficiais, caso deseje baixar os programs direto do fabricante!
E aí? Curtiu a ementa?
Vem comigo aprender a processar Big Data!!
Definir o que é Big Data
Definir o que é o Ecossistema Hadoop
Aplicar Map Reduce
9 Lectures
8 Lectures
3 Lectures
7 Lectures
1 Lectures
2 Lectures
Nascido no Rio de Janeiro, segunda maior área metropolitana do Brasil, a terceira da América do Sul e 16ª do mundo. Possui mais de 19 anos de experiência em TI, apaixonado por tecnologia, instrutor por vocação, analista de Business Intelligence e Engenheiro de dados, certificado nas mais diversas plataformas nas áreas de Infraestrutura e Servidores, Banco de Dados, Business Intelligence,...
bom curso, informação útil e uma boa introdução. Apesar de não receber atualização há algum tempo ainda tem informação bem relevante e útil ainda nos dias de hoje. Vale a pena como ponta pé.
Faltou realizar uma imersão em processar os dados mesmo, como se fosse um case real, é um bom curso introdutório
Gostei muito do final, com bons exemplos.
Excelente, muito claro cada etapa do processo
O curso é bom... Vai da instalação do ambiente ate o uso da linguagem python e pyspark... Poderia haver mais videos com o uso da linguagem
otimo curso
Explicações claras e objetivas acerca do funcionamento do Spark
Professor Mafra sempre com empenho e dedicação em passar o conhecimento de uma forma didática implacável. Espetacular o trabalho dele em todos os cursos.
Muita teoria (muito boa por sinal, por isso não achei TÃO péssimo), pouquíssima prática, só vemos de fato spark nas últimas aulas e olhe lá metade do curso foi só pra fazer as instalações da maquina virtual (não teria necessidade disso se tivesse um ambiente na nuvem) e outra metade sobre python, achei decepcionante mas pelo menos na teoria foi explicado muito bem.
Your email address will not be published. Required fields are marked *
Brunno P. G.
Curso aparenta estar incompleto, pouca ou quase nenhuma aula sobre joins, agregações, funções de tratamento/conversão de dados no spark, etc