Aprenda a utilizar Apache Spark com excelência e abra um mundo de possibilidades para a sua carreira.
Descubra como ir além do básico, compreenda todo o ecossistema ao redor desta tecnologia que domina o mercado.
Reproduzir vídeo
Por que escolher Apache Spark?
Com certeza, o Apache Spark é a primeira tecnologia que vem à cabeça quando se fala em Big Data. Capaz de processar grande quantidade de dados, esta ferramenta é pré-requisito em 95% de vagas para Engenheiros de Dados de todos os níveis, tanto no Brasil, como no exterior.
Justamente por suportar enorme quantidade de dados, existe alta demanda no mercado por profissionais que dominem esta tecnologia e, principalmente, que saibam utilizá-la da melhor maneira, junto ao ecossistema que a rodeia.
Especialização: Engenharia de Dados com Apache Spark
Veja o que você terá acesso:
Certificado de Conclusão
Acelere sua carreira.
Duração
20 Horas de conteúdo
1 ano de acesso online
Reveja quantas vezes quiser e aprenda no seu ritmo, de onde quiser, a hora que quiser.
Atualizações frequentes
Você sempre estará atualizado com as melhores tecnologias e à frente do mercado.
Conteúdo do curso
- Big Data
- Google Cloud Platform vs. Microsoft Azure vs. Amazon Web Services
- Fundamentos de Apache Hadoop
- Ecosistema do Zoológico Apache Hadoop
- História do Apache Hadoop e Apache Spark
- Big Data como um Serviço Gerenciado
- Linha do Tempo de Engines de Processamento de Dados
- Fundamentos
- Componentes
- Arquitetura
- Conceitos
- Modos de Implementação
- Distribuição de Dados e Partições
- Comparação entre RDD, DataFrame e DataSet
- Desenvolvimento Local do Apache Spark
- Opções de Implementação do Apache Spark
- Escalabilidade Horizontal de Aplicações Escritas em Spark em Cluster Gerenciados da Nuvem
- Implementação Nativas de Nuvem do Apache Spark
- Data Lake
- Aquisição dos Dados e Armazenamento
- Melhores Práticas de Organização dos Dados no Data Lake
- Ciclo de Vida de uma Aplicação
- Soluções de Armazenamento
- Data Lakehouse
- Arquitetura de Dados
- Padrões de Processamento de Dados
- Stream de Eventos
- Processamento de Stream de Eventos
- Engines de Processamento de Stream em Real-Time
- Engines de Streaming & Python
- Engines de Processamento de Streaming & Python
- StreamingSQL
- Garantia de Entrega de Mensagem - Idempotência & EOS
- Apache Kafka
- Spark Streaming & Structured Streaming
- Apache Kafka e Data Lake como Fontes de Dados em Streaming
- ETL vs. ELT
- Data Warehouse Tradicional (TDW)
- Data Warehouse Moderno (MDW)
- Engines de Consulta SQL Distribuída para DW e Análise de Big Data
- Data Lakehouse (DL)
- Recomendações para Pipelines de Dados Confiáveis
- Use-Cases de Apache Spark
- Otimizando Aplicações Spark
- Performance Tuning
- Arquiteturas de Big Data
- Desenho de Pipelines de Dados na AWS, Azure, GCP & OSS
- Carreira de Engenheiro de Dados e Conselhos
Repositório Exclusivo no GitHub
Acesso ao nosso repositório oficial.
Domine a maior tecnologia de Big Data do mercado, o Apache Spark, e abra um mundo de oportunidades para a sua carreira.
Seja como os nossos alunos e controle o rumo de sua carreira
Confira o que eles dizem:
Apenas os que adquirirem esta edição, receberão gratuitamente esse bônus incrível:
The Spark Series
Uma série vinda diretamente da nossa Comunidade The Plumbers, em que você irá descobrir como resolver qualquer problema no Apache Spark. Através de vídeos curtos, você irá aprender dos conceitos básicos aos avançados, navegando na estrutura interna e compreendendo os componentes desta poderosa tecnologia de processamento.
Reproduzir vídeo
Acesso imediato, por apenas
12x de R$ 179,90
ou R$1.797,00 à vista.
- 1 ano de acesso a Especialização: Engenharia de Dados com Apache Spark
- Acesso ao Curso: Fundamentos de Apache Spark (20h de conteúdo)
- Grupo de Alunos para network (No WhatsApp)
- GitHub (Repositório exclusivo)
- Certificado
Aprenda com quem é referência no mercado
Professor: Luan Moreno
Luan Moreno atua há 8 anos como Big Data Engineer na multinacional canadense Pythian, implementando soluções de Big Data e Analytics e desenvolvimento de projetos com Apache Spark, Apache Kafka, Apache Airflow, Kubernetes, entre outros, nas principais provedoras de Nuvem do mercado: AWS, Azure e GCP.
Com 9 premiações Microsoft MVP e Big Data Specialist em Microsoft Azure, Luan está constantemente se aperfeiçoando e ocupando posição de vanguarda em sua área.
Foi palestrante em grandes conferências como TechEd, SQL Konferenz, SQL Nexus, TugaIT, DB Tech Showcase, Ignite e SQL Pass Summit. Preocupado com a formação e atualização de qualidade, focadas no mercado de trabalho, idealizou o programa pioneiro de desenvolvimento profissional, Engenharia de Dados Academy.
Roadmap Engenharia de dados com Apache Spark
