Nível: Intermediário
Com certificado
Automação de Tarefas com Airflow
Domine a criação de workflows automatizados com Apache Airflow, orquestrando dados de forma profissional — do ambiente local à nuvem AWS, mesmo sem experiência prévia em automação.
O que você vai aprender?
Nível: Intermediário
Essa trilha é para quem quer sair do caos de scripts manuais e processos quebrados e construir pipelines de dados robustos, escaláveis e automáticos.
As habilidades que você vai desenvolver são:
- Construir e orquestrar workflows com Apache Airflow
- Automatizar pipelines de dados com boas práticas de dependência entre tasks
- Criar ambientes de desenvolvimento locais com Docker e Docker Compose
- Operar o Airflow em ambiente de produção na nuvem AWS
- Integrar serviços como EC2, Glue e IAM nos seus workflows
Sobre esse Curso
1 Projeto Guiado
Seja bem-vindo à trilha que vai levar suas habilidades em dados para um novo patamar de automação e eficiência!
Ao longo de 6 módulos e projetos práticos, você vai dominar a criação de pipelines automatizados, usando Airflow, Docker e AWS de maneira profissional.
Se hoje você sente que seus processos de dados são desorganizados, ineficientes ou difíceis de escalar, esse curso foi feito para você. Talvez você já tenha ouvido falar de Airflow, mas nunca conseguiu aplicar de verdade — ou tem dúvidas sobre como montar o ambiente, configurar tasks ou operar na nuvem.
Aqui, você vai aprender passo a passo como construir workflows, desde o ambiente local até a implantação na AWS. Sem achismos, sem “cópia e cola” — você vai entender e aplicar cada etapa.
Durante a trilha, você vai aprender:
• Fundamentos de programação para manipulação de dados
• Criação de workflows automatizados com Airflow
• Configuração de ambientes com Docker e Docker Compose
• Manipulação de dados com Pandas e JSON
• Análise descritiva com Python
• Deploy do Airflow na nuvem AWS
Ao final, você será capaz de construir automações que economizam horas de trabalho, aumentam a confiabilidade dos dados e fazem de você um profissional indispensável na sua equipe.
As habilidades serão desenvolvidas
Com certificado
Técnicas:
• Análise de dados
• Orquestração de tarefas com Apache Airflow
• Configuração de ambientes Dockerizados
• Automatização de pipelines de ETL
• Deploy de workflows na nuvem (AWS)
Ferramentas:
• Apache Airflow
• Docker e Docker Compose
• AWS (EC2, Glue, IAM)
• Python e bibliotecas de manipulação de dados (pandas)
Habilidades Profissionais:
• Automação de processos de dados
• Administração de ambientes de produção
• Integração de workflows em nuvem
• Escalabilidade de processos de ETL
Essas competências são muito valorizadas para cargos como Engenheiro de Dados, Cientista de Dados e Analista de Dados Sênior.
Para quem é ?
Nível: Intermediário
Essa trilha é para profissionais de dados que já dominam o básico, mas sentem falta de organização, escala e automação em seus processos.
É ideal para quem:
- Já trabalha com dados e quer estruturar ETLs de maneira profissional
- Sente dificuldades em criar workflows robustos e confiáveis
- Deseja usar Airflow de forma prática, sem se perder na configuração
- Precisa integrar pipelines locais e de nuvem em projetos reais
- Quer se tornar referência em automação de processos de dados
Ementa do Curso
Módulo 0 - Introdução à Disciplina
Neste módulo, você vai entender o contexto do curso, o que irá aprender, como funciona a prova de certificação e como buscar ajuda ao longo da sua jornada.
Ao final do módulo, você estará preparado para aproveitar o curso com clareza sobre objetivos, suporte e a importância do aprendizado.
Módulo 1 - O Problema de Orquestração
Neste módulo, você vai conhecer o problema real que motiva a necessidade de orquestração de dados, configurar seu ambiente de desenvolvimento e entender o porquê do Apache Airflow ser a solução.
Ao final do módulo, você entenderá o cenário prático que será solucionado com a criação de workflows automatizados.
Módulo 2 - Introdução ao Airflow
Neste módulo, você vai aprender o que é o Apache Airflow, seus principais componentes, como configurá-lo em ambiente local com Docker e Docker Compose e construir seu primeiro workflow.
Ao final deste módulo, você será capaz de operar o Airflow em um ambiente local e criar workflows simples agendados.
Módulo 3 - Criação dos Workflows
Neste módulo, você vai aprofundar na construção de workflows robustos, retomando o problema de negócios e consolidando a entrega de soluções automatizadas.
Ao final deste módulo, você será capaz de criar e documentar workflows que atendam às necessidades de orquestração de dados.
Módulo 4 - Aprofundamento no Airflow
Neste módulo, você vai dominar recursos avançados do Airflow como Operators, Hooks, Sensors, uso de Variables, Connections, Providers e boas práticas de dependência entre tarefas.
Ao final deste módulo, você será capaz de estruturar workflows complexos e aderentes às melhores práticas do mercado.
Módulo 5 - Airflow na AWS
Neste módulo, você vai aprender a configurar serviços na AWS como IAM, EC2 e Glue, além de orquestrar seus workflows na nuvem.
Ao final deste módulo, você será capaz de operacionalizar o Airflow em ambiente de nuvem e integrar seus pipelines a serviços gerenciados.
Módulo 6 - O Projeto do Aluno
Neste módulo, você irá desenvolver um projeto prático onde aplicará todos os conhecimentos adquiridos, solucionando um desafio de orquestração de dados do início ao fim.
Ao final do módulo, você terá um projeto real para apresentar no seu portfólio profissional.
Módulo 7 - Prova de Certificação
Por que aprender Automação de Tarefas com Airflow?
Porque dominar a orquestração de dados é uma habilidade indispensável para quem quer crescer na área de dados.
Com essa trilha, você será capaz de:
• Automatizar ETLs complexos com segurança e escalabilidade
• Orquestrar workflows que integram diferentes fontes e destinos
• Trabalhar com Airflow em ambientes locais e em nuvem
• Entregar soluções robustas, confiáveis e alinhadas às boas práticas do mercado
O que você vai receber ao se tornar aluno?
Ao entrar nessa trilha, você passa a fazer parte da Comunidade DS, com acesso a:
🎓 Mentorias práticas para aplicar seus projetos com segurança
💬 Grupos de discussão para dúvidas e troca de experiências
💡 Palestras com profissionais do mercado para se manter atualizado
💻 Live Coding para colocar a mão na massa com a galera
🔄 Atualização constante com o que há de mais moderno no universo de dados
Tudo isso para você aprender, aplicar e crescer mais rápido com dados.
Gabriel Richter
Nível: Intermediário
Professor: Gabriel Richter
48 aulas
1 projeto guiado
+1 projeto final
Carga horária: 24h
Como faço para fazer parte da CDS+?
Primeiro de tudo, você precisa entender que existem 3 planos de matrícula, de acordo com a sua preferência por aprendizado.
A Comunidade DS conta com aulas ao vivo, atualizações frequentes de conteúdos e com suporte integral. Não é apenas um acesso a aulas gravadas.
E nem todos preferem acesso a tudo.
Os planos oferecem mais opções aos membros:
Planos de Acesso
Curso
Individual
12x R$49,90
Valor total R$ 598,80
Automação de Tarefas com Airflow
12 meses de acesso as aulas
12 meses de acesso a Comunidade DS
- Compra 100% segura
- 7 dias de garantia incondicional
Plano
12x R$89,90
Valor total R$ 1078,80
Acesso a todas as Trilhas de Ensino
Todos benefícios do Plano Essencial
Acesso a Correção de Projetos ao vivo
Mentorias Mensais ao vivo
Palestras e Discussões com Convidados
Participação de Estudos de Casos ao vivo
- Compra 100% segura
- 7 dias de garantia incondicional
Plano
Expert
12x R$1.749,42
Valor total R$ 20.993,00
Acesso a todas as Trilhas da CDS
Todos benefícios do Plano Profissional
Acompanhamento Individual por 3 meses
- Compra 100% segura
- 7 dias de garantia incondicional
Aperfeiçoamento Profissional Contínuo
Todos os meses é liberado uma nova trilha de aperfeiçoamento, trazendo ferramentas e técnicas modernas para você sempre se manter atualizado.
/+30 trilhas de Aperfeiçoamento
/+750 aulas de hard e softskills
/+50 projetos práticos
Um pequeno investimento para uma vida completamente diferente
Acesso a treinamentos que será um divisor de águas na sua vida. Só depende de você.
- suporte@comunidadeds.com
Copyright @2024 – Todos os direitos reservados – Comunidade DS