- Level Expert
- Course by Google Cloud
-
Offered by
About
Na última parte da série de cursos do Dataflow, vamos abordar os componentes do modelo operacional do Dataflow. Veremos ferramentas e técnicas para solucionar problemas e otimizar o desempenho do pipeline. Depois analisaremos as práticas recomendadas de teste, implantação e confiabilidade para pipelines do Dataflow. Por fim, faremos uma revisão dos modelos, que facilitam o escalonamento dos pipelines do Dataflow para organizações com centenas de usuários. Essas lições garantem que a plataforma de dados seja estável e resiliente a circunstâncias imprevistas.Modules
Visão geral
2
Videos
- Introdução ao curso
- Como começar a usar o Google Cloud Platform e o Qwiklabs
1
Readings
- Important note about hands-on labs
Course Feedback
1
Readings
- How to Send Feedback
Monitoring
5
Videos
- Lista de jobs
- Informações de jobs
- Gráficos de jobs
- Métricas de jobs
- Metrics Explorer
Teste
1
Assignment
- Monitoramento
Recursos adicionais
1
Readings
- Recursos adicionais
Logging e Error Reporting
2
Videos
- Logging
- Error Reporting
Teste
1
Assignment
- Logging e Error Reporting
Recursos adicionais
1
Readings
- Recursos adicionais
Solução de problemas e depuração
2
Videos
- Fluxo de trabalho da solução de problemas
- Tipos de problemas
Teste
1
Assignment
- Solução de problemas e depuração
Laboratório: Como monitorar, registrar e relatar erros dos jobs do Dataflow
1
External Tool
- Laboratório: Como monitorar, registrar e relatar erros dos jobs do Dataflow
Recursos adicionais
1
Readings
- Recursos adicionais
Desempenho
4
Videos
- Design do pipeline
- Formato dos dados
- Origens, coletores e sistemas externos
- Shuffle e Streaming Engine
Teste
1
Assignment
- Desempenho
Recursos adicionais
1
Readings
- Recursos adicionais
Testes e CI/CD
5
Videos
- Visão geral de testes e CI/CD
- Teste de unidade
- Teste de integração
- Criação de artefatos
- Implantação
Teste
1
Assignment
- Testes e CI/CD
Lab: Testing with Apache Beam
2
External Tool
- Lab: Processamento de dados sem servidor com o Dataflow: como fazer testes usando o Apache Beam (Java)
- Lab: Testing with Apache Beam (Python)
Lab: CI/CD with Dataflow
1
External Tool
- Lab: CI/CD with Dataflow
Recursos adicionais
1
Readings
- Recursos adicionais
Confiabilidade
5
Videos
- Introdução à confiabilidade
- Monitoring
- Geolocalização
- Recuperação de desastres
- Alta disponibilidade
Teste
1
Assignment
- Confiabilidade
Recursos adicionais
1
Readings
- Recursos adicionais
Modelos Flex
4
Videos
- Modelos Classic
- Modelos Flex
- Usar modelos Flex
- Modelos fornecidos pelo Google
Teste
1
Assignment
- Modelos Flex
Laboratório: Modelos Flex personalizados do Dataflow
2
External Tool
- Lab: Modelos Flex personalizados do Dataflow (Java)
- Lab: Modelos Flex personalizados do Dataflow (Python)
Recursos adicionais
1
Readings
- Recursos adicionais
Summary
1
Videos
- Resumo do curso
Auto Summary
"Serverless Data Processing with Dataflow: Operations em Português Brasileiro" is an advanced-level course designed for data science and AI professionals who aim to master the operational aspects of Google Cloud Dataflow. This course, presented by Coursera, delves into critical components such as troubleshooting tools, performance optimization techniques, and best practices for testing, deploying, and ensuring the reliability of Dataflow pipelines. Learners will also explore models to scale Dataflow pipelines efficiently, making the platform robust and adaptable for organizations with extensive user bases. Available through both Starter and Professional subscription plans, this course ensures that participants gain practical skills to maintain a stable and resilient data processing infrastructure.

Google Cloud Training