Introduction to Data Engineering on Google Cloud
Neste curso, você aprenderá sobre engenharia de dados no Google Cloud, as funções e responsabilidades dos engenheiros de dados e como elas mapeiam as ofertas fornecidas pelo Google Cloud. Você também aprenderá sobre maneiras de lidar com os desafios da engenharia de dados.
Visão Geral do Treinamento
Neste curso, você aprenderá sobre engenharia de dados no Google Cloud, as funções e responsabilidades dos engenheiros de dados e como elas mapeiam as ofertas fornecidas pelo Google Cloud. Você também aprenderá sobre maneiras de lidar com os desafios da engenharia de dados.
O que sua equipe vai aprender
- Entender o papel de um engenheiro de dados.
- Identificar tarefas de engenharia de dados e componentes principais usados no Google Cloud.
- Entenda como criar e implantar pipelines de dados de padrões variados no Google Cloud.
- Identificar e utilizar diversas técnicas de automação no Google Cloud.
Público-Alvo
- Engenheiros de dados
- Administradores de banco de dados
- Administradores de sistema
Conteúdo Programático
- O papel de um engenheiro de dados
- Fontes de dados versus Data Sinks (coletores de dados)
- Formatos de dados
- Opções de solução de armazenamento no Google Cloud
- Opções de gerenciamento de metadados no Google Cloud
- Compartilhando conjuntos de dados usando o Analytics Hub
- Laboratório, Carregando dados no BigQuery
- Arquitetura de replicação e migração
- A ferramenta de linha de comando gcloud
- Movendo conjuntos de dados
- Datastream / Fluxo de dados
- Laboratório, Datastream: Replicação PostgreSQL para BigQuery
- Arquitetura de Extração e Carregamento
- A ferramenta de linha de comando bq
- Serviço de transferência de dados do BigQuery
- BigLake
- Laboratório, BigLake: Qwik Start
- Arquitetura de Extração, Carregamento e Transformação (ELT)
- Script e agendamento SQL com BigQuery
- Dataform
- Laboratório, Criar e Executar um Fluxo de Trabalho SQL no Dataform
- Arquitetura de Extração, Transformação e Carregamento (ETL)
- Ferramentas de GUI do Google Cloud para pipelines de dados ETL
- Processamento de dados em lote usando Dataproc
- Opções de processamento de dados de streaming
- Bigtable e pipelines de dados
- Laboratório, use o Dataproc Serverless para Spark para carregar o BigQuery
- Laboratório, Criando um pipeline de dados de streaming para um painel em tempo real com o Dataflow
- Padrões e opções de automação para pipelines
- Cloud Scheduler e Workflows
- Cloud Composer
- Cloud Run Functions
- Eventarc
- Laboratório, Use as Cloud Run Functions para carregar o BigQuery
Solicitar Turma In-Company
Treinamento exclusivo para a sua equipe, com laboratórios práticos sob medida e condições corporativas.
- Datas e horários flexíveis para sua equipe
- Laboratórios práticos em ambiente oficial Google Cloud
- Emissão de certificados oficiais de conclusão
Acelere a Transformação em Nuvem da Sua Equipe
Converse com nossos especialistas de currículo para desenhar uma trilha personalizada para sua empresa.