Arki1 - Google Cloud Authorized Training Partner
Data & Analytics

Introduction to Data Engineering on Google Cloud

Neste curso, você aprenderá sobre engenharia de dados no Google Cloud, as funções e responsabilidades dos engenheiros de dados e como elas mapeiam as ofertas fornecidas pelo Google Cloud. Você também aprenderá sobre maneiras de lidar com os desafios da engenharia de dados.

Duração 8h
Nível Introdutório
Modalidade In-Company / Online ao Vivo
Instrutor Homologado Google Cloud

Visão Geral do Treinamento

Neste curso, você aprenderá sobre engenharia de dados no Google Cloud, as funções e responsabilidades dos engenheiros de dados e como elas mapeiam as ofertas fornecidas pelo Google Cloud. Você também aprenderá sobre maneiras de lidar com os desafios da engenharia de dados.

O que sua equipe vai aprender

  • Entender o papel de um engenheiro de dados.
  • Identificar tarefas de engenharia de dados e componentes principais usados no Google Cloud.
  • Entenda como criar e implantar pipelines de dados de padrões variados no Google Cloud.
  • Identificar e utilizar diversas técnicas de automação no Google Cloud.

Público-Alvo

  • Engenheiros de dados
  • Administradores de banco de dados
  • Administradores de sistema

Conteúdo Programático

Módulo 1: Tarefas e componentes de engenharia de dados Módulo 1
  • O papel de um engenheiro de dados
  • Fontes de dados versus Data Sinks (coletores de dados)
  • Formatos de dados
  • Opções de solução de armazenamento no Google Cloud
  • Opções de gerenciamento de metadados no Google Cloud
  • Compartilhando conjuntos de dados usando o Analytics Hub
  • Laboratório, Carregando dados no BigQuery
Módulo 2: Replicação e migração de dados Módulo 2
  • Arquitetura de replicação e migração
  • A ferramenta de linha de comando gcloud
  • Movendo conjuntos de dados
  • Datastream / Fluxo de dados
  • Laboratório, Datastream: Replicação PostgreSQL para BigQuery
Módulo 3: O Pattern de Pipeline de Extração e Carregamento de Dados Módulo 3
  • Arquitetura de Extração e Carregamento
  • A ferramenta de linha de comando bq
  • Serviço de transferência de dados do BigQuery
  • BigLake
  • Laboratório, BigLake: Qwik Start
Módulo 4: O padrão de pipeline de Extract, Load, and Transform Módulo 4
  • Arquitetura de Extração, Carregamento e Transformação (ELT)
  • Script e agendamento SQL com BigQuery
  • Dataform
  • Laboratório, Criar e Executar um Fluxo de Trabalho SQL no Dataform
Módulo 5: O padrão de Extract, Transform, and Load Módulo 5
  • Arquitetura de Extração, Transformação e Carregamento (ETL)
  • Ferramentas de GUI do Google Cloud para pipelines de dados ETL
  • Processamento de dados em lote usando Dataproc
  • Opções de processamento de dados de streaming
  • Bigtable e pipelines de dados
  • Laboratório, use o Dataproc Serverless para Spark para carregar o BigQuery
  • Laboratório, Criando um pipeline de dados de streaming para um painel em tempo real com o Dataflow
Módulo 6: Técnicas de Automação Módulo 6
  • Padrões e opções de automação para pipelines
  • Cloud Scheduler e Workflows
  • Cloud Composer
  • Cloud Run Functions
  • Eventarc
  • Laboratório, Use as Cloud Run Functions para carregar o BigQuery
Atendimento Corporativo

Solicitar Turma In-Company

Treinamento exclusivo para a sua equipe, com laboratórios práticos sob medida e condições corporativas.

  • Datas e horários flexíveis para sua equipe
  • Laboratórios práticos em ambiente oficial Google Cloud
  • Emissão de certificados oficiais de conclusão
Solicitar Proposta In-Company
Capacitação Corporativa

Acelere a Transformação em Nuvem da Sua Equipe

Converse com nossos especialistas de currículo para desenhar uma trilha personalizada para sua empresa.