Como criar pipelines de dados de streaming no Google Cloud

Overview

O processamento de dados de streaming é cada vez mais usado pelas empresas para gerar métricas sobre as operações comerciais em tempo real. Neste curso, você vai aprender a criar pipelines de dados de streaming no Google Cloud. O Pub/Sub é apresentado como a ferramenta para gerenciar dados de streaming de entrada. No curso, também abordamos a aplicação de agregações e transformações a dados de streaming usando o Dataflow, além de formas de armazenar registros processados no BigQuery ou no Cloud Bigtable para análise. Os participantes vão ganhar experiência prática na criação de componentes de pipelines de dados de streaming no Google Cloud usando o Qwiklabs.

Syllabus

Introdução ao curso

Este módulo apresenta os fundamentos da criação de pipelines de dados de streaming no Google Cloud, fornecendo uma base para todo o curso. Ele começa descrevendo os objetivos gerais de aprendizado e apresentando um cenário prático que será usado em todo o conteúdo e nos laboratórios para tornar os conceitos tangíveis.

Casos de uso de streaming e arquiteturas de referência

Este módulo apresenta os casos de uso e arquiteturas de dados de streaming. Você vai aprender sobre os aplicativos e padrões arquitetônicos comuns para o processamento de dados em tempo real em quatro cenários principais: ETL de streaming, IA/ML de streaming, aplicativo de streaming e ETL reverso.

Detalhes do produto

Este módulo oferece uma visão geral abrangente da criação de pipelines de dados de streaming no Google Cloud, tratando dos principais serviços de mensagens, processamento e análise. Ele foi criado para que você entenda na prática como os componentes funcionam juntos em uma arquitetura coesa e em tempo real.

Pontos principais

Este módulo oferece uma conclusão abrangente do curso, tratando dos principais conceitos aprendidos para criar pipelines de dados de streaming resilientes e robustos no Google Cloud.