Szkolenia Google Cloud

Cel szkolenia

kod: GC-OBQWD | wersja: v1.0

Dataform is a service for data analysts to develop, test, version control, and schedule complex SQL workflows for data transformation in BigQuery. In this course you will explore the components of Dataform core, learn how to define tables and dependencies in SQLX, document BigQuery tables and views, understand BigQuery security settings and how to manage these with Dataform, write assertions, execute SQL workflows, and explore additional advanced use cases.

 

What you'll learn

  • Understand the components of Dataform core.
  • Create tables and views in BigQuery using Dataform.
  • Document BigQuery tables and views.
  • Understand BigQuery security settings using Dataform.
  • Use assertions to validate data in Dataform workflows.
  • Execute Dataform SQL workflows in an automated fashion.

 

Audience

Any data analyst, data engineer, or other data professional who wishes to use Dataform to orchestrate data workloads in BigQuery

Plan szkolenia Rozwiń listę

  • Module 1 - Dataform Core Components
    • Topics
      • SQL workflow
      • Repositories and workspaces
      • Default files and folders
      • Compiled graphs
    • Objectives
      • Understand the components of Dataflow core.
  • Module 2 - Table Definitions and Dependencies
    • Topics
      • Declare a data source.
      • Create a table.
      • Create an incremental table.
      • Set partitioning and clustering options.
      • Create an empty table.
      • Create an external BigLake table.
      • Create views and materialized views.
      • Define dependencies.
    • Objectives
      • Create tables and views in BigQuery using Dataform.
  • Module 3 - Document BigQuery Tables and Views
    • Topics
      • Use column descriptions.
      • Use globally defined JavaScript constants.
      • Add labels
    • Objectives
      • Document BigQuery tables and views.
    • Activities
      • Lab: Build SQL Workflows with Dependencies in Dataform
  • Module 4 - BigQuery Security Settings
    • Topics
      • IAM dataset and table/view access
      • Column-level security
      • Row-level security
    • Objectives
      • Understand BigQuery security settings using Dataform.
  • Module 5 - Assertions
    • Topics
      • Use built-in assertions.
      • Create manual assertions.
    • Objectives
      • Use assertions to validate data in Dataform workflows.
    • Activities
      • Lab: Work with Assertions and BigQuery Security Settings in Dataform
  • Module 6 - SQL Workflow Executions
    • Topics
      • Dataform code lifecycle.
      • What happens during compilation.
      • Customize and schedule compilation results.
      • Execute workflows (UI, Cloud Scheduler, Cloud Composer).
      • Logging and monitoring
    • Objectives
      • Execute Dataform SQL workflows in an automated fashion.
    • Activities
      • Lab: Automate and Monitor SQL Workflow Executions in Dataform
  • Module 7 - Advanced Use Cases
    • Topics
      • Create a BigLake table after file upload using Cloud Run functions.
      • Build a Machine Learning pipeline with BigQuery ML.
      • Work with Slowly Changing Dimensions Type 2.
    • Objectives
      • Explore additional use cases for Dataform.
    • Activities
      • Lab: Create a BigLake Table with Dataform Using Cloud Run Functions
Pobierz konspekt szkolenia w formacie PDF

Dodatkowe informacje

Wymagania wstępne

Knowledge of SQL data analysis and BigQuery as discussed in BigQuery for Data Analysis.
Poziom trudności
Czas trwania 1 dzień
Certyfikat

The participants will obtain certificates signed by Google Cloud Platform.
Prowadzący

Authorized Google Cloud Platform Trainer.

Pozostałe szkolenia Google Cloud | Data Engineering

Wszystkie szkolenia Google Cloud
Formularz kontaktowy

Prosimy o wypełnienie poniższego formularza, jeśli chcą Państwo uzyskać więcej informacji o powyższym szkoleniu.





* pola oznaczone (*) są wymagane

Informacje o przetwarzaniu danych przez Compendium – Centrum Edukacyjne Spółka z o.o.

CENA 2500 PLN NETTO

FORMA SZKOLENIA ?

 

MATERIAŁY SZKOLENIOWE ?

 

WYBIERZ TERMIN SZKOLENIA

  • szkolenie dostępne w wersji stacjonarnej we wskazanej lokalizacji lub w trybie zdalnym, w zależności od preferencji uczestnika: HYBRID
    • Informacje ogólne
    • Termin gwarantowany
    • Last minute (-10%)
    • Język obowiązujący na szkoleniu
    • Polski
  • szkolenie dostępne w wersji stacjonarnej we wskazanej lokalizacji lub w trybie zdalnym, w zależności od preferencji uczestnika: HYBRID
    • Informacje ogólne
    • Termin gwarantowany
    • Last minute (-10%)
    • Język obowiązujący na szkoleniu
    • Polski
Zarezerwuj termin szkolenia
zamknij

Szkolenie stacjonarne

Szkolenia stacjonarne w Compendium CE odbywają się najczęściej w naszych lokalizacjach w Krakowie i Warszawie, ale także w miejscu ustalonym przez klienta. Grupa uczestnicząca w szkoleniu spotyka się w danym miejscu o określonym czasie i wraz z trenerem aktywnie uczestniczy w laboratoriach.

Szkolenie dlearning

W szkoleniach Compendium Distance Learning możesz uczestniczyć z dowolnego miejsca na świecie. Kursanci, dzięki zaawansowanej technologii, którą dostarcza Compendium CE, stale widzą i słyszą trenera, mogą mu zadawać pytania poprzez chat i mikrofon, a także uczestniczą w ćwiczeniach i laboratoriach, które rozwiązują wraz z prowadzącym. Po więcej informacji zajrzyj na stronę dlearning.eu

zamknij

Materiały papierowe

Materiały tradycyjne: cena zawiera standardowe materiały wydawane w postaci książek papierowych, drukowanych lub innej, w zależności od ustaleń z producentem.

Materiały elektroniczne

Materiały elektroniczne: są to materiały szkoleniowe w wersji elektronicznej, które w zależności od dostawcy udostępniane są za pomocą dedykowanych aplikacji: Skillpipe, eVantage itd. lub w postaci dokumentów PDF.

Materiały ctab

Materiały ctab: cena zawiera tablet ctab oraz materiały szkoleniowe w formie elektronicznej bądź tradycyjne materiały szkoleniowe i materiały dodatkowe dostarczone w wersji elektronicznej w zależności od ustaleń z producentem (w postaci dokumentów PDF lub EPUB). Tak dostarczone materiały są przystosowane pod kątem wyświetlania ich na tablecie ctab. Po więcej informacji zajrzyj na stronę ctab.

Najbliższe szkolenia Google Cloud

Harmonogram szkoleń
Google Cloud