Перейти к содержанию

Трансформация

Инструменты для преобразования и подготовки данных к аналитике.

dbt

Статья Описание
Введение в dbt Что такое dbt, какую проблему решает, архитектура проекта
Модели и материализации view, table, incremental, ephemeral — Jinja, макросы, структура
Тесты и документация Встроенные и кастомные тесты, schema.yml, CI/CD

Spark

Статья Описание
Введение в Spark Архитектура, RDD vs DataFrame, PySpark, lazy evaluation