Tool transformasi data open-source yang memungkinkan data engineer dan analyst menulis transformasi SQL layaknya software engineer, lengkap dengan testing, dokumentasi, dan version control.

Transformasi raw data dari Fivetran/Airbyte menjadi tabel analitik bersih. Membuat lapisan data (staging, intermediate, mart) yang terstruktur dan documented. Memastikan kualitas data dengan automated tests setiap kali pipeline berjalan. Kolaborasi tim data analyst dan engineer pada kode transformasi yang sama. Membangun semantic layer yang konsisten sebagai single source of truth untuk metrik bisnis

Apa kesalahpahaman umum tentang dbt?

dbt bukan ETL tool - dbt hanya menangani Transform (T), bukan Extract dan Load. dbt tidak memindahkan data - dbt menjalankan SQL di dalam data warehouse, tidak ada data yang keluar. dbt bukan hanya untuk engineer - data analyst bisa produktif dengan dbt menggunakan SQL yang sudah mereka kuasai

dbt: Pengertian, Fungsi, dan Contoh Penggunaan

dbt (data build tool) adalah framework transformasi data yang mengubah cara tim data bekerja dengan SQL. dbt menerapkan praktik rekayasa perangkat lunak—seperti modularitas, testing, dan dokumentasi—ke dalam workflow transformasi data.

dbt dalam Ekosistem ELT

dbt berfokus pada tahap T dalam ELT (Extract, Load, Transform):

Extract & Load: Dilakukan oleh Fivetran, Airbyte, atau tool lain
Transform: Inilah tugas dbt - mengubah raw data menjadi tabel analitik

Konsep Inti dbt

Model

File SQL (.sql) yang mendefinisikan satu transformasi. dbt mengeksekusi setiap model sebagai CREATE TABLE atau CREATE VIEW di data warehouse.

Ref Function

{{ ref('nama_model') }} - cara dbt mengelola dependensi antar model. dbt otomatis membangun DAG dan menjalankan model dalam urutan yang benar.

Test

Validasi otomatis terhadap data. dbt punya built-in tests: not_null, unique, accepted_values, relationships.

Documentation

Setiap model dan kolom bisa diberi deskripsi di file YAML. dbt generate dokumentasi HTML otomatis.

dbt Core vs dbt Cloud

Aspek	dbt Core	dbt Cloud
Lisensi	Open source, gratis	SaaS berbayar
Interface	CLI	Web IDE + Scheduler
Scheduling	Harus pakai Airflow/dll	Built-in scheduler
Kolaborasi	Via Git	Built-in collaboration
Cocok untuk	Tim teknis	Tim campuran (analyst + engineer)

dbt dalam Ekosistem ELT

dbt berfokus pada tahap T dalam ELT (Extract, Load, Transform):

Extract & Load: Dilakukan oleh Fivetran, Airbyte, atau tool lain
Transform: Inilah tugas dbt - mengubah raw data menjadi tabel analitik

Konsep Inti dbt

Model

File SQL (.sql) yang mendefinisikan satu transformasi. dbt mengeksekusi setiap model sebagai CREATE TABLE atau CREATE VIEW di data warehouse.

Ref Function

{{ ref('nama_model') }} - cara dbt mengelola dependensi antar model. dbt otomatis membangun DAG dan menjalankan model dalam urutan yang benar.

Test

Validasi otomatis terhadap data. dbt punya built-in tests: not_null, unique, accepted_values, relationships.

Documentation

Setiap model dan kolom bisa diberi deskripsi di file YAML. dbt generate dokumentasi HTML otomatis.

dbt Core vs dbt Cloud

Aspek	dbt Core	dbt Cloud
Lisensi	Open source, gratis	SaaS berbayar
Interface	CLI	Web IDE + Scheduler
Scheduling	Harus pakai Airflow/dll	Built-in scheduler
Kolaborasi	Via Git	Built-in collaboration
Cocok untuk	Tim teknis	Tim campuran (analyst + engineer)

dbt

dbt dalam Ekosistem ELT

Konsep Inti dbt

Model

Ref Function

Test

Documentation

dbt Core vs dbt Cloud

Istilah Terkait

Apache Airflow

Airbyte

Fivetran

dbt

dbt dalam Ekosistem ELT

Konsep Inti dbt

Model

Ref Function

Test

Documentation

dbt Core vs dbt Cloud

Istilah Terkait

Apache Airflow

Airbyte

Fivetran