ETL: Data Fusion

GCP ETL 介紹: Data Fusion

Plugin 套件

類別 簡述 說明
Sources 資料來源 解析的資料來源,e.g. DB檔案串流資料
Transforms 資料轉換 將資料來源做格式型別等等轉換
Analytics 資料分析 將資料來源做 join, group by 分析運算
Actions 自訂動作 在取得 Source 資料來源 前,先對資料做操作處理,但不會將資料丟給 Source 資料來源
Sinks 資料儲存 資料處理過後最後儲存的地方,可以是 DB檔案
Error collectors 錯誤搜集 資料處理發生錯誤時的錯誤紀錄

Transform 資料轉換

Wrangle

A interactive tool for data cleansing and transformation.

參考資料

教學影片

文件

官方

文章


ETL: Data Fusion 安裝 PostgreSQL Driver

GCP ETL 介紹: Data Fusion 安裝 PostgreSQL Driver

ETL: Data Fusion 轉換資料至 PostgreSQL

GCP ETL 介紹: Data Fusion 轉換資料至 PostgreSQL

ETL: Data Fusion Join 資料來源

GCP ETL 介紹: Data Fusion Join 資料來源

ETL: Data Fusion JavaScript 轉換資料 Transform

GCP ETL 介紹: Data Fusion JavaScript 轉換資料 Transform