ETL 資料工程師/大數據工程師
Description
【工作內容】
1.協助客戶安裝與部署 Pentaho 產品,包括 Pentaho Data Integration(PDI)、Pentaho Server 和 Pentaho Report Designer。
2.使用 ETL 工具(Pentaho PDI、Talend、Informatica、Microsoft SSIS 等)進行數據抽取、轉換與載入,確保資料正確性與完整性。
3.熟悉 Python 或 Java 等程式語言,能撰寫 ETL 腳本與自動化流程。
4.設計並維護 Data Model,建立高效、可擴充的數據架構。
5.開發與維護 Data Warehouse,確保數據一致性、完整性與可靠性。
6.熟悉 SQL 與常見資料庫(RDBMS / NoSQL),能分析並解決複雜的資料問題。
7.協助客戶安裝與配置 OpenMetadata,並整合至既有數據管理環境。
8.使用 OpenMetadata 平台建立與維護數據資產目錄,協助定義數據標準、數據政策與分類。
9.整合 OpenMetadata 與其他數據管理工具(ETL、資料庫、BI 工具等)。
10.撰寫專案與技術文件,包括安裝手冊、教育訓練教材與客戶需求文件。
11.參與客戶需求訪談,協助規劃與導入完整的數據平台解決方案。
12.其他主管交辦事項。
【必要條件】
1.具備 SQL 語法與資料結構基礎,理解 Data Flow 並能應用於實務案例。
2.熟悉 ETL 工具操作與數據處理邏輯。
3.至少熟悉一種程式語言(Python / Java),能進行自動化與流程開發。
4.理解 Data Model 設計理論並具備實務經驗。
5.良好的溝通能力,能與客戶合作並釐清需求。
6.具備獨立作業與問題解決能力,能快速學習新技術。
【加分條件】
熟悉 Pentaho PDI 或 OpenMetadata 平台。
具備 Data Warehouse、資料治理、資料湖泊等相關經驗。
有報表系統(如 Pentaho Report Designer、Power BI、Tableau)應用經驗。
瞭解雲端數據平台(如 AWS Redshift、GCP BigQuery、Snowflake)尤佳。
具備教育訓練、技術文件撰寫與客戶導入顧問經驗。
【發展方向】
短期(1–2 年):熟悉 Pentaho / OpenMetadata / DWH 平台導入,能獨立執行專案模組。
中期(2–4 年):成為能夠進行跨系統數據整合與數據治理規劃的顧問。
長期(5 年以上):成長為資料架構師 / 雲端數據平台專家,能帶領團隊規劃企業級數據平台。