HQ-Data Architect 資深資料工程師(DataOps導向)(汐止總部)
Posted Updated 8
views
Description
此職缺為集團資訊總部職務,非駐點性質工程師。
【職務描述】
- 設計與建置資料平台與資料中心,具備 Hadoop 生態系統(HDFS / Hive / YARN / HBase 等)建置與維運經驗
- 導入並維運資料平台與相關基礎設施,熟悉 Airflow、Nifi、Spark 等工具
- 規劃整體資料架構與數據流程,設計高可擴展與高效能的 ETL / ELT pipeline
- 規劃資料表 schema 與資料模型,根據業務需求進行資料分區、快取策略與資料分層設計
- 協助數據團隊部署並維運機器學習模型(ML model),支援模型部署、版本管理與效能監控
- 與資料科學家、後端工程師、業務團隊密切合作,協助將模型推進至企業應用
- 監控資料流程效能與品質,進行異常檢測與自動警示設定
【必要條件】
- 具備 5年以上資料工程相關經驗,熟悉 ETL 流程與Hadoop 生態系建置與維運經驗
- 熟練 Python 與 SQL,能撰寫高效能的資料處理與轉換邏輯
- 熟悉資料處理工具與框架,如 Apache Airflow、Apache Nifi、Spark 等
- 具備主動學習與問題解決能力,能獨立完成技術探索與 PoC 驗證