資料探勘工程師 / Data Mining Engineer
Posted Updated 1
view
Description
▌節奏快速勇於挑戰
我們的節奏步伐相當快速,歡迎喜歡挑戰,樂於質疑現狀,並以用戶價值為導向。在這裡,我們重視個人的責任感和成果導向,注重團隊結果成效!期待快節奏工作環境,並渴望在國際舞台上實現自我價值的挑戰者,我們歡迎你的加入!
==============================================
【Job Description】
- 數據收集與整合: 從各種來源 (如資料庫與API 等) 收集數據,並將其整合到統一的數據倉庫或資料湖中。
- 數據清理與轉換: 處理數據中的缺失值、異常值、不一致性等問題,並將數據轉換成適合分析的格式。
- 數據建模: 設計並建立數據模型,以有效組織和儲存數據,方便後續的查詢和分析。
- 數據管道開發: 建構自動化的數據管道,確保數據能夠持續、穩定地流入數據平台。
- 數據工具開發: 開發自定義的數據工具和應用程式,以提高工作效率。
【Requirement】
- 程式設計能力: 熟練掌握 Python、SQL 等程式語言,以及相關的數據處理框架 (如 Pandas, NumPy, Airflow 等)。
- 數據庫知識: 熟悉關係型數據庫 (如 MySQL, PostgreSQL) 和 NoSQL 數據庫 (如 MongoDB) 的原理和操作。
- 雲端平台: 熟悉 AWS、Azure、GCP 等雲端平台上的數據服務和工具。
- 資料結構與演算法: 具備良好的資料結構與演算法基礎,以優化數據處理的效率。
- 系統管理: 熟悉 Linux 系統,並具備基本的系統管理能力。