資料品質測試工程師

【主要職責】 - 設計並維護 自動化資料驗證框架（Automation Framework），覆蓋 batch 與 streaming pipeline。 - 針對 Kinesis、Kafka、Airflow、MySQL、Redshift 等環境執行資料驗證與轉換測試。 - 開發與執行測試計畫，驗證資料擷取（Ingestion）、轉換（Transformation）與載入（Loading）的準確性。 - 監控資料流程，偵測並通報資料異常、延遲、遺失等問題。 - 與 Data Engineer 合作解決 pipeline、schema、metadata 相關問題。 - 驗證資料模型、ETL/ELT 流程與商業邏輯的一致性與正確性。 - 建立並維護 QA 文件，包括 Test Case、Runbook、Validation Report。 - 參與資料平台版本釋出與更新，確保新功能與數據流穩定。 - 實作 資料品質指標（Data Quality Metrics） 與警報機制，用於即時與排程任務監控。 【任職資格】 - 3 年以上 Data QA、Data Engineering 或相關經驗。 - 精通 SQL（MySQL / Redshift），能撰寫複雜查詢與資料驗證邏輯。 - 熟悉 Streaming 系統（Kinesis、Kafka）資料流測試與監控。 - 具 Airflow 或其他資料流程編排工具實務經驗。 - 熟悉 Python，用於資料驗證與自動化測試腳本撰寫。 - 理解資料倉儲架構、ETL/ELT 流程與資料建模。 - 有大型資料集處理與效能調校經驗。 - 了解 Schema 演進、Data Contract 與 Metadata 管理概念。 【加分條件】 - 有 AWS 生態系操作經驗（S3、Lambda、Glue、IAM）。 - 熟悉資料治理與法規遵循（GDPR、CCPA）。 - 具測試框架經驗（PyTest、Great Expectations）。 - 熟悉 CI/CD 流程並能應用於資料工作流測試。 【軟技能與團隊特質】 - 對資料準確性、流程穩定性與品質具有高度責任感。 - 細心、有條理，具備優秀的問題分析與溝通能力。 - 樂於與跨部門合作（Data Engineer、Analyst、PM），共同提升資料品質。 - 具持續學習與探索新技術的動能。 【工作地點】 - 台北市（近捷運站） - 提供彈性上班制度與國際化數據團隊合作環境 【我們提供】 - 具競爭力的薪資與年度獎金制度 - 三節禮金與年度健康檢查 - 彈性上下班與混合辦公制度 - 國際化團隊合作與跨國職涯發展機會