【國泰集團】資深數據工程師
- 台北市大安區
- 3年以上
- 大學
一、關於我們： •我們致力於利用數據科學來提升人們的生活健康質量。在這個AI引領的時代，我們相信健康管理不再受限於傳統方法，而是可以透過數據與AI技術以前所未有的方式來實現。 •我們正在尋找一位充滿熱情且卓越的數據工程師，加入我們，攜手創建這個嶄新的健康管理模式，並一起走在科技與健康的前沿，同時鑽研最新的科技技術，同時得到自我健康實現。 二、工作內容： •使用 Python 和 Apache Airflow 處理複雜的ETL Pipeline，設計高效且高可用的解決方案。 •企業資料倉儲系統開發/維運管理，操作 NoSQL 數據庫進行數據管理。 •雲地數據ETL Pipeline與DevOps規劃、開發與維護，如：AWS、GCP。 三、必備技能： 獨立開發端到端ETL流程： •熟悉Python處理 ETL開發及維護資料流程。 •熟悉Apache Airflow監控和評估ETL流程的性能。 具備操作NoSQL資料庫經驗： •具備NoSQL（包含但不限於MongoDB）數據庫的專業知識，包括數據模型設計、索引建立、查詢優化和數據安全管理。 •熟悉 NoSQL（包含但不限於MongoDB）的擴展和集群管理，能夠處理大規模數據的存儲和查詢需求。 具備Docker的使用經驗 •建立和維護 Docker容器，包括容器的部署、監控和性能優化。 •熟悉 Dockerfile 和 Docker Compose 的編寫與應用。 具備數據架構規劃與工作管理能力： •對數據架構具有想法，能持續優化、擴展與延伸。 •能自主管理工作流程，包括設定工作項目預期產出及時程規劃，確保工作能如期如質完成。 具備溝通協作能力： •善於和廠商協作，能準確的將需求傳遞給廠商，並確保廠商交付結果如期如質完成。 •善於跨單位溝通需求，並有效地將這些需求轉化為實際的技術解決方案。 •能以清晰簡潔的方式將複雜的技術傳達給非技術聽眾。 四、其他條件： 雲端數據架構的管理與優化： •擁有在主流雲平台（如 Amazon Web Services、Microsoft Azure 或 Google Cloud Platform）上管理和優化數據架構的實戰經驗。 •精通雲服務的配置和管理，能夠設計雲基礎設施以支持高可用性和擴展性，並確保數據安全和符合規範要求。 具備使用大型語言模型相關經驗： •包含但不限於GPT, Claude, llama, RAG等開發經驗，並熟悉部署相關服務於雲端管理平台。 五、為什麼選擇國泰健康管理顧問？ •隨著數據團隊的持續擴編，我們正在尋找一位充滿熱情的數據工程師加入我們的團隊。 •提供良好的數據創新環境和豐富的培訓資源，您將有機會接觸最新的技術，如生成式 AI、雲端技術，並參與開發前沿的數據解決方案。 •加入我們，您將成為我們團隊重要的一員，參與從無到有創建智能健康未來的過程，啟發客戶健康意識，協助大家擁有健康的生活型態！