數據工程師 (底薪＋獎金)

//公司快速擴張中，需要你/妳的加入一起成長 「睿思創新」榮獲種子輪、天使輪創投資金挹注，目前正積極推廣主力產品 CROSSBOT AI 落地應用平台。 職務內容說明如下： 【主要任務】 1. 與資料科學家、雲端架構師、資料分析師、PM密切合作, 提供客戶高質量的雲端數據相關服務。 2. 負責協助客戶整合、設計、部署大數據處理流程與平臺，設計數據流程 (Data Pipeline)從資料庫、API中取得及彙整資料。 3. 因應業務需求支援各類型來源資料串接、資料處理，完善資料倉儲。 4. 資料 ETL 流程自動化規劃、設計、開發與監控維護。 【工作內容】 1. 數據模型 (Data Schema) 設計 (1) 與團隊合作設計DB/Table Schema和Data Schema。 (2) 有處理各類結構化/半結構化/非結構化數據和串流數據的經驗者優先。 2.數據處理和流程開發 (1)Data ETL (Extracting/Transforming/Loading) 開發ETL流程，用於數據收集、清洗、處理、存儲和分析。 (2) 開發數據整合流程，包括建立可擴展的數據流程和建立數據服務/數據 APIs。 (3)透過優化數據處理流程，建立數據處理自動化和監控機制。 【必要條件】 1. 具備基礎 SQL 及 Python 程式處理能力。 2. ETL 排程工具開發經驗，如：Dataflow、等。 3. 熟悉雲端環境，如：GCP、Azure、AWS等。 4. 樂於學習新技術，積極肯做的工作態度。 5. 具備Git 版控使用經驗。 6. Docker or Kubernetes 使用經驗。 7. 2~3 年相關經驗。 【加分條件】 1. 具備 BigQuery、RDBMS、MySQL、NoSQL 使用經驗 2. 具備爬蟲相關經驗 3. 熟悉 Restful API 4. 熟悉 Power BI、Tableau、Google Analytics