//公司快速擴張中,需要你/妳的加入一起成長
「睿思創新」榮獲種子輪、天使輪創投資金挹注,目前正積極推廣主力產品 CROSSBOT AI 落地應用平台。
職務內容說明如下:
【主要任務】
1. 與資料科學家、雲端架構師、資料分析師、PM密切合作, 提供客戶高質量的雲端數據相關服務。
2. 負責協助客戶整合、設計、部署大數據處理流程與平臺,設計數據流程 (Data Pipeline)從資料庫、API中取得及彙整資料。
3. 因應業務需求支援各類型來源資料串接、資料處理,完善資料倉儲。
4. 資料 ETL 流程自動化規劃、設計、開發與監控維護。
【工作內容】
1. 數據模型 (Data Schema) 設計
(1) 與團隊合作設計DB/Table Schema和Data Schema。
(2) 有處理各類結構化/半結構化/非結構化數據和串流數據的經驗者優先。
2.數據處理和流程開發
(1)Data ETL (Extracting/Transforming/Loading) 開發ETL流程,用於數據收集、清洗、處理、存儲和分析。
(2) 開發數據整合流程,包括建立可擴展的數據流程和建立數據服務/數據 APIs。
(3)透過優化數據處理流程,建立數據處理自動化和監控機制。
【必要條件】
1. 具備基礎 SQL 及 Python 程式處理能力。
2. ETL 排程工具開發經驗,如:Dataflow、等。
3. 熟悉雲端環境,如:GCP、Azure、AWS等。
4. 樂於學習新技術,積極肯做的工作態度。
5. 具備Git 版控使用經驗。
6. Docker or Kubernetes 使用經驗。
7. 2~3 年相關經驗。
【加分條件】
1. 具備 BigQuery、RDBMS、MySQL、NoSQL 使用經驗。
2. 具備爬蟲相關經驗。
3. 熟悉 Restful API。
4. 熟悉 Power BI、Tableau、Google Analytics。