104工作快找APP

面試通知不漏接

立即安裝APP

「資料工程師 Data Engineer」的相似工作

永慶房產集團_永慶房屋仲介股份有限公司
共500筆
09/15
台北市大安區3年以上專科
我們正在尋求充滿熱情、創造力和創新的開發人才加入我們,目前我們資訊團隊已達百人以上規模,而我們高度重視每個人的分享與成長,不定期舉辦「技術分享」活動,讓彼此教學相長。 我們還需要您的加入,讓我們一起來創造不簡單! 職務內容如下: 1.集團數據需求情境釐清並企劃可執行的解決方案。要有簡報製作與提報能力。 2.依集團各事業單位數據需求,撰寫需求分析文件、資料流程圖 (Data Flow Diagram)與相關規格書。 3.市場上大數據相關產品工具研究、評估、導人。 公司福利 1、提供免費咖啡、遊樂設施 (電子飛鏢)、書籍讀物區、舒壓電動按摩椅。 2、除法定勞工保險及全民健保外,另提供員工及眷屬完善的醫療團體保險。 3、結婚、生育、住院及喪葬等慰問金。 4、年終獎金、三節禮金、禮券、生日津貼。 4、提供員工協助方案:專業醫護人員職場照護、不定期健康講座、免費APP管理個人健康。 5、完善的內部員工教育訓練。 6、多元化的員工旅遊行程。 7、年終尾牙餐聚 (可邀請眷屬) 及提供免費返鄉專車。 8、多元化社團活動、各類型運動競賽。 9、部門不定期舉辦免費包場電影、聚餐活動。 相關報導: 《購售屋服務再進化,永慶布局房產科技4.0》https://technews.tw/2022/07/04/yungching-real-estate-4-hiring/#more-926008 《房產科技發展潛力無窮,資訊人才紛紛轉戰房仲業》https://www.cheers.com.tw/article/article.action?id=5100997 永慶數位人才招募,更多職缺連結:https://mps.yungching.com.tw/digital/
應徵
09/16
株式会社シエス情報電腦系統整合服務業
日本3年以上大學以上
招募台灣地區工程師 公司提供簽證的更新以及新規簽證。 可提供高度人才簽證(5年)額外加20分,提早取得永久居留權。 執行案件為一般商業、金融案件居多,會派至委託公司駐點或在宅。 【工作內容】 1.負責軟體之分析、設計以及程式撰寫。 2.規劃執行軟體架構及模組之設計,並控管軟體設計進度。 3.進行軟體之測試與修改。 4.規劃、執行與維護量產的產品。 5.協助研發軟體新技術與新工具。 【工作職缺】Python軟體開發工程師(工作經驗三年以上) 【徵求條件】JAVA,NET,C#C,C++,Python,salesforce,SAP,PHP,IOS,Android,AWS,React.Ruby.C# (其中有一至兩項擅長的項目歡迎詢問) *無日文N1以上(可無檢定證書,但需聽說讀寫流利)請勿投遞履歷,國外遠端工作不可* 【工作地點】日本關東地區 【工作時間】9:00-18:00 中午休息1小時(依客戶現場為主) 【公司制度】1.提供雇用保險、健康保險、年金保險 2.完全週休2日、GW/夏休/年末年始連休 3.工作產生的交通費實報實銷 4.一年一度健康檢查
應徵
09/18
台北市內湖區3年以上大學以上
1. 熟悉 SQL Server、MySql、MongoDB 建置、管理、維護。 2. T-SQL 及 Stored Procedure 效能調校。 3. 資料庫日常監控、異常排除及系統性能優化。 4. 具 DB HA 架構建置和維護經驗。 5. 提供 RD 諮詢並給予建議,進行 DB-Schema 建置與異動的工作。 6. 資料庫備份管理、災難復原及定期系統升級或更新。
應徵
09/08
朋昶數位科技股份有限公司電腦系統整合服務業
台北市中山區3年以上大學
MongoDB、IBM DB2、Cloudera等產品之協銷與建置服務工作 1. 針對資料庫產品提供架構規劃及系統建置 2. 偕同業務與客戶進行產品介紹、架構規劃簡報 3. 參與公司產品推廣活動、擔任資料庫訓練講師
應徵
09/17
創代科技股份有限公司工商顧問服務業
台北市中山區1年以上碩士以上
我們正在尋找一位 Mid-Level 的數據工程師 (Data Engineer),主要負責 資料庫建置、ETL 流程設計與開發、數據處理與分析。目前創代科技曾執行過的專案包含了 大型語言模型產品開發(涵蓋雲端、地端、雲地混合方案)、深度學習開發(產品洞察與行為預測、時間序列預測、路線最佳化)、機器學習應用(各產業客戶的資料探勘與分析)、數據中台建置(含資料正規化、ETL 建置、導入 dbt、snowflake)!我們現在手上有各種類型的專案等著你來玩! 為什麼選擇創代科技? 創代科技是一家提供數據科學顧問服務的公司,業務涵蓋 零售、交通、物流、航運、電信、能源、犯罪、災防 等多元領域,並持續拓展至其他前沿產業。在這裡,你將接觸到多樣化的數據場景,包括乾淨度各異的資料與高度客製化的架構設計,讓你在解決各種挑戰中快速成長。 如果你熱愛學習新技術、探索創新解決方案,那麼在創代擔任數據工程師,將是你的最佳選擇。 ✅ 【職責內容】 1. 資料庫設計:熟悉資料庫概念,協助建置與維護資料倉儲、資料湖跟資料中臺。 2. ETL 或 ELT 流程開發:協助客戶建立基於地端或是雲端的資料流架構,整合多元數據來源(結構化與非結構化),構建高效數據處理系統,確保資料一致性與完整性。 3. 數據處理與協作:與資料科學家、資料分析師及後端工程師協作,處理 Data Pipeline 建置及數據收集、探勘與轉換。 4. 協助客戶工具導入:協助客戶翻新原有 Pipeline,並導入 dbt、snowflake等。 ✅ 【我們期待你具備】 1. 學歷背景:具備碩士學位, 資訊工程、資訊管理、資料科學、數學、統計、電機相關領域加分。 2. 專業技能: - 熟悉數據處理與分析,具備 ETL / ELT 流程開發與維護經驗。 - 熟悉 關聯式資料庫(如 PostgreSQL)及 圖形資料庫(如 Neo4j),擁有資料倉儲建置與操作經驗。 - 熟悉 Linux 環境,並具備版本控制工具(如 Git)使用經驗。 - 熟悉 容器化技術(如 Docker、Kubernetes),了解其生產環境運行與管理。 - 具備 Airflow 排程管理及模型部署經驗。 ✅ 【加分條件】 - 雲端服務:熟悉 GCP、AWS、Azure,具備跨雲架構整合及服務部署能力。 - 分散式系統:有 Hadoop、Spark 開發經驗者尤佳。 - 資料庫工具:具備 dbt 或是 snowflake 導入或是使用經驗。 - DevOps 經驗:具備 CI/CD 自動化部署實作經驗。 - BI 工具:熟悉 Tableau、Looker、Power BI。 - 演算法基礎:理解機器學習、深度學習背後邏輯或是應用經驗。 ✅ 【薪資待遇】 - 面議,保障年薪 14 個月。 ✅ 【公司福利】 - 彈性上下班時間、彈性居家上班福利。 - 每月享有職員不扣薪福利假、生日當月再多一天生日假。 - 不定期員工聚餐、午餐、下午茶、出遊團康活動等。 - 公司零食區、冰箱飲料、咖啡櫃永遠補給充足,讓每位新進夥伴都保證先胖五公斤! - 保障年終獎金 2 個月,其他績效獎金還可以靠自己爭取,亦提供結婚、生育等各項禮金。 - 電腦設備:公司提供工作機,亦可自備設備並領取每月電腦補助費。 - 每年提供教育訓練補助。 - 提供定期健康檢查補助。 - 每年定期進行績效考核,讓職員的升遷與薪資調整更有依據與保障。 ✅ 此職缺定位為 Mid-Level,尋找 1 - 3 年經驗的人選
應徵
09/15
台北市松山區1年以上大學
COMMEET (https://commeet.co) 擴大徵才,歡迎有熱情之新夥伴加入我們的行列 [工作內容] 1 整理、標記數據,以確保數據的準確性與可靠性 2 建立/維護/優化資料處理流程與架構(data pipeline) 3 跟相關的stakeholder合作,解決並優化他們的數據需求 4 其它主管交辦事項。 [必要條件] • 從業人員恪守客戶個資保護敏感度及尊重客戶資料隱密性 • 熟悉 ML/DL • 熟悉 python 語言與相關資料庫 (csv、postgres、redis、excel) • 熟悉圖表可視化(Visualization),以及圖表分析能力 • 熟悉 git 版本控制 • 如線上初試通過者,將安排線下複試,複試安排 leetcode [加分項目] • 具有 OCR 處理數據經驗 • 有kaggle 等競賽平台經驗 • 有新創公司經驗 • 有FinTech 或 ERP/CRM 經驗 [人格特質] • 獨立作業的能力 • 細心負責任 • 勇於溝通,樂於表達自己的想法 • 喜歡主動學習新技術,願意與團隊研究及分享技術新知
應徵
09/19
台北市內湖區1年以上大學以上
我們正在尋找對科技趨勢敏銳、樂於實驗的技術創新人才。你將成為旅遊科技部的技術推進引擎,結合 AI、前沿工具與跨領域思維,探索下一個改變旅遊產業的數位可能。 1. 介接並整合內外部資料來源,確保資料的高可用性與一致性 2. 設計、開發、測試與維護資料處理流程與管道(如 EDI、ETL) 3. 優化資料存儲架構與查詢效能,提升系統整體效能 4. 管理與優化資料管道排程,確保資料流穩定與準時更新 5. 執行資料治理機制,落實資料品質管理與監控 6. 與資料分析師與資料科學家協作,提供穩定且高品質的資料支持 7. 撰寫並維護相關技術文件,確保知識傳承與系統可維護性 8. 其他主管交辦事項 職務需求: 1. 關聯式資料庫: SQL Server 2. 非關聯式資料庫: MongoDB 3. 程式語言: C#、T-SQL 4. 工具: SSMS、SSIS、Power BI
應徵
09/17
天下雜誌股份有限公司雜誌/期刊出版業
台北市中山區2年以上大學以上
【職責】 1. 參與設計與維護數據基礎設施和數據管線 (Data pipeline - ETL/ELT) ,以支援關鍵業務應用 (如MarTech、AdTech、CDP、CRM、推薦系統、標籤等) 與數據應用需求 2. 協助進行數據創新應用和架構研究,特別是支援 AI/ML 專案的數據準備與供應,並參與新興數據技術的研究與導入 (如 Gen AI 相關數據集技術或 Data Lakehouse) 3. 協助執行數據品質、治理與安全相關任務,確保數據的準確性、完整性與合規性 4. 具備獨立執行數據工程任務的能力,負責從概念發想到最終部署的完整流程。同時,與團隊成員緊密協作,共同完成專案,以確保最終成果符合部門的發展目標與方向。 5. 與數據分析師、專案經理、業務團隊及 IT 部門協作, 理解業務需求並協助轉化為技術性數據解決方案 6. 積極學習新技術,並能與團隊成員有效協作、分享知識 【工作內容】 1. 開發、維護和優化複雜的批次和即時數據管線,從多個異質數據源 (包括但不限於 MarTech、AdTech、CDP、CRM、Events log等) 擷取、轉換與載入數據 2. 參與建構與維護基於雲端的數據儲存與處理架構,如數據湖 (Data Lake) 或數據湖倉 (Data Lakehouse),確保系統穩定運行 3. 建構與維護 AI/ML 應用所需的數據集,包括特徵工程數據管線,並研究與實現為 LLM 應用準備數據的機制 (如 MCP 或 RAG 相關數據流程) 4. 參與設計與開發數據服務層 (Data Serving),提供數據 API 或串流數據供下游應用使用 5. 優化現有數據系統和查詢效能,進行效能調校,降低數據處理延遲,提升系統效率 6. 操作與維護自動化的數據流程管理機制,使用 Airflow 等工具進行任務排程與監控 7. 協助建立與維護自動化測試、監控和警報機制,以確保數據平台穩定運行 8. 執行數據治理框架下的具體任務,例如追蹤數據血緣 (Data Lineage),並確保數據處理符合相關法規 9 . 持續學習新興數據技術和行業趨勢 (如 Data Lakehouse, Gen AI 相關技術),並與團隊分享 【技能要求】 1. 具備數據工程相關工作經驗 2 年以上 2. 熟悉 Python 和 SQL,具備良好的程式撰寫能力與數據庫操作能力 3. 具備 Data Orchestration 的實務經驗,熟悉 Airflow 的工作流開發與維護 4. 熟悉至少一個主流雲端平台 (GCP 優先考慮),並對其數據相關服務具備使用經驗 (例如:GCP 的 BigQuery, Cloud Storage, Dataflow, Pub/Sub, Cloud Run, Vertex AI, Composer等) 5. 熟悉數據倉儲 (Data Lakehouse) 或數據湖 (Data Lake) 的概念,並具備協助建構或維護的經驗 6. 熟悉 Git 版本控制系統和 CI/CD 流程 7. 理解數據安全原則、存取控制、數據加密和數據治理概念 【部門介紹】 天下雜誌集團的數據工程師,是數位創新團隊不可或缺的數據架構基石,肩負著以數據賦能的核心使命。此職位的核心職責在於設計、建構並維護高效、穩健的數據基礎設施與數據管線,透過確保數據品質與可用性,以支援推薦系統、CRM、AI/ML 等關鍵應用。我們將與數據工程師攜手,共同推動內容及商務營運目標,將數據驅動的文化深植於日常工作中。 集團旗下擁有《天下》、《康健》、《天下學習》、《親子天下》等知名品牌,涵蓋財經管理、健康生活、工作職場與親子教育等領域。對數據團隊而言,我們就像多家公司合體運作,每個品牌都有獨特的商業模式與需求。從電商、內容訂閱到線上教育的數據應用,你都將有機會深入參與,發揮專業價值,探索多元場景。
應徵
09/15
云智資訊股份有限公司其它軟體及網路相關業
台北市松山區3年以上專科以上
1. 3年以上 ETL 相關經驗。 2. 熟悉MS SQL、ETL(會Trinity、Greenplum尤佳)。 3. 具有資料分析經驗、細心、負責。 4. 溝通能力良好,可與 SA/PM 或其他 PG 協力合作。
應徵
09/17
台北市信義區3年以上大學
您是否渴望在金融科技的前沿,以前瞻數據、AI 與 LLM 技術驅動創新,塑造未來金融服務? 科技創研中心金融科技處,正積極尋找充滿熱忱、具備專業技能的 數據暨AI工程師 加入我們的創新團隊。您將負責金融科技領域的企業級數據平台、AI 平台及 LLM 相關基礎設施的開發、管理與優化,尤其著重於 Data Lakehouse 架構的實踐與 Denodo 虛擬化技術的應用,並參與大型語言模型 (LLM) 在金融領域的應用開發與部署,確保數據的安全性、高效傳輸與穩定運作,為金融 AI/LLM 應用與策略決策提供堅實的技術後盾,助力提升金融服務的競爭力與創新能力。如果您對數據工程、AI/LLM 工程在金融領域的應用充滿熱情,並熟悉 Data Lakehouse、Denodo 等先進技術,且對 LLM 的發展與應用有深入了解,渴望在充滿挑戰與成長的環境中發揮所長,誠摯邀請您加入我們! 【工作職責】 •Data Lakehouse 平台開發與管理: 負責金融科技領域基於 Data Lakehouse 架構的數據平台設計、開發、部署、維護與優化,整合結構化與非結構化數據,提供彈性高效的數據存儲與分析能力,以支持 LLM 相關應用所需的大規模數據。 •Denodo 虛擬化平台管理與開發實作: 負責 Denodo 虛擬化平台的設計與管理,實現多個異質數據源的邏輯整合,提供統一的數據存取介面,簡化數據獲取流程,以支援 LLM 應用所需的多樣化數據來源。 •數據管道開發: 設計並實作高效能的 ETL/ELT 流程,處理多元金融數據來源 (例如:交易數據、市場數據、客戶數據、文本數據等),確保數據的準確性、完整性與即時性,並能有效整合至 Data Lakehouse 或透過 Denodo 進行虛擬化,以供各單位進行分析與應用。 •數據整合與清理: 負責數據的整合、轉換、清理、標準化與特徵工程,提高數據品質,為後續的數據分析、風險模型、 AI 模型與 LLM 的訓練及微調 奠定良好基礎,並考量 Data Lakehouse 的數據治理與管理。 •AI/LLM 平台管理: 負責企業 AI 平台、LLM 相關基礎設施 (例如:GPU 伺服器、模型儲存、API 部署等) 及 MLOps 流程的維護、管理與優化,確保企業內 AI/LLM 模型開發、訓練、微調與安全部署流程的順暢與高效,符合金融保險行業的合規要求,並能有效利用 Data Lakehouse 中的數據。 •LLM 應用開發與部署: 參與金融領域大型語言模型 (LLM) 的應用開發、測試與部署,例如:AI Agent、文本分析、資訊抽取、內容生成等。 •數據監控與效能調校: 開發與運營數據管道、數據庫、Data Lakehouse、AI 平台及 LLM 應用 的監測機制,進行效能分析與調校,確保系統的穩定運行與高效能,並符合系統穩定性的嚴格要求。 •跨部門協作: 與AI 科學家、IT 部門、Biz部門 (例如:通路、核保、商品等) 等緊密合作,深入了解企業業務需求與痛點,提供穩健且高效的數據與 AI/LLM 平台解決方案,並能利用 Data Lakehouse 和 Denodo 提供的能力。
應徵
09/17
文境資科股份有限公司專門設計相關業
台北市大安區1年以上大學以上
Data Engineer/ 資料工程師 1.資料稽核(Data Auditing)、收集(Data Collection)、整合作業(Data Integration) 等資料分析前處理作業 2.有MS SQL server、SSIS、SSRS、SSAS ,或其他ETL工作經驗尤佳 3.具Stored Procedure、Python、.NET、Linux Shell 撰寫經驗 4.對醫療資料分析充滿熱情並具備程式開發之熱忱與積極性 5.以公衛、醫管、資管與統計相關科系優先
應徵
09/15
先悅資訊有限公司工商顧問服務業
台北市信義區1年以上大學
1.熟悉使用Tableau設計報表與儀表板,至少具備1年以上經驗。 2.熟悉撰寫SQL進行資料前處理,至少具備1年以上經驗
應徵
09/14
果友科技有限公司電腦軟體服務業
台北市大安區1年以上學歷不拘
【工作內容】 1. 參與數據資料流程設計、開發與維護,打造高效且穩定的數據基礎架構 2. 使用 Python 進行數據處理,協助將數據應用服務部署與自動化 3. 串接各種 API,進行多元數據收集與整合,讓資料流動更順暢 4. 建立與維護數據倉儲、ETL 流程,確保資料品質與可追溯性 5. 持續優化數據處理效能,提升系統穩定性,與團隊一起解決各種技術挑戰 6. 需派駐至健康管理企業現場 【必備技能】 - Python:具備基礎程式設計能力,熟悉 pandas、numpy 等數據處理套件 - API 整合:能夠串接 REST API,處理 JSON 資料格式 【加分技能】 1. Docker 容器技術:熟悉容器化部署與管理 2. 熟悉雲端平台(AWS、GCP、Azure) 3. 具資訊工程、資訊管理、數學、統計相關背景尤佳 加入果友科技,和我們一起用數據創造影響力! 有興趣歡迎投遞履歷或直接聯繫我們,期待你的加入!
09/16
新北市板橋區2年以上專科以上
職務說明: 我們正在尋找一位雲端數據處理與平台資料工程師,加入我們的資料架構團隊。您將參與企業級資料處理流程的規劃、建置與最佳化,支援分析模型、報表系統與 AI 模型訓練,並推動公司數位轉型與資料驅動決策文化。 01. 設計並建置穩定、高擴展性的資料處理流程與數據管道(ETL/ELT)。 02. 管理 AWS 雲端數據平台(如 Glue、S3、Athena、Redshift、Lambda、EMR 等)。 03. 優化資料流處理效能,確保資料品質與一致性,支援資料科學與分析應用。 04. 撰寫與維護資料處理相關程式(如 PySpark、SQL、Python Lambda)與部署腳本(IaC)。 05. 整合各部門資料源,建置企業資料湖或資料倉儲架構。 06. 配合資安政策與法規,實施資料加密、遮罩與權限管控機制。 07. 撰寫技術文件與操作手冊,確保團隊知識傳承與維運穩定。
應徵
09/16
域動行銷股份有限公司廣告行銷公關業
台北市松山區1年以上大學以上
公司介紹: 域動行銷是中華電信集團轉投資公司之一,成立於2009年,致力於提供創新的數位廣告解決方案,當中包含廣告系統DSP、SSP、CDP、混血數據及廣告聯播網等,我們通過創新的行銷技術解決方案來推動廣告和數據分析的發展,同時專注於行銷科技領域,提供前瞻性的觀點,引領數據行銷的未來。 組織介紹: 域動Data Team是由一群對『數據分析』及『AI應用』具有研究及開發熱誠的成員所組成。在這裡你可以接觸到大量即時的使用者行為資料,並將資料科學模型應用於: 『網路廣告投放優化』 『網路用戶辨識』 『消費者行為分析』 我們更致力於尋找優化方案,改善產品體驗設計及為商業決策提供數據支持,提升效率和價值。我們鼓勵組員多方嘗試、思考、展現天馬行空的創意,且能清楚闡述想法,付諸實踐。 【Job Description】 • 須熟悉python, 尤其是對pyspark操作有經驗 • 具備優化資料流和處理效率的專業知識,以及處理每日一億筆記錄的資料吞吐量的經驗 • AWS、GCP 等雲端平台的實務經驗 • 熟練開發強大的data pipeline,包括資料收集和 ETL(擷取、轉換、載入)流程 • 具備設計和實施資料平台各種元件的經驗,包括資料攝取、儲存、資料倉儲、資料編排 • 持續整合和持續部署(CI/CD)流程的經驗 【Qualifications】 1. 熟悉 ML 相關知識 2. 熟悉Python程式語言,以pyspark模組為主 3. 熟悉Linux 系統操作 4. 熟悉資料庫程式語言 SQL 【Preferred Qualifications】 1.具備機器學習平台經驗,例如 KubeFlow、MLflow 或 Vertex AI 2.具備API設計與實作經驗 3.具備使用 AWS Kinesis、Spark Streaming 等串流工具的經驗 4. 具有數位廣告相關經驗 6. 具有分散式運算的相關知識,如 Spark、Hadoop、Hive 7. 有使用過GCP, AWS 等雲端服務經驗佳 【加分項目】 熟悉scale, JAVA 熟悉資料湖相關技術 統計學專長
應徵
09/18
台北市松山區3年以上大學
1.負責設計和維護高效且可擴展的雲地混合數據架構 2.設計及開發巨量資料 data pipeline,包含結構化資料、半結構化資料及非結構化資料,並建立自動化監控機制 3.評估與導入 modern data stack,用以解決以下問題:data governance, data quality, data lineage, MLOps 4.制定和實施數據治理策略,並使用元數據管理工具 (例如 GCP Dataplex) 來管理數據資源和數據資源血緣關係 5.負責維護 Airflow 平台,協助資料科學家進行數據處理、分析和建模工作流程管理,並設計部署策略、監控機制,以確保服務穩定性 104僅供職缺參考,若您對此職缺有興趣,請至本行「玉山菁英甄選網站」投遞履歷,如書審通過,後續將邀請您參加面談。謝謝! 【網址:https://esnhr.pse.is/394b2n 】
應徵
09/15
台北市中山區2年以上大學
您將是我們數據驅動文化的核心奠基者, 您所建立的數據管道將直接賦能公司做出更智慧的商業決策。 1. 數據平台開發與維運: - 負責設計、建置與維護數據 ETL/ELT 管道,確保數據從源頭穩定、高效地流入數據平台 - 開發自動化監控與預警系統,追蹤排程狀態、效能與數據品質,確保數據中台的穩定運行 2. 數據模型實作與優化: - 與數據分析師合作,完成數據模型的資料清洗與轉換,確保數據質量與一致性 - 設計與開發數據驗證與監控機制,提高數據完整性與準確性 3. 數據治理工具實施: - 實作Data Lineage追蹤,並導入數據目錄工具,以提升數據資產的透明度與可信度 4. 技術研究與新技術導入: -研究與評估新技術,提升數據處理、分析與儲存架構的效能 -針對機器學習或 AI 應用,進行數據架構建置與最佳化準備 【我們需要你具備】 1. 具備至少 2 年 的資料工程師經驗。 2. 熟悉雲端數據平台,具備 Databricks 或其他相關雲端服務(如 AWS、Azure、GCP)的使用經驗。 3. 精通 SQL,具備複雜數據處理與效能調優的能力。 4. 具備 Python/PySpark 或其他編程語言的開發能力。 5. 熟悉 ETL/ELT 流程設計與數據倉儲概念。 6. 對數據治理(Data Governance)、元數據管理(Metadata Management)有基本概念。
應徵
09/15
台北市內湖區2年以上大學以上
【工作內容】 1. 資料管道建置與維運: 設計、開發和維護高效、可擴展的資料管道,確保資料從各個來源可靠地流向資料倉儲、數據湖和資料分析平台。 2. 資料模型與整合: 熟悉資料倉儲和數據湖概念,根據業務需求進行資料建模、資料處理和資料整合,確保資料的準確性和一致性。 3. ETL/ELT 開發與優化: 熟練使用資料處理框架(如 Informatica、Airflow 等)進行 ETL/ELT 流程的設計、開發和優化,提升資料處理效率。 4. 雲端資料工程: 具備 Azure 或 AWS 雲端平台實務經驗,能夠在雲端環境中部署和管理資料工程解決方案,運用雲端服務提升資料處理能力。 5. 異質資料處理: 能夠處理各種異質資料來源,進行資料清理、轉換和整合,解決資料格式和結構不一致的問題。 6. 跨團隊協作: 與資料分析師和業務團隊緊密合作,了解資料需求,提供資料支援,共同推動資料驅動的決策。 7. CI/CD 導入與實踐: 熟悉 CI/CD 流程,能夠設計和實施自動化部署和測試流程,確保資料管道的穩定性和可靠性,加速開發迭代。 8. 技術研究與創新: 持續研究和評估新的資料工程技術和工具,提出改進建議,並將其應用於實際工作中,保持技術領先。
應徵
09/16
群越廣告科技有限公司電腦軟體服務業
台北市松山區3年以上大學以上
我們尋找一位資料敏銳度高、擁有穩健工程實作力的資料工程師,加入我們的遊戲推薦系統開發團隊! 這個職位非常適合熟悉 資料處理流程、具備 API 設計與部署經驗、懂得 推薦模型訓練實務,並熱衷於將 AI 技術應用在真實產品場景中的人才。 你將參與我們打造高效能推薦系統的核心挑戰之一:處理高頻率、多次存取的推薦查詢問題(Multiple Access / Frequent Access Patterns)。在實務上,推薦系統需支援大量使用者在極短時間內反覆觸發推薦請求(如首頁刷新、排行榜滑動、活動推薦等),對於資料快取策略、查詢優化、線上/離線計算資源分配都提出極高要求。 我們期望你能透過設計 穩定高效的資料管線與特徵服務(Feature Store),結合良好的 API 封裝,確保推薦服務在多次存取場景下依然具備良好延遲控制與回應品質,讓系統在真實流量下穩健運作、持續為玩家提供個性化、即時的推薦體驗。 線上視訊筆試,請 share screen 解題: Python 操作 SQL 語法(PyMySQL) Flask API 封裝與邏輯設計 Numpy 矩陣操作與轉換 Multithreading 多執行緒概念與應用 PyTorch 假碼撰寫與推薦演算法說明 必備條件(務必具備): Python 資料處理能力強,熟悉生態系統:pandas、numpy、pyMysql、SQLAlchemy 熟練 SQL 查詢與資料倉儲操作,具備處理大型資料集的經驗 實際操作過 Flask API 設計與服務包裝 理解推薦系統與分類/排序模型的運作,具備實作經驗 熟悉模型部署工具,例如 Flask / FastAPI、joblib、ONNX、MLflow 等 具備跨部門溝通能力與資料產品思維,能獨立拆解與解決資料問題 加分條件(非必要,但會加分) 使用過雲端資料平台:BigQuery、Snowflake、Redshift 有推薦模型訓練與優化經驗:如 DNN-based 矩陣分解、Pairwise Ranking、Embedding 模型 熟悉 強化學習、Bandit Algorithm 在推薦系統中的應用 曾設計過 AB test 並執行評估分析 實作過 Feature Store、推薦 pipeline 框架設計經驗
應徵
09/16
新北市新店區3年以上大學以上
負責集團公司數位轉型工作推動,主要工作包含: 1.協助集團數據賦能專案的規劃與執行,規劃端到端的數據應用解決方案。 2.透過集團數據中心協助各品牌事業,透過數據驅動創造商業價值(成效提升,執行優化等)。 3.將商業問題轉化為可分析的條件以及狀態,使用統計、數學、機器學習等方法進行數據分析。 4.與營運、行銷、技術單位合作,深入參與產品分析及活動調整,根據數據分析結果協助確認目標和優先次序。 5.機器學習、深度學習或統計分析模型專案開發。 6.開發和實作先進的AI模型,解決市場行銷和客戶分析等商業挑戰,提升整體業務績效。 7.設計並實作式AI解決方案,開發智能AI代理人,針對數據分析、知識問答、自動化工作流程等業務需求進行優化,提升業務運作效率。
應徵