「Data Engineer 數據工程師」的相似工作

1. 新商品、法令法規、流程優化之需求分析。 2. 各項系統專案參與、規劃。 3. 輔助需求單位完善需求提報內容、測試、需求進度控管。 4. 系統操作諮詢及服務：作業單位日常營運系統問題諮詢及處理，熟悉系統操作及相關作業流程，以協助User解決線上操作問題。 5. 主管交辦事項 。

【工作內容】 作為集團數據策略的關鍵推手，您將有機會與集團IT團隊一同將財務數據從傳統架構轉型至現代化雲端平台 (AWS)。如果您渴望與頂尖數據專家、專案經理共同協作，並將資料工程、雲端、DataOps 技術應用於實際業務痛點，那麼這個職位正是您的最佳舞台！ 我們的Sr. Finance DE將會與集團IT團隊合作，逐步將財務資料從地端VM搬遷至AWS雲端環境，並協助其他財務部同仁將日常業務報表、分析報表進行自動化。我們重視快速溝通與實際的專案交付! 在這裡，除了具競爭力的薪資與各種福利外，您還能與團隊內不同的夥伴們相互學習，追求技術成長。我們相信，透過透過實際的專案開發與新技術的學習與使用，才是讓團隊不斷進步與成長的動力！ 【您需要做什麼?】 • 協助財務數據雲端轉型： 與集團 IT 團隊緊密協作，規劃並執行財務核心資料從地端 VM 遷移至 AWS 雲端環境的策略與實施。 • 建構數據自動化流程： 設計、開發並維護高效、穩定的財務數據 ETL/ELT pipeline，實現日常業務報表與分析報表的全面自動化。 • 數據架構優化與創新： 持續學習並導入先進的資料領域知識與技術（如 DataOps、FinOps 概念），優化現有數據架構，提升數據處理效率與品質。 • 跨部門協作與溝通： 深入理解財務部門需求，並能將複雜的技術概念清晰地傳達給非技術背景的同仁，共同推動專案進程。 • 數據專案開發與管理： 負責數據相關專案的設計、開發與維護，包含 Datalake 管理、資料收集、清洗、儲存等關鍵功能，確保數據的完整性、一致性與可用性。 • 文件撰寫與知識傳承： 撰寫清晰的開發文件 (Design Document, ERD, Diagram, User Manual)，確保專案知識的有效傳承。 【我們期待您具備】 • 精通 SQL，具備大規模集中/分散式資料庫的 CRUD 操作、效能優化及資料清洗 (ETL/ELT) 實戰經驗。 • 豐富的 Python 資料工程開發經驗，熟悉並應用 pandas, numpy, pyspark 等核心套件。 • 具備 AWS 雲端平台 (例如 S3, EC2, Lambda, Glue, Redshift, Athena 等服務) 與 Databricks 的實務開發經驗。 • 具備 Data Pipeline (資料流) 的設計、搭建與優化能力，熟悉 Dagster 或 Airflow 等排程工具。 • 5 年以上資深資料工程師或相關經驗，並具備獨立主導專案的能力。 • 卓越的需求訪談與業務邏輯理解能力，能將複雜的技術概念清晰地傳達給非技術背景利害關係人。 • 具備良好的溝通協作能力，主動積極解決問題，並樂於分享知識。 【符合以下條件，將是您的優勢】 • 具備財務金融相關專業知識或在金融科技產業的資料工程經驗。 • 對 DataOps 或 FinOps 理念有深入理解與實踐經驗。 • 熟悉 Linux 操作與 Shell Script。 • 具備 資料視覺化工具 (Tableau、PowerBI) 實務經驗。

招募台灣地區工程師 公司提供簽證的更新以及新規簽證。 可提供高度人才簽證(5年)額外加20分，提早取得永久居留權。 執行案件為一般商業、金融案件居多，會派至委託公司駐點或在宅。 【工作內容】 1.負責軟體之分析、設計以及程式撰寫。 2.規劃執行軟體架構及模組之設計，並控管軟體設計進度。 3.進行軟體之測試與修改。 4.規劃、執行與維護量產的產品。 5.協助研發軟體新技術與新工具。 【工作職缺】Python軟體開發工程師(工作經驗三年以上) 【徵求條件】JAVA,NET,C#C,C++,Python,salesforce,SAP,PHP,IOS,Android,AWS,React.Ruby.C# （其中有一至兩項擅長的項目歡迎詢問） *無日文N1以上(可無檢定證書,但需聽說讀寫流利)請勿投遞履歷，國外遠端工作不可* 【工作地點】日本關東地區 【工作時間】9:00-18:00 中午休息1小時（依客戶現場為主） 【公司制度】1.提供雇用保險、健康保險、年金保險 2.完全週休2日、GW/夏休／年末年始連休 3.工作產生的交通費實報實銷 4.一年一度健康檢查

This vacancy is open for talent pool collection. We will contact you if we have proper vacancies that fit with your profile. Job Mission Represent manufacturing and act as gatekeeper from manufacturing to D&E function Add value in overall manufacturing processes such as forming, machining, joining, and assembling Job Description Contribute to the solution of faults and takes the necessary initiatives and practical decisions to ensure zero repeat Identify gaps and drive assigned process improvement projects and successful delivery Initiate and drive new procedure changes and projects Develop and maintain networks across several functional stakeholders Prioritize works and projects based on business situation Transfer knowledge and train colleagues on existing and newly introduced products Education Master degree in technical domain (e.g. electrical engineering, mechanical engineering, mechatronics) Experience 3-5 years working experience in design engineering Personal skills Show responsibility for the result of work Show proactive attitude and willing to take initiative Drive for continuous improvement Able to think outside of standard processes Able to work independently Able to co-work with different functional stakeholders Able to demonstrate leadership skills Able to work in a multi-disciplinary team within a high tech(proto) environment Able to think and act within general policies across department levels Diversity and inclusion ASML is an Equal Opportunity Employer that values and respects the importance of a diverse and inclusive workforce. It is the policy of the company to recruit, hire, train and promote persons in all job titles without regard to race, color, religion, sex, age, national origin, veteran status, disability, sexual orientation, or gender identity. We recognize that diversity and inclusion is a driving force in the success of our company. Need to know more about applying for a job at ASML? Read our frequently asked questions.

我們正在尋找一位 Mid-Level 的數據工程師 (Data Engineer)，主要負責 資料庫建置、ETL 流程設計與開發、數據處理與分析。目前創代科技曾執行過的專案包含了 大型語言模型產品開發（涵蓋雲端、地端、雲地混合方案）、深度學習開發（產品洞察與行為預測、時間序列預測、路線最佳化）、機器學習應用（各產業客戶的資料探勘與分析）、數據中台建置（含資料正規化、ETL 建置、導入 dbt、snowflake）！我們現在手上有各種類型的專案等著你來玩！ 為什麼選擇創代科技？ 創代科技是一家提供數據科學顧問服務的公司，業務涵蓋 零售、交通、物流、航運、電信、能源、犯罪、災防 等多元領域，並持續拓展至其他前沿產業。在這裡，你將接觸到多樣化的數據場景，包括乾淨度各異的資料與高度客製化的架構設計，讓你在解決各種挑戰中快速成長。 如果你熱愛學習新技術、探索創新解決方案，那麼在創代擔任數據工程師，將是你的最佳選擇。 ✅ 【職責內容】 1. 資料庫設計：熟悉資料庫概念，協助建置與維護資料倉儲、資料湖跟資料中臺。 2. ETL 或 ELT 流程開發：協助客戶建立基於地端或是雲端的資料流架構，整合多元數據來源（結構化與非結構化），構建高效數據處理系統，確保資料一致性與完整性。 3. 數據處理與協作：與資料科學家、資料分析師及後端工程師協作，處理 Data Pipeline 建置及數據收集、探勘與轉換。 4. 協助客戶工具導入：協助客戶翻新原有 Pipeline，並導入 dbt、snowflake等。 ✅ 【我們期待你具備】 1. 學歷背景：具備碩士學位， 資訊工程、資訊管理、資料科學、數學、統計、電機相關領域加分。 2. 專業技能： - 熟悉數據處理與分析，具備 ETL / ELT 流程開發與維護經驗。 - 熟悉 關聯式資料庫（如 PostgreSQL）及 圖形資料庫（如 Neo4j），擁有資料倉儲建置與操作經驗。 - 熟悉 Linux 環境，並具備版本控制工具（如 Git）使用經驗。 - 熟悉 容器化技術（如 Docker、Kubernetes），了解其生產環境運行與管理。 - 具備 Airflow 排程管理及模型部署經驗。 ✅ 【加分條件】 - 雲端服務：熟悉 GCP、AWS、Azure，具備跨雲架構整合及服務部署能力。 - 分散式系統：有 Hadoop、Spark 開發經驗者尤佳。 - 資料庫工具：具備 dbt 或是 snowflake 導入或是使用經驗。 - DevOps 經驗：具備 CI/CD 自動化部署實作經驗。 - BI 工具：熟悉 Tableau、Looker、Power BI。 - 演算法基礎：理解機器學習、深度學習背後邏輯或是應用經驗。 ✅ 【薪資待遇】 - 面議，保障年薪 14 個月。 ✅ 【公司福利】 - 彈性上下班時間、彈性居家上班福利。 - 每月享有職員不扣薪福利假、生日當月再多一天生日假。 - 不定期員工聚餐、午餐、下午茶、出遊團康活動等。 - 公司零食區、冰箱飲料、咖啡櫃永遠補給充足，讓每位新進夥伴都保證先胖五公斤！ - 保障年終獎金 2 個月，其他績效獎金還可以靠自己爭取，亦提供結婚、生育等各項禮金。 - 電腦設備：公司提供工作機，亦可自備設備並領取每月電腦補助費。 - 每年提供教育訓練補助。 - 提供定期健康檢查補助。 - 每年定期進行績效考核，讓職員的升遷與薪資調整更有依據與保障。 ✅ 此職缺定位為 Mid-Level，尋找 1 - 3 年經驗的人選

我們尋找一位資料敏銳度高、擁有穩健工程實作力的資料工程師，加入我們的遊戲推薦系統開發團隊！ 這個職位非常適合熟悉 資料處理流程、具備 API 設計與部署經驗、懂得 推薦模型訓練實務，並熱衷於將 AI 技術應用在真實產品場景中的人才。 你將參與我們打造高效能推薦系統的核心挑戰之一：處理高頻率、多次存取的推薦查詢問題（Multiple Access / Frequent Access Patterns）。在實務上，推薦系統需支援大量使用者在極短時間內反覆觸發推薦請求（如首頁刷新、排行榜滑動、活動推薦等），對於資料快取策略、查詢優化、線上/離線計算資源分配都提出極高要求。 我們期望你能透過設計 穩定高效的資料管線與特徵服務（Feature Store），結合良好的 API 封裝，確保推薦服務在多次存取場景下依然具備良好延遲控制與回應品質，讓系統在真實流量下穩健運作、持續為玩家提供個性化、即時的推薦體驗。 線上視訊筆試，請 share screen 解題： Python 操作 SQL 語法（PyMySQL） Flask API 封裝與邏輯設計 Numpy 矩陣操作與轉換 Multithreading 多執行緒概念與應用 PyTorch 假碼撰寫與推薦演算法說明 必備條件（務必具備）: Python 資料處理能力強，熟悉生態系統：pandas、numpy、pyMysql、SQLAlchemy 熟練 SQL 查詢與資料倉儲操作，具備處理大型資料集的經驗 實際操作過 Flask API 設計與服務包裝 理解推薦系統與分類/排序模型的運作，具備實作經驗 熟悉模型部署工具，例如 Flask / FastAPI、joblib、ONNX、MLflow 等 具備跨部門溝通能力與資料產品思維，能獨立拆解與解決資料問題 加分條件（非必要，但會加分） 使用過雲端資料平台：BigQuery、Snowflake、Redshift 有推薦模型訓練與優化經驗：如 DNN-based 矩陣分解、Pairwise Ranking、Embedding 模型 熟悉 強化學習、Bandit Algorithm 在推薦系統中的應用 曾設計過 AB test 並執行評估分析 實作過 Feature Store、推薦 pipeline 框架設計經驗

固定駐點在外商客戶端(不會變更) 目前急需的是地端環境（SQL SSIS）需要能馬上上手 主要職責： 產業Knowhow 可以訓練,職務需求技能需熟練,能依照指示獨立作業 · 與(客戶端用戶)合作，定義滿足業務需求的要求，同時遵守全球標準和實踐 · 開發和設計視覺化製造智慧解決方案，包括在 Power BI 中開發儀表板、Microsoft Analysis Services 以支援 KPI 的製造營運和效能指標相關分析 · 開發自動化、整合、清理和維護製造資料來源品質和完整性的 ETL · 根據業務分析需求設計資料模型和資料架構。整合各種資料集並建立視覺化資料模型 · 與業務用戶進行資料驗證，編寫測試腳本並記錄缺陷 · 支援營運任務進行問題/請求管理和維護，制定並實施解決問題根本原因的解決方案 · 監控和解決與數據相關的問題，及時提供解決方案和支持，以最大限度地減少停機時間和中斷 所需技能： · 本科以上學歷（資訊科技、電腦科學、軟體工程、工業工程、應用數學、統計學、管理學） · 擁有 3 年使用 Microsoft SQL Server Business Intelligence Development Studio（SSIS、SSRS、SSAS、Power BI）和資料倉儲管理的經驗 · 具備 3 年商業智慧等級職位（分析、商業智慧或儀表板經驗）經驗 · 擁有在全天候製造環境中使用 IT 系統的經驗 · 具有推動和提供新功能以改善業務部門營運的經驗，這些營運符合既定標準和整體 IT 策略方向 · 強大的溝通、演示、組織和協調能力（包括在業務和技術需求之間「轉化」的能力） · 具有良好的持續確定優先順序和高效處理多任務的能力。 · 具有良好的團隊合作精神，人際溝通能力強，並能獨立工作 · 具備良好的中英文口說、寫作及演講能力，TOEIC 600分以上 所需技能： · 了解製造流程和製造執行系統 · 具備 Python 或 R 經驗者優先 · 微軟認證等業界認可的認證 · 商業智慧知識：SQL、Power BI、Tableau · 擁有實施滿足業務需求且技術完善的 IT 解決方案的良好記錄。 · 了解專案生命週期和應用程式生命週期方法。 · 能夠根據經驗和對專案策略意圖的理解，以批判性思考影響決策 Key Responsibilities: · Collaborate with business users to define requirements that meet business needs while adhering to global standards and practices · Develop and design visual Manufacturing Intelligence solutions, including developing dashboards in Power BI, Microsoft Analysis Services for KPI's supporting manufacturing operational and performance metrics related analytics · Develop ETL that automate, integrate, cleanse, and maintain manufacturing data source quality and integrity · Design data models and data architecture based on business analysis requirements. Integrate various datasets and build data models for visualization · Perform data validation with business user, write test scripts and record defects · Support operation tasks in conducting issue/request management and maintenance, develop and implement resolutions that address the root cause of problems · Monitor and troubleshot data-related issues, providing timely resolution and support to minimize downtime and disruption Required Skills: · Bachelor’s Degree above (Information Technology, Computer Science, Software Engineering, Industrial Engineering, Applied Mathematics, Statistic, Management) · 2 years of experience using Microsoft SQL server Business Intelligence Development Studio (SSIS, SSRS, SSAS, Power BI) and data warehouse management · 2 years of Business Intelligence level role in Analytics, Business Intelligence or Dashboards experience · Experience working with IT systems in a 24/7 manufacturing environment · Experience in driving and delivering new capabilities to improve business unit operations that are in keeping with established standards and the overall IT strategic direction · Strong communication, presentation, organizational and facilitation skills (including ability to “translate” between business and technology needs) · Good ability to continuously prioritize and multitask efficiently. · Good team player with interpersonal skills and the ability to work independently · Good English & Chinese communication in speaking, writing and presentation, TOEIC 600 and above Desired Skills: · Knowledge of manufacturing process and manufacturing execution systems · Experience with Python, R is a plus · Industry-recognized certification such as Microsoft certification · Business Intelligence Knowledge: SQL, Power BI, Tableau · Proven track record of implementing IT solutions that meet business demands and are technically sound. · Knowledge of project life cycle and application life cycle methodologies. · Ability to influence decisions with critical thinking based upon experience and understanding of the strategic intent of the project

If You Are ● The successful candidate will be a self-driven person with proven experience in large-scale RDBMS and data warehouse ● The candidate will have a deep understanding of MySQL and MongoDB ● The candidate will be familiar with data model, schema and ETL processes design pattern. Who We Are OpenNet is one of the best companies to work for in Taiwan; we offer a dynamic and rewarding environment for high-achievers looking to work and learn alongside like-minded individuals. We are currently in a period of rapid growth as we expand to make our technology available in over 20 countries. We believe our employees are the company’s most valuable asset and are invested in seeing our employees grow in their careers and strike a work-life balance. We do our best to attract top talent and create a great workplace where people feel engaged, inspired, challenged, and respected. Our Stack Core: ● Database: MySQL, MongoDB ● PaaS: AWS RDS, Redshift, MongoDB Atlas Plus: ● Business Monitoring: PMM ● Cloud Services: AWS EC2, Cloudwatch, Secrets Manager, etc. ● ETL & presentation: airflow, metabase. ● Server Operating System: CentOS Key Responsibilities ● Manage MySQL & MongoDB databases ● Refine data model & ETL processes in Redshift data warehouse ● Cowork with developer to optimize the schema design & queries

炬識科技（Athemaster）2024.05 宣布，推出全新資料品質產品「Athemaster DQSentry」，幫助企業掌控真實資料品質，將企業資料產製成具更高商業價值的企業專屬大型語言模型等資料產品，加速AI數位轉型進程。 ▎你想知道的 Athemaster： 請前往：https://linktr.ee/athemaster ▎Athemaster | 你會遇見這10種生活方式 https://reurl.cc/koZGGr ▎Why Join Us ● 2種開發模式：瀑布 & 敏捷 雙刀流 [ 獲台灣敏捷協會 #2024 #2025 敏捷大賞獎 ] ● 5種職系任你混搭搭配：每年依照個人意願打造專屬的成長路徑與職涯，不是工作量增加，而是組合技增加。 ● 25堂阿基米德創客間：雙週五的固定學習講座課程，來自內部6個社群與聘請外部講師共學。 ● 98% 以上機率可以 Work & Life Balance：此為所有專案成員的共同目標，並且認真執行。 ● 200個以上的學習資源：包含線上課、電子書、實體書及多樣化的學習方式。 ▎Job Description 參與內外部專案，幫助企業客戶運維 Data infra(資料基礎建設)、研發 Data pipeline(資料管線) 與 Data products(資料產品)，整合與提升企業商務系統，以滿足 Data-Driven 數據驅動之轉型目標。並與團隊一起發展 Athemaster 2.0 data project 方法論。 ▎主要工作內容 - Data pipeline 設計 - Data pipeline 程式撰寫與測試 - Data pipeline 部署與維運 - Data products 之運維（Data Products：例如資料表、演算法(模型)、API、儀表板或應用系統） ▎我們希望你有的經驗跟特質 - 對 Data-Driven Business 和 Data Engineering 有極大的熱情。 - 了解架構資料平台所需的相關技術，例如 RDBMS, NoSQL DB, Search Engine, Data Warehouse, Event Streaming Platform 等。 - 有 ETL 或資料分析案之專案經驗。 - 樂於與團隊互動、與客戶合作，並回應變化，願意了解客戶產業的領域知識以開發可用的軟體。 - 認同溝通的雙向性，職務內所需之訊息主動聽取、提出必要問題以正確理解，不依靠他人作為自己的眼睛、耳朵與嘴巴。 - 認同權限與責任對等原則，尊重擔負責任者經共識活動後的最終決策，並接受自己角色範圍內的指派。 - 認同角色範圍內個人能力應穩定輸出，達成預期之客戶價值。認同喜好或優先於團隊的個人考慮並非挑撿任務之合理原因。 - 樂於學習最新的技術，隨時充實自我的專業技能。 ▎應徵條件 - 熟悉 Python 程式語言。Athemaster主要用 Python & Java。 - 熟悉至少一種 SQL **與** NoSQL 資料庫的運用。例如 MySQL、PostgreSQL、Mongo 任一種。 - 具有分散式運算的相關知識。例如 Spark、Hadoop、Hive、impala、kafka等。 - 熟悉 Git, Jenkis, Airflow 等 Data Pipeline 開發關聯系統之使用。 - 至少 3 年工作經驗 - 1 年以上擔任 Data Engineer 角色參與專案之經驗，並熟悉 ETL 流程 ▎加分條件 - 願意參與 Data infra 維運（Data Infra：各種儲存結構化或半結構化資料的系統）。 - 願意參與運維最佳化系統效率與穩定度，架構高速、穩定且容易擴充的計算平台。 - 具有使用 NoSQL 的實務經驗。例如 HBase、Cassandra、Redis、MongoDB 等一種或多種相關技術。 - 具有使用 Streaming 資料處理系統的實務經驗。例如 Spark-streaming、Kafka、Flink 等。 - 具有使用 ETL Tool 資料整合工具的實務經驗。例如 Informatica, NiFi, Pentaho 等。 - 熟悉任一種視覺化工具。例如 Tableau, Power BI, Redash 等。

【團隊任務與介紹】 91APP 為國內首家掛牌上櫃的原生 SaaS 軟體服務公司，提供「虛實融合(OMO)」新零售軟體雲服務，協助零售品牌快速切入電商市場。我們致力於協助品牌進行數位轉型，已成功協助諸多品牌完成新零售佈局，隨著互聯網快速演進發展，不少大型零售實體品牌面臨直接衝擊，數位轉型勢不可擋，迄今服務客戶累計破萬家，更涵蓋多家國內外大型品牌商家。 Data Engineer Team 在敏捷開發的工作節奏中打造世界級 SaaS 產品，我們掌握台灣中大型品牌與零售業運作、線上與門市的商業邏輯，並積累未來零售數位轉型所需要的 Know How 與競爭優勢。在這裡，可以接觸 MarTech (Marketing Tech) 最新尖端產業發展趨勢，同時累積電子商務的產品策略思維，打造用數據賦能零售業者的 SaaS 產品。 【實際接觸到的工作內容】 1. 與 Data & Martech 產品團隊的產品經理、 UX 設計師、前端 Frontend engineer、後端 Backend Engineer 等不同角色密切合作。 2. 打造 91APP 的各項 Data & Martech 產品，包括數據分析報表、用戶分群系統、自動化行銷系統、廣告媒體平台串接...等系統功能。 【期望你具備的基本條件】 1. 熟悉 Node.js 開發。 2. 熟悉 Express.js Web 框架。 3. 有使用 Jest, Mocha 等相關測試經驗。 4. 了解如何建立監控機制來監控服務狀態是否正常。 5. 有至少一種 RDB 相關經驗，例如 MySQL, MSSQL, GCP BigQuery。 6. 精通HTML、CSS、Javascript程式語言，以及React框架。 7. 熟悉 React Hook API。 8. 具備良好的程式邏輯思考能力，能撰寫乾淨、模組化且易維護的程式碼。 9. 了解並能適應 RESTful API 或 GraphQL API 的開發流程。 10. 單元測試、整合測試等軟體測試技巧的經驗，如 Jest or React Testing Library。 11. 熟悉 Git 版本控管基本操作並能理解 Git Flow。 【專屬於你的加分項目】 1. 使用過至少一種 Javascript frameworks，例如 React.js, Vue.js, Angular.js。 2. 使用 CI/CD 優化部署流程經驗。 3. 使用 message broker 相關經驗，例如 RabbitMQ, Kafka。 4. 使用容器化技術建立可擴展服務的經驗，例如 Docker, Kubernetes。 5. 有設計瞬間巨量架構以及大量背景工作架構的經驗。 6. 熟悉 Tailwind CSS（Senior Required）。 7. 熟悉 Redux or XState 等狀態控管庫的使用經驗。 8. 具有 Webpack 或 Vite 等打包工具使用經驗。 9. 具有 Gitlab CI 開發經驗，知道如何撰寫 Yaml 部署應用。 10. 前端元件庫開發經驗。 【立即加入91APP的團隊文化】 擁抱變化：體驗公司在快速發展下的變化，包括產品發展方向、組織調整，快速地進行自我調適。 價值導向：從客戶、公司、團隊的角度去論述價值，用具體的行動創造商業影響，以終為始地推動產品發展。 務實主義：開放地面對問題，從真實場景洞察與定義需求，鼓勵聚焦目標，解決真實的問題，共創更好的產品服務。 ╰╰ ★ 更多更精采的91APP ★ ╯╯ 公司產品介紹： 【91APP 是什麼？我們的願景、產品和客戶成功價值】https://reurl.cc/bXdznr 【新零售劇場：為什麼我們都在91APP?】https://reurl.cc/Ak9RNe 【打造 OMO 虛實融合的核心】 https://www.91app.com/omo-power-circle/ 【91APP 跨境】https://www.91app.com/blog/cross-border-hkmkt 團隊開發日常： 【推一個!!91APPer~這就是RD啦_生活篇】 https://reurl.cc/E2a0qA 【Backend RD 的日常】https://reurl.cc/9ZQmoX 【91APP軟體開發之道】https://happylee.blog/91appway/ 【91APP TechDay 2020 技術論壇】https://reurl.cc/E2a58A 更多影片連結： 【雙11備戰全記錄】https://reurl.cc/a9XNyZ 【雙11戰情之夜 - 獨家曝光】https://reurl.cc/bzyK6r 【91APP面試分享】https://reurl.cc/pxZ444 【客戶案例與新零售知識分享】 http://blog.91app.com

【工作內容】 與團隊協作，共同完成各客戶的資料流開發，同時協助團隊梳理與排除運作中的 data pipeline 產生的各種突發程式狀況，並完成記錄與建檔，您應可獨立開發系統串接、大資料清整。在工作過程中，您會與工程團隊、設計團隊、產品團隊溝通協作，完成規劃之項目與習慣自主進度掌控，例如資料串接、資料爬取、數據報告等。 【我們希望你】 一定要對開發工作具有熱情與自我學習不斷精進的渴望，遇到問題時，能獨立查找與判斷解決方案的可行性，若遇到無法解決的問題，也懂得如何清楚論途與提問，樂於與同仁們分享技術新知、提升自我能力，當挑戰尚不熟悉的工作內容時，充滿戰鬥力。 【職務需求】 熟悉 Python, SQL 熟悉 dbt, Airflow (Google Cloud Composer & MWAA) 熟悉 Star Schema / Snowflake Schema 設計 熟悉 Modern Data Stack 熟悉 PostgreSQL, MySQL, MongoDB 任一一種資料庫 【加分項】 熟悉 BigQuery or Redshift 熟悉 Glue or Dataflow 熟悉 Lambda or Cloud Run 【面試流程】 [實體] 一面
➀ 公司文化與價值觀討論
 ➁ 專案經歷與履歷討論
 ➂ 公司介紹（商業模式、團隊組成、工作內容）
 ➃ 公司相關問題 Q & A [線上] 二面 
 ➀ 線上題目，線上題目，用 HackMD 進行，內容包含 SQL、Pandas、ETL 基礎概念 ➁ 情境題（模擬完整商業需求）

Responsibility a. Gathering and understand requirements for data analysis and dashboard visualization. b. Receive and process raw data from various sources, including Google Sheets and other formats. c. Clean, transform, and aggregate data to prepare it for analysis. d. Develop and maintain dashboards and reports that effectively visualize data and provide insights based on client's specifications. e. Ensure data accuracy and integrity throughout the data processing and visualization pipeline. Qualifications A. Bachelor's degree in Data Science, Computer Science, Statistics, Mathematics, Business Analytics, or a related field. B. Proficiency in at least one data visualization tool. C. Experience with data manipulation and analysis using spreadsheet software (e.g., Google Sheets, Excel). D. Basic understanding of SQL. E. Strong written and verbal communication skills. F. Excellent analytical and problem-solving abilities. Preferred A. Experience with data modeling and database design. B. Proficiency in SQL for data analysis. C. Proficiency in Google AppScript for data processing. D. Experience developing interactive dashboards and reports. E. Prior experience collaborating with technical and non-technical stakeholders.

工作內容: • Designing and maintaining cloud-based data warehouse, including data collection, modeling, and storage. • Maintaining batch and streaming pipelines, ensuring data quality. • Developing data APIs based on product requirements and deploying them to Kubernetes using Gitlab CI/CD. • Understanding user needs and handling data retrieval and dashboard support tasks. • Continuously learning, optimizing data architectures, and introducing new technologies.

[Job Description] •Develop and maintain a web-based system for financial data processing. •Implement P&L calculations, exposure tracking, and performance reporting over user-defined periods. •Integrate market data and indicators or signals from the quant team to support trading strategies. •Process and analyze external financial data sources/APIs (e.g., Bloomberg). •Ensure data accuracy, system stability, and performance optimization. •Maintenance and implementation of machine learning models. [Job Requirements] •Strong experience in backend development (Python(preferred), Node.js, or other relevant languages). •Proficiency in working with databases (SQL(preferred) or NoSQL). •Proficiency in creating and maintaining databases will be considered a plus. •Basic knowledge of frontend technologies (HTML, CSS, JavaScript) to support system integration. •Familiarity with financial markets and handling large datasets, also machine learning. •Experience in market data processing and familiarity with financial instruments is a plus. •Proficiency in written and spoken English and Chinese •Can work under pressure on ad-hoc projects *This position requires on-site test only. Please ensure you are able to attend the test in person. (僅有實體測驗，且此職位非遠距，請確保您能配合再投遞履歷) *Please provide an English resume.*

必備條件： 1. 使用Trinity等工具開發ETL 2. 熟悉SQL和StoreProcedure撰寫

【工作內容】 1. 將概念性想法設計規劃為可執行的解決方案 2. 大數據專案的規劃，數據接入、清洗、建模與可視化的設計 3. 與機器學習工程師、雲端架構師、PM密切合作共同合作完成專案,供客戶高質量的雲端數據相關服務 4. 負責協助客戶整合、設計、部署大數據處理流程與平臺 5. 探索雲端服務組合的可能性，創造全新的可能性 【必備技能/條件】 1. 3 年以上資料排程、處理、清洗、分析的實務經驗 2. 2 年以上資料處理常用的 Open Source 工具的實務經驗，eg. Spark, Airflow, hadoop 3. 2 年以上Python / Java 程式語言開發相關工作經驗 4. 擅長解決問題、除錯、故障排除，提出問題解決方案 【加分條件】 1. 具備BigQueryRDBMSNoSQL使用經驗 2. 具備爬蟲相關經驗 3. 熟悉 Restful API

公司介紹： 域動行銷是中華電信集團轉投資公司之一，成立於2009年，致力於提供創新的數位廣告解決方案，當中包含廣告系統DSP、SSP、CDP、混血數據及廣告聯播網等，我們通過創新的行銷技術解決方案來推動廣告和數據分析的發展，同時專注於行銷科技領域，提供前瞻性的觀點，引領數據行銷的未來。 組織介紹： 域動Data Team是由一群對『數據分析』及『AI應用』具有研究及開發熱誠的成員所組成。在這裡你可以接觸到大量即時的使用者行為資料，並將資料科學模型應用於: 『網路廣告投放優化』 『網路用戶辨識』 『消費者行為分析』 我們更致力於尋找優化方案，改善產品體驗設計及為商業決策提供數據支持，提升效率和價值。我們鼓勵組員多方嘗試、思考、展現天馬行空的創意，且能清楚闡述想法，付諸實踐。 【Job Description】 • 須熟悉python, 尤其是對pyspark操作有經驗 • 具備優化資料流和處理效率的專業知識，以及處理每日一億筆記錄的資料吞吐量的經驗 • AWS、GCP 等雲端平台的實務經驗 • 熟練開發強大的data pipeline，包括資料收集和 ETL（擷取、轉換、載入）流程 • 具備設計和實施資料平台各種元件的經驗，包括資料攝取、儲存、資料倉儲、資料編排 • 持續整合和持續部署（CI/CD）流程的經驗 【Qualifications】 1. 熟悉 ML 相關知識 2. 熟悉Python程式語言，以pyspark模組為主 3. 熟悉Linux 系統操作 4. 熟悉資料庫程式語言 SQL 【Preferred Qualifications】 1.具備機器學習平台經驗，例如 KubeFlow、MLflow 或 Vertex AI 2.具備API設計與實作經驗 3.具備使用 AWS Kinesis、Spark Streaming 等串流工具的經驗 4. 具有數位廣告相關經驗 6. 具有分散式運算的相關知識，如 Spark、Hadoop、Hive 7. 有使用過GCP, AWS 等雲端服務經驗佳 【加分項目】 熟悉scale, JAVA 熟悉資料湖相關技術 統計學專長

【工作內容】 1. 資料管道建置與維運： 設計、開發和維護高效、可擴展的資料管道，確保資料從各個來源可靠地流向資料倉儲、數據湖和資料分析平台。 2. 資料模型與整合： 熟悉資料倉儲和數據湖概念，根據業務需求進行資料建模、資料處理和資料整合，確保資料的準確性和一致性。 3. ETL/ELT 開發與優化： 熟練使用資料處理框架（如 Informatica、Airflow 等）進行 ETL/ELT 流程的設計、開發和優化，提升資料處理效率。 4. 雲端資料工程： 具備 Azure 或 AWS 雲端平台實務經驗，能夠在雲端環境中部署和管理資料工程解決方案，運用雲端服務提升資料處理能力。 5. 異質資料處理： 能夠處理各種異質資料來源，進行資料清理、轉換和整合，解決資料格式和結構不一致的問題。 6. 跨團隊協作： 與資料分析師和業務團隊緊密合作，了解資料需求，提供資料支援，共同推動資料驅動的決策。 7. CI/CD 導入與實踐： 熟悉 CI/CD 流程，能夠設計和實施自動化部署和測試流程，確保資料管道的穩定性和可靠性，加速開發迭代。 8. 技術研究與創新： 持續研究和評估新的資料工程技術和工具，提出改進建議，並將其應用於實際工作中，保持技術領先。

【工作內容】 ． 使用 Azure Databricks、Data Factory、Data Lake Gen2 等工具建立並維運 ETL 流程。 ． 整合 ERP、CRM、IoT 等多來源資料，進行清洗與轉換並寫入 Azure Data Lake。 ． 與資料科學團隊合作，提供模型所需的資料集與特徵工程支援（如 LightGBM、XGBoost）。 ． 透過Power BI進行資料串接與報表資料結構設計，確保分析資料即時、準確。 ． 撰寫技術文件，維護資料流程運作紀錄與治理機制。 【必要條件】 ． 熟悉 Azure 平台操作（Databricks、Data Factory、Data Lake Gen2）。 ． 熟悉 Python 語言，能獨立進行資料清洗與處理。 ． 具 SQL 查詢能力與資料模型設計經驗。 ． 有與資料科學或 BI 團隊協作經驗，熟悉 Power BI 或其他可視化工具資料串接。 【加分條件】 ． 具備使用 LightGBM / XGBoost 經驗。 ． 熟悉 Git、CI/CD、自動化流程或 Docker 等 DevOps 工具 ． 有 Azure DP-203、DP-100 證照尤佳 ． 英文讀寫能力佳，能閱讀技術文件與跨部門溝通

Hi，勇者！我們是 Garena 的 Data Team，我們 Data 夥伴角色組織完善，為 Garena 海內外的遊戲規劃、建構並維護資料量達 PB 級別的全地端資料倉儲，並與數據分析師 (Data Analyst) 合作，將遊戲內各項有趣的數據交付各個遊戲營運單位，對遊戲的營運與公司的決策產生實在影響力。 ✨ 職務概覽：#台北市信義區市府捷運站(藍線)出站即達 #data #warehouse #ETL #pipeline #地端 #airflow #pyspark #infra ✨ 你將負責 ...... - 開發 batch/streaming data pipeline 應用在資料服務、報表系統。 - 瞭解遊戲營運單位的需求，量身打造易維護、可擴展的遊戲數倉模型 (data model)，為數據分析師、資料產品、演算法產品提供技術支持。 - 不止於維護，還能設計、規劃並建立完整的數倉開發流程，包括：程式碼開發、發布部署、效能調優、提升資料品質等。 - 管理、維運數據集群服務，例如：Hadoop、Spark、Kafka 等相關服務，定期進行集群容量評估和數據治理。 ✨ 我們希望你具備 ...... - 開發語言：熟練 Python / Java / Scala 中至少一門開發語言，有紮實的程式設計基礎。 - Big data: Spark / Hadoop / Hive / Flink 等大數據分散式儲存與計算架構開發技術。 - 資料庫：MySQL - ETL 工具：Airflow - 作業環境：Linux - 對資料敏感，熱衷將業務與技術結合，以數據驅動業務發展。 - 優秀的溝通能力、跨團隊合作能力、較強的自驅力。 ⭐ 加分項目 ⭐ - 具備 Python 開發能力，對資料探勘 (Data Mining)、機器學習 (Machine Learning) 有了解者尤佳。 - 熟悉資料倉儲模型設計方法論，有遊戲產業數倉經驗尤佳。 - 熟悉 Clickhouse 尤佳。 - 曾以 AI 工具輔助工作尤佳。 ✨ 你知道嗎？Garena 的 Data Engineer 與其他公司的機會差異在於，你將從這份職務獲得 ...... \ 我不是獨自升級，我和團隊一起升級！ / 我們的 Data 團隊負責處理 PB 級的數據量，讓你能在工作中累積處理海量資料的實務經驗。同時，我們崇尚開放的工作環境，鼓勵創新思維，提倡團隊而非孤單前行，討論最新的技術趨勢，並深信知識分享是成功的秘訣，你在這裡將擁有廣闊的舞台大展身手！ \ 揪團打 game 不寂寞！ / 我們這支勁旅充滿熱愛遊戲的夥伴，大家會分享最新最流行的手遊，也熱衷討論經典遊戲的成功秘訣！熱愛《傳說對決》的你，可以在午休時和組員五排打 game；如果你喜歡卡牌遊戲，團隊有 Pokémon TCG 和桌遊團隊陪你對戰！ ✨ Garena 的 Data Engineer 都說…… - 經手數據量級大，在這裡迅速變更強！ - 數據類型貼近你我普羅大眾生活，工作內容與生活連結度高！ - 即時與非即時的數據皆能接觸到，數據類型有趣！ - 工作文化開放、自主性高，不受限於年資提議想進行的專案！ - 產出能影響企業商業決策，進行跨部門合作！ - 平時便會對接國外團隊，體驗跨國企業工作感！

使用Trinity等工具開發ETL 熟悉SQL和StoreProcedure