104工作快找APP

面試通知不漏接

立即安裝APP

「網路爬蟲工程師」的相似工作

住通科技股份有限公司
共500筆
10/23
恆昌科技有限公司電腦軟體服務業
台中市西屯區1年以上大學
1. 使用 Python 協助應用程式開發與維護,支援數據處理與自動化需求。 2. 開發、擴充並維護網路爬蟲程式,確保資料抓取穩定性與數據品質,並持續優化爬蟲策略。 3. 維護現有爬蟲的可用性,監控運行狀態並排查錯誤。 4. 與後端工程師協作,整合資料庫與開發相應 API 功能,提供前端或分析系統使用。 5. 分析並解決在資料抓取過程中遇到的各種技術問題,確保爬蟲流程高效運行。 6. 理解團隊及產品需求,根據需求設計與開發可行解決方案。
應徵
10/22
台北市信義區2年以上大學以上
【公司相關資訊】 1. PChome小金雞獲利翻2倍,下步要當「獨角獸」!估值衝10億武器為何? https://tinyurl.com/yrcw3q49 2. PChome虧損,它卻大賺!全台首推iPhone訂閱制,近兩年營收成長30%,網家小金雞如何讓華碩、三星搶合作? https://www.wealth.com.tw/articles/622d5723-e77f-4421-a86f-dfeca7cc41b7 3. 攻 BNPL、iPhone 訂閱制,網家子公司 21st FinTech 上半年獲利 1.6 億元 https://finance.technews.tw/2023/10/19/21st-fintech-20231019 我們正在建置公司內外部共用的資料服務平台,結合大數據與AI的技術,建立智慧化與自動化的資料檢索與分析功能,協助公司內部進行資料營運並且以數據分析結果協助管理層進行決策支援。 此職務需要協助公司維運並建立資料團隊共用的雲端軟硬體架構、資料分析環境架設與資料應用流程規劃。現今有非常多資料管理與營運相關的軟體,你可以用你對於開源軟體架設的經驗,與團隊一同建立資料營運的系統架構,也能夠在現今的大數據與AI的發展架構下,提升團隊與個人的能力。 【職務內容】 1. 管理資料團隊軟體工具,包含定期軟體更新、備份和設備與資料轉移 2. 監控並排除團隊工具與資料狀態,提供定期報告與緊急告警模式 3. 依團隊需求建置並調校資料分析平台等相關服務 4. 開發並維運內外部夥伴資料串接之 Web API 5. 其他主管交辦事項
應徵
09/22
羊星有限公司工商顧問服務業
台北市信義區經歷不拘學歷不拘
About Us We are building an in-house Asset Management team dedicated to high-frequency and quantitative trading strategies. Our mission is to leverage cutting-edge research, algorithmic strategies, and on-chain liquidity venues such as Hyperliquid to generate consistent alpha while managing risk at scale. This is a ground-floor opportunity to join a team with ambitious goals to expand into multi-strategy trading, portfolio optimization, and long-term quantitative research. ⸻ Responsibilities • Research, design, and implement quantitative trading strategies (market-making, arbitrage, statistical arbitrage, trend-following, execution algos, etc.) • Develop and optimize HFT strategies tailored for on-chain order books (Hyperliquid and other DEX/CEX venues). • Perform data analysis, backtesting, and live strategy deployment. • Monitor risk exposures, PnL, and performance metrics in real-time. • Collaborate with engineers to optimize execution infrastructure (low-latency connections, APIs, data pipelines). • Stay on top of market structure developments in both centralized and decentralized exchanges. ⸻ Requirements • Strong background in quantitative trading, financial engineering, or algorithmic trading. • Proficiency in Python, C++, Golang or Rust (for strategy prototyping & low-latency execution). • Experience with market microstructure, order book dynamics, and liquidity provision. • Familiarity with on-chain trading venues (Hyperliquid, dYdX, GMX, CEXs like Binance/OKX a plus). • Strong mathematical/statistical modeling skills (time-series, stochastic processes, ML optional). • Ability to work in a fast-paced, research-driven environment. ⸻ Preferred Skills • Prior experience at a prop trading firm, HFT desk, or crypto quant team. • Experience building execution engines or trading bots connected to APIs. • Knowledge of DeFi protocols, smart contracts, and blockchain fundamentals. • Hands-on experience with DeFi protocols, DEXs, or MEV opportunities • Track record of profitable trading strategies in crypto or traditional markets. ⸻ What We Offer • Competitive base salary + performance-based bonus. • Opportunity to be an early member of the Asset Management division. • Resources for research, infrastructure, and data acquisition. • A collaborative, high-performance team culture.
應徵
10/20
Gogoro_凱宇有限公司汽機車及其零配件用品/批發業
台北市大安區經歷不拘高中以上
1. 車輛檢測維修與保養 維護客戶對Gogoro產品的信賴,展現你的專業技術來負責產品售後服務,包含維修、定期保養、零件更換與軟韌體更新等。 2. 車輛問題診斷 運用問題解決能力與跨團隊間溝通協調,以確保來到服務中心的客人可以得到有效的解決與對應辦法。 3. 維護環境及工作用具 對於自己的工作環境、特種工具及機具設備,會友善使用及維護,如對待自己的物品般珍惜與愛護。 4. 透過團隊合作創造優異成果 在你的工作中,你願意提供自己的經驗,讓團隊成員藉由分享在技術上更加純熟,讓你與你的團隊追求卓越表現。 ※到職後具有三週完整的Gogoro「服務流程」& 電動機車「技術能力」教育訓練※ ※除月薪資外,每月另有個人維修獎金※
應徵
10/05
炬識科技股份有限公司電腦軟體服務業
台北市中山區1年以上大學
炬識科技(Athemaster)2024.05 宣布,推出全新資料品質產品「Athemaster DQSentry」,幫助企業掌控真實資料品質,將企業資料產製成具更高商業價值的企業專屬大型語言模型等資料產品,加速AI數位轉型進程。 ▎你想知道的 Athemaster: 請前往:https://linktr.ee/athemaster ▎Athemaster | 你會遇見這10種生活方式 https://reurl.cc/koZGGr ▎Why Join Us ● 2種開發模式:瀑布 & 敏捷 雙刀流 [ 獲台灣敏捷協會 #2024 #2025 敏捷大賞獎 ] ● 5種職系任你混搭搭配:每年依照個人意願打造專屬的成長路徑與職涯,不是工作量增加,而是組合技增加。 ● 25堂阿基米德創客間:雙週五的固定學習講座課程,來自內部6個社群與聘請外部講師共學。 ● 98% 以上機率可以 Work & Life Balance:此為所有專案成員的共同目標,並且認真執行。 ● 200個以上的學習資源:包含線上課、電子書、實體書及多樣化的學習方式。 ▎Job Description 參與內外部專案,幫助企業客戶運維 Data infra(資料基礎建設)、研發 Data pipeline(資料管線) 與 Data products(資料產品),整合與提升企業商務系統,以滿足 Data-Driven 數據驅動之轉型目標。並與團隊一起發展 Athemaster 2.0 data project 方法論。 ▎主要工作內容 - Data pipeline 設計 - Data pipeline 程式撰寫與測試 - Data pipeline 部署與維運 - Data products 之運維(Data Products:例如資料表、演算法(模型)、API、儀表板或應用系統) ▎我們希望你有的經驗跟特質 - 對 Data-Driven Business 和 Data Engineering 有極大的熱情。 - 了解架構資料平台所需的相關技術,例如 RDBMS, NoSQL DB, Search Engine, Data Warehouse, Event Streaming Platform 等。 - 有 ETL 或資料分析案之專案經驗。 - 樂於與團隊互動、與客戶合作,並回應變化,願意了解客戶產業的領域知識以開發可用的軟體。 - 認同溝通的雙向性,職務內所需之訊息主動聽取、提出必要問題以正確理解,不依靠他人作為自己的眼睛、耳朵與嘴巴。 - 認同權限與責任對等原則,尊重擔負責任者經共識活動後的最終決策,並接受自己角色範圍內的指派。 - 認同角色範圍內個人能力應穩定輸出,達成預期之客戶價值。認同喜好或優先於團隊的個人考慮並非挑撿任務之合理原因。 - 樂於學習最新的技術,隨時充實自我的專業技能。 ▎應徵條件 - 熟悉 Python 程式語言。Athemaster主要用 Python & Java。 - 熟悉至少一種 SQL **與** NoSQL 資料庫的運用。例如 MySQL、PostgreSQL、Mongo 任一種。 - 具有分散式運算的相關知識。例如 Spark、Hadoop、Hive、impala、kafka等。 - 熟悉 Git, Jenkis, Airflow 等 Data Pipeline 開發關聯系統之使用。 - 至少 3 年工作經驗 - 1 年以上擔任 Data Engineer 角色參與專案之經驗,並熟悉 ETL 流程 ▎加分條件 - 願意參與 Data infra 維運(Data Infra:各種儲存結構化或半結構化資料的系統)。 - 願意參與運維最佳化系統效率與穩定度,架構高速、穩定且容易擴充的計算平台。 - 具有使用 NoSQL 的實務經驗。例如 HBase、Cassandra、Redis、MongoDB 等一種或多種相關技術。 - 具有使用 Streaming 資料處理系統的實務經驗。例如 Spark-streaming、Kafka、Flink 等。 - 具有使用 ETL Tool 資料整合工具的實務經驗。例如 Informatica, NiFi, Pentaho 等。 - 熟悉任一種視覺化工具。例如 Tableau, Power BI, Redash 等。
應徵
10/20
HUA AO_香港商創金科技有限公司其它軟體及網路相關業
台北市大同區2年以上專科
【工作內容】 1. 熟練掌握 SQL、Python,瞭解數據建模理論 2. 熟悉數據倉庫工具(如 Snowflake、Redshift、BigQuery、Databricks 等) 3. 使用 BI 可視化工具(如 Power BI、Tableau、Looker) 4. 有支付相關業務(如交易數據、支付成本、渠道分潤)分析經驗 5. 具 ETL 構建經驗,熟悉 Airflow、DBT 等數據編排工具經驗 【加分條件】 有參與資料平台、BI 系統或數據倉儲專案的經驗,能獨立完成中小型任務 熟悉 Git、CI/CD、Docker 等基礎 DevOps 工具者佳 參與團隊數據治理與標準制定經驗者尤佳 具備良好的跨部門溝通與協作能力,能協助推動任務執行與進度管理
應徵
08/13
台北市南港區經歷不拘大學
工作內容: 開發與維護自動化數據處理流程(ex: Pipeline、Airflow) 建置並優化各式網路爬蟲(ex: Requests、Playwright、Scrapy ) 使用 Django 開發後端服務與 API,串接資料庫與前端系統 操作並優化資料庫(MariaDB、Redis),確保效能與穩定性 在 AWS(EC2、S3、RDS 等)環境中部署、監控與維運服務 協作AI應用模型 必備條件: 熟悉 Python,能獨立開發爬蟲、資料處理與 API 熟悉 Django 後端框架與 RESTful API 開發 熟悉 SQL(MariaDB)與快取系統(Redis) 具備自動化排程與數據管道開發經驗 具備 AWS 雲端平台使用經驗(EC2、S3、RDS 等) 良好的溝通能力與跨部門協作經驗 加分條件: 熟悉 Docker 具備前端基礎(HTML / CSS / JavaScript)可進行簡單資料視覺化 具備 機器學習或深度學習專案經驗
應徵
10/19
盈萃科技股份有限公司電腦軟體服務業
新北市板橋區經歷不拘學歷不拘
本職缺以「量化策略程式維護與效能穩定」為主,輔以「夜間顧單/系統監控」,適合熟悉程式交易、具備交易系統維運與版本控管經驗的人才: 量化策略程式維護與優化(核心):負責策略程式碼之日常維護、參數與環境設定管理、版本控管(Git)、回歸測試與效能監測;協助修補異常、改善延遲與穩定性,確保策略在模擬與實盤環境的一致性。 測試與回測支援(核心):協助策略交易員進行策略小幅調整、單元/整合測試、自動化回測任務排程與結果校核;後續依規劃擴充商品(如股票、外匯)之資料接入、因子/訊號驗證與產線落地。 顧單與日間監控(輔助):於交易時段執行系統與下單軟體健康檢查、即時異常排查(含連線、滑價、委託/成交對賬)、部位與成交資料一致性校正,並完成事件紀錄與例外追蹤以提升整體可靠度。
應徵
10/21
台北市北投區經歷不拘專科
1. 以 Python 語言編寫blender腳本或外掛(i.e. Blender Python API。 2. 根據客戶需求或專案目標,設計並實作室內模型的自動化分割。 3. 撰寫技術檔案與開發手冊,並針對成果產出測試案例,驗證穩定性與正確性。
應徵
10/17
新北市新店區1年以上專科
1.Web應用設計與開發 2.資料庫應用設計與開發 3.電子表單、流程設計與開發 4.項目之分析、設計以及程式撰寫 5.開發項目之測試與修改 6.維護、調整既有專案之程式
應徵
10/21
台北市中山區2年以上大學
【工作內容】 1. 將概念性想法設計規劃為可執行的解決方案 2. 大數據專案的規劃,數據接入、清洗、建模與可視化的設計 3. 與機器學習工程師、雲端架構師、PM密切合作共同合作完成專案,供客戶高質量的雲端數據相關服務 4. 負責協助客戶整合、設計、部署大數據處理流程與平臺 5. 探索雲端服務組合的可能性,創造全新的可能性 【必備技能/條件】 1. 3 年以上資料排程、處理、清洗、分析的實務經驗 2. 2 年以上資料處理常用的 Open Source 工具的實務經驗,eg. Spark, Airflow, hadoop 3. 2 年以上Python / Java 程式語言開發相關工作經驗 4. 擅長解決問題、除錯、故障排除,提出問題解決方案 【加分條件】 1. 具備BigQueryRDBMSNoSQL使用經驗 2. 具備爬蟲相關經驗 3. 熟悉 Restful API
應徵
10/23
三弦科技有限公司電腦軟體服務業
新北市新莊區經歷不拘專科以上
【公司介紹】 首都高資訊是一家專業從事軟體開發、測試和技術支援的公司,致力於提供最佳的軟體解決方案,以幫助客戶增強效率並降低成本。首都高資訊擁有一支專業、高效、有經驗的團隊,能夠快速理解客戶需求,並提供優質的軟體開發、測試和技術支援服務。我們一直致力於技術創新和持續學習,不斷研究和應用最新的技術和工具,以提高我們的服務品質和效率。 【工作內容】 從事電腦軟體的程式設計、修改、安裝、測試及維護。 與前端工程師協作,完成項目開發。 獨立開發及維護程式碼,並快速修復問題。 確保系統穩定運行並持續改進使用體驗。 維護相關程式碼,確保系統穩定運行。 【工作技能】 熟悉Python及相關技術。 熟悉Mysql。 能夠熟練地傳接API(例如:POST、GET等)。 能夠自主學習新技術。 良好的溝通和適時發問能力。 會使用基本的git版本控制。 如具有iOS開發經驗,將優先考慮錄用。 如具有Linux操作經驗者,將優先考慮錄用。 如有Android/iOS開發經驗者,將優先考慮錄用。 如有Linux操作經驗者,將優先考慮錄用。 曾參與過完整的系統專案開發流程,將優先考慮錄用。 具豐富物件導向設計與實作經驗和技術,將優先考慮錄用。 【工作環境】 首都高資訊提供舒適的工作環境,包括高效率的電腦設備,並重視夥伴的通勤安全,提供彈性的上下班時間,以幫助夥伴安排家庭生活。 首都高資訊還提供領先技術的AI協助,以提高工程師的效率和準確性。這些AI技術不僅能夠加快開發速度,還能夠提供富有價值的建議和分析,幫助工程師更好地完成項目。此外,這些AI技術還可以自動完成重複性的任務,以幫助工程師專注於核心的技術開發。 如果您對這個職位有興趣,歡迎您應徵加入首都高資訊的團隊!
應徵
10/20
極風雲創股份有限公司網際網路相關業
台北市信義區3年以上專科
工作內容 極風雲創致力於拓展 AI 驅動的應用資安智能解決方案與服務,我們正在尋找具備創新思維與跨領域整合能力的資料工程師,一起打造具影響力的產品,推動企業數位轉型與智慧防禦。 【主要職責】 負責AI訓練前置資料整理與轉換,資安資料、資安產品日誌資料、法規資料等等,將相關資料進行數據分類與建庫,以及優化AI抽取的資料庫語法優化與效能提升。 【職務需求】 • 具備 高度企圖心、責任感與自我驅動力,勇於挑戰並樂於學習新事物。 • 優秀的 溝通與協調能力,能快速理解問題並提出具體解決方案。 • 具備 AI / 資料庫建置與管理,相關經驗,熟悉RAG向量資料庫建置,及MYSQL ELK 等等使用相關經驗 • 對 AI 應用、雲端平台或資安領域 有濃厚興趣或相關經驗。 • 需要與資安工程師、法務等等,將文件與資料進行向量資料庫建置與管理,以及與前後端工程師溝通討論串接API與測試RAG效果,並與AI訓練工程師,提供AI訓練品質與精準度。 我們提供 • 參與 AI + 資安 相關產品研發,影響未來數位防禦的機會。 • 彈性且具挑戰性的工作環境,鼓勵創新與跨域合作。 • 完整的職涯發展與學習資源,讓你在 AI 與雲端資安領域快速成長。 【 職位條件】 • 電腦科學、資訊工程、資訊管理或相關科系學士/碩士學位 • 具備 AI或資料庫相關產品開發相關背景者佳 • 具備問題解決、創新能力,推動團隊達成目標
應徵
10/20
億力資訊股份有限公司電腦軟體服務業
台北市大安區經歷不拘專科以上
1. 負責軟體之分析、設計以及程式撰寫。 2. 規劃執行軟體架構及模組之設計,並控管軟體設計進度。 3. 進行軟體之測試與修改。 4. 規劃、執行與維護量產的產品。 5. 協助研發軟體新技術與新工具。 6. 管控軟體開發成本。
應徵
10/23
台北市松山區1年以上大學
COMMEET (https://commeet.co) 擴大徵才,歡迎有熱情之新夥伴加入我們的行列 [工作內容] 1 整理、標記數據,以確保數據的準確性與可靠性 2 建立/維護/優化資料處理流程與架構(data pipeline) 3 跟相關的stakeholder合作,解決並優化他們的數據需求 4 其它主管交辦事項。 [必要條件] • 從業人員恪守客戶個資保護敏感度及尊重客戶資料隱密性 • 熟悉 ML/DL • 熟悉 python 語言與相關資料庫 (csv、postgres、redis、excel) • 熟悉圖表可視化(Visualization),以及圖表分析能力 • 熟悉 git 版本控制 • 如線上初試通過者,將安排線下複試,複試安排 leetcode [加分項目] • 具有 OCR 處理數據經驗 • 有kaggle 等競賽平台經驗 • 有新創公司經驗 • 有FinTech 或 ERP/CRM 經驗 [人格特質] • 獨立作業的能力 • 細心負責任 • 勇於溝通,樂於表達自己的想法 • 喜歡主動學習新技術,願意與團隊研究及分享技術新知
應徵
10/22
文境資科股份有限公司專門設計相關業
台北市大安區1年以上大學以上
Data Engineer/ 資料工程師 1.資料稽核(Data Auditing)、收集(Data Collection)、整合作業(Data Integration) 等資料分析前處理作業 2.有MS SQL server、SSIS、SSRS、SSAS ,或其他ETL工作經驗尤佳 3.具Stored Procedure、Python、.NET、Linux Shell 撰寫經驗 4.對醫療資料分析充滿熱情並具備程式開發之熱忱與積極性 5.以公衛、醫管、資管與統計相關科系優先
應徵
10/23
恆昌科技有限公司電腦軟體服務業
台中市西屯區1年以上大學
1. 撰寫並部署 Python 爬蟲程式,確保高可用性與易維護性。 2. 熟悉網頁結構及網頁自動化操作(如 Selenium、Playwright),能抓取靜態與動態資料。 3. 精通 Python,具備撰寫 API 資料串接與網路爬蟲經驗。 4. 了解並能應對各類反爬蟲機制。 5. 與後端工程師協作,整合資料庫與開發相應 API 功能,提供前端或分析系統使用。
應徵
10/16
域動行銷股份有限公司廣告行銷公關業
台北市松山區1年以上大學以上
公司介紹: 域動行銷是中華電信集團轉投資公司之一,成立於2009年,致力於提供創新的數位廣告解決方案,當中包含廣告系統DSP、SSP、CDP、混血數據及廣告聯播網等,我們通過創新的行銷技術解決方案來推動廣告和數據分析的發展,同時專注於行銷科技領域,提供前瞻性的觀點,引領數據行銷的未來。 組織介紹: 域動Data Team是由一群對『數據分析』及『AI應用』具有研究及開發熱誠的成員所組成。在這裡你可以接觸到大量即時的使用者行為資料,並將資料科學模型應用於: 『網路廣告投放優化』 『網路用戶辨識』 『消費者行為分析』 我們更致力於尋找優化方案,改善產品體驗設計及為商業決策提供數據支持,提升效率和價值。我們鼓勵組員多方嘗試、思考、展現天馬行空的創意,且能清楚闡述想法,付諸實踐。 【Job Description】 • 須熟悉python, 尤其是對pyspark操作有經驗 • 具備優化資料流和處理效率的專業知識,以及處理每日一億筆記錄的資料吞吐量的經驗 • AWS、GCP 等雲端平台的實務經驗 • 熟練開發強大的data pipeline,包括資料收集和 ETL(擷取、轉換、載入)流程 • 具備設計和實施資料平台各種元件的經驗,包括資料攝取、儲存、資料倉儲、資料編排 • 持續整合和持續部署(CI/CD)流程的經驗 【Qualifications】 1. 熟悉 ML 相關知識 2. 熟悉Python程式語言,以pyspark模組為主 3. 熟悉Linux 系統操作 4. 熟悉資料庫程式語言 SQL 【Preferred Qualifications】 1.具備機器學習平台經驗,例如 KubeFlow、MLflow 或 Vertex AI 2.具備API設計與實作經驗 3.具備使用 AWS Kinesis、Spark Streaming 等串流工具的經驗 4. 具有數位廣告相關經驗 6. 具有分散式運算的相關知識,如 Spark、Hadoop、Hive 7. 有使用過GCP, AWS 等雲端服務經驗佳 【加分項目】 熟悉scale, JAVA 熟悉資料湖相關技術 統計學專長
應徵
10/19
盈萃科技股份有限公司電腦軟體服務業
新北市板橋區經歷不拘學歷不拘
本職缺以「量化策略程式維護與效能穩定」為主,輔以「日間顧單/系統監控」,適合熟悉程式交易、具備交易系統維運與版本控管經驗的人才: 量化策略程式維護與優化(核心):負責策略程式碼之日常維護、參數與環境設定管理、版本控管(Git)、回歸測試與效能監測;協助修補異常、改善延遲與穩定性,確保策略在模擬與實盤環境的一致性。 測試與回測支援(核心):協助策略交易員進行策略小幅調整、單元/整合測試、自動化回測任務排程與結果校核;後續依規劃擴充商品(如股票、外匯)之資料接入、因子/訊號驗證與產線落地。 顧單與日間監控(輔助):於交易時段執行系統與下單軟體健康檢查、即時異常排查(含連線、滑價、委託/成交對賬)、部位與成交資料一致性校正,並完成事件紀錄與例外追蹤以提升整體可靠度。
應徵
10/23
先悅資訊有限公司工商顧問服務業
台北市信義區2年以上專科
使用Trinity等工具開發ETL 熟悉SQL和StoreProcedure
應徵