7/12 研發部 大數據工程師
- 達思智能科技股份有限公司
- 數位內容產業
- 台北市信義區
- 經歷不拘
- 大學
【工作內容】 •負責處理及挑戰 Data 相關的工程問題。 •打造基於機器學習、資料探勘與人工智慧等相關技術的數據平台,藉由不斷的數據迭代, 讓產品變得更好。 【需求條件】 •熟悉 Computer Science 相關知識或相關科系畢業 •熟悉 Python、Scala、Ruby、Java、Go 、julia、R等任何一種程式語言。 •熟悉關聯式資料庫的運用。例如 MySQL、PostgreSQL 任一種 •具有分散式運算的相關知識。例如 Spark、Hadoop、Hive 等一種或多種相關技術。 •熟悉 ETL 流程,包含資料收集、資料清理、資料建模 •熟悉 GNU/Linux 系統。 •熟悉 AWS 或 GCP Cloud service。例如 Athena、S3、Glue、DMS、BigQuery 等 【加分條件】 •有建立 data processing pipeline的相關經驗,像是利用 Luigi、Airflow、Digdag等工具 •有建立 data serving 服務的相關經驗,像是建立高性能 message queue、API service 等 •具有 NoSQL 的實務經驗。例如 HBase、Cassandra、Redis、MongoDB 等一種或多種相關技術 •自建或使用過第三方 Tracking tool。例如 Fluentd、Firebase、Google Analytics、Amplitude、Mixpanel 等 •熟悉 ElasticSearch 或 Solr 等搜尋引擎 •具有架構 streaming 資料處理系統的實務經驗。例如 Spark-streaming、Kafka、Flink 等 •熟悉任一種視覺化工具。例如 Superset、Redash、Data Studio、Tableau 等