Applications for this position are currently paused

資深資料工程師 / Senior Data Engineer

Save
Job updated 2개월 ago

Job Description

職位描述:

我們正在尋找一位資深資料工程師,具備豐富的Python和SQL經驗,並擁有卓越的數據工程能力和解決複雜數據問題的能力。作為資深資料工程師,你將負責設計、構建和維護高效的數據流程和數據工具,以支持專案產品的開發和客戶需求的分析。你將參與推薦系統、客戶行為分析、銷售預測、影像辨識等專案,並與跨功能團隊合作實現業務目標。

薪資範圍:

資深資料工程師:年薪新台幣120-200萬(根據經驗和技能評估,包含績效和貢獻獎金)
主要職責包括:

  • 設計和實現數據管道,從多個數據來源提取、轉換和載入數據,確保數據的準確性和完整性。
  • 優化數據流程和數據工具的效能,提高數據處理和分析的速度和準確性。
  • 開發和維護數據庫結構,確保數據庫的性能和可擴展性。
  • 運用統計學和機器學習技術解決數據問題,進行數據建模和預測分析。
  • 建立數據監控和數據品質管理機制,確保數據的一致性和準確性。
  • 指導和協調初級資料工程師的工作,進行代碼審查和技術指導。

Requirements

以下是我們期望你具備的技能和經驗:

必要技能:

  • 擁有豐富的Python編程經驗,能夠開發高效的數據處理和分析程式。
  • 精通SQL語法,具備從結構化數據源中進行複雜的數據提取、轉換和載入(ETL)的能力。
  • 具備廣泛的Linux環境知識和經驗,能夠優化數據處理和系統性能。
  • 熟悉版本控制系統(如Git)和協作開發流程,能夠進行代碼管理和團隊協作。

高度加分技能:

  • 擁有機器學習和深度學習的實踐經驗,能夠應用於數據分析和建模的複雜場景。
  • 熟練使用動態網頁爬蟲技術,具備大規模數據爬取和處理的能力。
  • 具備雲端平台的使用或開發經驗,如AWS、GCP、Azure等。
  • 熟悉大數據處理和分析技術,如Hadoop、Spark等叢集系統的使用。
  • 熟悉容器化技術,能夠使用Docker構建和管理數據工程環境。
  • 具備Web開發經驗,熟悉Django、Flask、FastAPI等框架。

除了技術能力,以下特質也將受到重視:

  • 出色的問題解決能力和創新思維,能夠解決複雜的數據工程挑戰。
  • 優秀的溝通和協作能力,能夠與跨功能團隊有效合作。
  • 具備領導能力,能夠指導和培訓初級資料工程師,推動團隊成長和發展。
  • 強調數據驅動思維,能夠理解業務需求並將其轉化為可行的數據解決方案。
  • 持續學習的態度,關注行業最新趨勢和技術發展。
View all jobs
View all jobs
Save
1
2 years of experience required
1,200,000 ~ 2,000,000 TWD / year
Managing 1-5 staff
Partial Remote Work
Personal Invitation Link
This is your personal referral link for job invitation. You'll receive an email notification when someone applied for the position via your job link.
Share this job
People who applied for this job also applied for
Logo of 木刻思股份有限公司 iiNumbers.
木刻思股份有限公司 iiNumbers
Artificial Intelligence / Machine Learning
11 - 50 people

About us


iiNumbers, the Leading AI Foundry, helps enterprises build their AI-oriented and data-oriented solution to continuously solve the most valuable previously unsolvable problem in a more systematic way. With new business model, service model and frontier AI technologies, iiNumbers will be the part of the revolution of specialization in AI industry, just like IC industry.

iiNumbers can help:

● Modeling as a Service: With private cloud deployed AI Foundry, iiNumbers help enterprises continuously create values with breakthrough of the most valuable and difficult problem step by step.

● pre-trained Model as a Service: With pre-trained AI models, iiNumbers' clients can start to challenge their bottleneck problems rapidly.

● Information Retention Auditing as a Service: With the understanding of the mathematical theory behind AI modeling, iiNumbers also created a framework to fathom how much information from training data will leave in AI model. It will become a part of services in AI Foundry in 2022 Q1. Enterprises can measure the safety of exchanging AI model in an easier way.

● Inference as a Service: With mature AI models, iiNumbers also provide inference APIs directly.

In the last 6 years, iiNumbers helped enterprises in

● Financial Industry (Banking, Insurance, Securities, Sports Betting and Fund Management) 🏦

● Retail and E-commerce 🛍️ 🛒

● Semiconductor and Manufacturing ⚡🏭

● Hospital and BioMed Tech 🏥 🧬

build their solutions:

● Automated Market Making 📈

● Personalized Interaction Services (Search, Recommendation and Innovative Interactions) 🔍

● Sales Forecasting 🤑

● Warehouse Management 📦

● Logistic Optimization

● Scheduling 📅

● Manufacturing Process & Environment Optimization 🌏 🌱 🌳

● Automated Testing and Defect Detections 🧪

● AI in Medical Images 📷

● AI in Security 🛡️



iiNumbers,領先的AI鑄造廠,幫助企業建立他們的AI導向和數據導向解決方案,以更系統化的方式持續解決以前無法解決的最有價值的問題。憑藉新的商業模式,服務模式和前沿的AI技術,iiNumbers將成為AI產業專業化革命的一部分,就像IC產業一樣。

iiNumbers可以提供幫助:

● 模型作為一種服務:憑藉私有雲部署的AI鑄造廠,iiNumbers幫助企業逐步突破最有價值和最困難的問題,持續創造價值。

● 預訓練模型作為一種服務:憑藉預訓練的AI模型,iiNumbers的客戶可以迅速開始挑戰他們的瓶頸問題。

● 信息保留審計作為一種服務:憑藉對AI建模背後的數學理論的理解,iiNumbers還創建了一個框架,以深入理解訓練數據在AI模型中會留下多少信息。這將在2022年第一季度成為AI鑄造廠服務的一部分。企業可以更容易地衡量交換AI模型的安全性。

● 推理作為一種服務:憑藉成熟的AI模型,iiNumbers也直接提供推理API。

在過去的6年中,iiNumbers幫助了以下行業的企業

● 金融業(銀行,保險,證券,體育賭博和基金管理)🏦

● 零售和電子商務 🛍️ 🛒

● 半導體和製造業 ⚡🏭

● 醫院和生物醫學技術 🏥 🧬

建立他們的解決方案:

● 自動化市場製造 📈

● 個性化互動服務(搜索,推薦和創新互動)🔍

● 銷售預測 🤑

● 倉庫管理 📦

● 物流優化

● 排程 📅

● 製造過程和環境優化 🌏 🌱 🌳

● 自動化測試和缺陷檢測 🧪

● 醫療影像中的AI 📷

● 安全領域的AI 🛡️

公司網站:
https://iinumbers.com



Team

Avatar of the user.
Avatar of the user.
Backend 顧問
Avatar of the user.
Backend
Avatar of the user.
HR
Avatar of the user.
管理部經理