Data Engineer
Share
Job Location:
Taipei City - Taiwan
Monthly Salary:
Not Disclosed
Posted on:
28 days ago
Vacancies:
1 Vacancy
Job Summary
關於 Pinkoi Data Squad
我們是 Pinkoi 的資料團隊其目標為打造有效的數據平台同時確保資料的品質與穩定性讓資料在 Pinkoi 發揮最大的價值Data Engineer 將與 Business AnalystML Engineer 緊密合作透過數據探索問題規劃後續的 Data Pipeline資料管線 實作並提供 End-to-end 的 Data Solution以擴展公司各部門的數據分析能力並完善整體商業智慧系統
你需要負責的工作內容
- 與產品行銷廣告等分析師與商業團隊合作理解需求並規劃合適的 Data Pipeline
- 設計實作與維護 ETL/ELT 流程確保資料品質穩定性與新鮮度
- 建立與優化資料模型支援報表分析與機器學習等多種場景
- 持續迭代並優化資料基礎建設提升可擴展性與維運效率
- 建立監控與告警機制確保 Pipeline 成功率與資料 SLA
我們希望你有的經驗跟特質
- 對 Big Data 和 Data-driven engineering 有極大的熱情
- 瞭解 ETL 或 ELT 的流程並具備 Data Modeling 跟開發 Data Pipeline 的能力
- 具備與產品 / 行銷團隊合作的經驗並可與商業分析師資料工程師以及機器學習工程師協同合作
- 樂於學習最新的技術隨時充實自我的專業技能
- 對大型語言模型LLM保持開放與好奇願意學習並嘗試將其應用於資料工程工作如資料清理欄位補全文件生成自動化測試以探索新工具如何提升效率與使用者體驗
應徵條件
- 數學 / 統計 / 資訊 / 資料科學相關科系畢業或具備同等專業能力
- 一年以上數據分析或數據工程相關工作經驗
- 熟悉 PythonScalaJava 等任何一種程式語言Pinkoi 主要用 Python
- 熟悉 GNU/Linux 系統Pinkoi 用 Ubuntu
- 熟悉關聯式資料庫的運用例如 MySQL
加分條件
- 熟悉廣告歸因邏輯或具備相關數據處理經驗
- 具備使用者行為數據處理經驗具有操作或架設 BI 工具的相關經驗
- 如 SupersetTableauLooker StudioPinkoi 使用 Superset 和 Redash
- 具有分散式運算的相關知識例如 SparkHadoopHive 等一種或多種相關技術Pinkoi 主要用 PySpark
- 熟悉雲端服務例如 AWS AthenaS3GlueGCP BigQuery 等Pinkoi 主要用 AWS
- 了解 dbt 的基礎架構和應用方式如建立資料模型撰寫測試建立巨集等等
- 有將 LLM 應用於資料工程場景的經驗例如規則抽取欄位對齊與補全文件Data Catalog 生成資料品質檢查等
不用想了趕快來當個 Pinkoi 人
如果你有信心能夠勝任這份工作歡迎提供你的個人履歷與小作業即刻應徵
We may use artificial intelligence (AI) tools to support parts of the hiring process such as reviewing applications analyzing resumes or assessing responses. These tools assist our recruitment team but do not replace human judgment. Final hiring decisions are ultimately made by humans. If you would like more information about how your data is processed please contact us.
Key Skills
- Apache Hive
- S3
- Hadoop
- Redshift
- Spark
- AWS
- Apache Pig
- NoSQL
- Big Data
- Data Warehouse
- Kafka
- Scala
