崗位職責:
1. 參與公司數據中臺、大數據平臺及數據倉庫的整體規劃,架構設計和研發;
2. 參與建設統一的數據體系,制定并推動數據治理體系的落地;
3. 對數據采集、數據融合、數據質量、數據應用鏈路有深入理解,并能協助業務數據集市建設,搭建業務領域模型。
任職資格:
1. 計算機相關專業碩士學歷,3年及以上相關工作經歷;
2. 精通大數據技術生態相關技術(例如:Hadoop、MapReduce、Hive、Hbase等),并具備豐富的數據倉庫、數據中臺架構設計和實施經驗,有落地的項目;
3. 從事大數據領域至少2年以上,熟悉數據倉庫模型設計與ETL開發經驗 ,掌握Kimbal的維度建模設計方法,具備海量數據加工處理(ETL)相關經驗;
4. 有實時ETL研發經驗,對分布式實時大數據處理系統有深入理解,包括但不限于Spark streaming、Flink;
5. 熟悉數據治理、數據質量管理等相關理念和方法;
6. 熟悉Kubernetes/Docker開發及原理,熟悉Kubernetes各組件的工作流程,對Kubernetes有豐富的部署調優實踐經驗。