崗位職責： 1. 負責公司大數據平臺的架構設計和優化，確保數據處理的高效性和可靠性。制定并推行大數據技術標準和規范。 2. 評估和引入合適的大數據技術棧，推動技術創新和性能優化。解決大數據項目中的關鍵技術問題和瓶頸。 3. 設計和實施大規模數據處理、存儲和分析方案。優化數據處理流程和算法，提升數據處理效率。 4. 對團隊成員進行大數據技術的指導和培訓，提升整體技術水平。組織和主持技術分享會，推動大數據技術知識的傳播和交流。 5. 參與大數據項目的需求分析、技術方案設計和開發計劃制定。跟進項目進度，確保按時交付高質量的數據處理和分析系統。 崗位要求： 1. 計算機科學、數據科學、軟件工程或相關專業本科及以上學歷。 2. 5年以上大數據開發和架構設計經驗。有大規模數據處理和分析項目的實際經驗。 3. 熟悉Hadoop、精通Flink等大數據處理框架。 4. 熟悉Kafka、maxwell、canal等大數據生態系統組件。 5. 有SQL和NoSQL、新SQL數據庫（如MySQL、tidb、starrocks等）的實際使用經驗。 6. 熟悉大數據平臺的性能調優和優化方法。 7. 具備豐富的數據分析和建模經驗，能夠處理和分析大規模數據集。有實際項目經驗。 8. 良好的溝通能力和團隊協作能力，能夠與團隊成員和其他部門有效合作。 9. 具備良好的學習能力和技術敏感性，能夠快速掌握和應用新技術。