崗位職責:
1、負責大數據應用產品的平臺搭建、架構優化、技術迭代和開發維護,提供穩定的大數據平臺服務;構建數據存儲、數據挖掘、數據計算及數據服務于一體的大型分布式數據平臺;
2、負責構建和維護算法平臺,對海量數據進行離線計算、實時計算等分析挖掘;協同數據分析師,根據業務場景設計并實現數據模型和服務模型,并跟進和評估模型效果,確保算法和模型的有效落地;
3、持續學習了解大數據領域的新技術,并結合實際需求落地;
任職要求
1、 學歷專業:4-9年相關工作經驗;
2、 有扎實的編程功底,熟悉常用的數據結構和算法;
3、熟悉數據倉庫建模理論,有大數據整體系統架構設計、數據ETL、建?;驍祿治鱿嚓P經驗;
4、熟悉常用的開源大數據技術,如Hadoop、HBase、Flink、Kafka、Doris等,了解各組件的實現原理;
5、 有較強的 HSQL/SQL性能調優經驗,熟練使用相關開發語言(Python/Java/Scala/Shell等),熟練掌握Spark、flink任意一種計算框架,能閱讀源碼跟蹤問題;
6、 具備良好溝通能力和解決問題能力,善于從復雜的數據問題中找到關鍵路徑,對待工作認真、負責,有較強的自驅力。