1. 大模型優化算法的研究與設計：負責研究大模型領域（語言模型、多模態模型等）的優化算法、網絡結構優化及改進設計、大模型蒸餾訓練，以及預訓練研發任務等。 2. 垂類領域大模型研發與調優：負責針對專業領域場景和數據，利用增量訓練、微調訓練、知識增強、超參數調整等技術訓練垂類領域大模型，提升模型性能，并維護線上模型的穩定性，實現AI項目落地與交付。 3. AI產品相關的模型研發與維護：負責公司AI能力或產品對應的模型研發、迭代與維護，包括小模型及大模型的設計、訓練研發及優化，確保模型效果與業務需求匹配。 4. 大模型國產化性能優化與適配：適配昇騰等國產硬件平臺，優化模型算子性能及分布式訓練策。 5. 技術探索與創新：跟蹤大預言模型、多模態大模型的預訓練、大模型方向的最新成果，探索其在業務中的應用價值。 任職要求 1. 教育背景與工作經驗：計算機及相關專業本科及以上學歷，具備五年以上相關工作經驗。參與過大模型相關開發工作，包括但不限于：數據清洗、開源模型實際微調、訓練框架開發、評測、推理部署等。 2. 精通Python編程語言，熟悉Java等其他編程語言，熟悉常用框架如PyTorch,TensorFlow等深度學習框架； 3. 熟悉大語言模型的增量預訓練、指令微調、偏好微調等多種訓練方法 ，有全場景訓練實戰落地經驗； 4. 熟悉全參數、LoRA 、QLoRA 等微調方法, 有微調場景落地經驗； 5. 熟悉DeepSpeed、flash-attn、vllm等大模型訓練及推理加速方法； 6. 熟悉數據收集、清洗和預處理的流程。有訓練數據構造落地經驗；