工作职责:1、多模态算法开发与优化:①负责多模态算法模型设计与开发,实现文本、图像、语音多模态推理能力②面向AI玩具/AR眼镜/AI耳机/AI相机/等应用方向,基于垂直领域数据实现LLM或VLM模型微调与应用落地。③优化模型结构和训练方法,提升模型的性能、效率和鲁棒性,实现模型在端侧落地2、系统集成与部署:①协助软件开发团队完成模型转换、量化等模型端侧移植工作,优化模型资源占用,实现跨平台部署。②与硬件和软件开发团队紧密合作,优化模型在端侧设备上的部署和运行,实现模型高性能推理。任职要求:1、教育背景:计算机科学、人工智能、机器学习、数学或相关领域的硕士及以上学历。2、工作经验:3年以上模型算法开发经验,具备AI玩具、AR眼镜、AI耳机、AI相机或其他AI系统的开发经验者优先。3、精通Python、C++等编程语言,熟悉PyTorch, 具备良好的代码编写和调试能力。4、熟悉LLM模型(如Llama3、Qwen)或VLM模型 (如Llava、QwenVL)等结构以及训练方法。5、有大模型训练以及应用开发经验,例如语料清洗,指令微调,内容安全,提示词优化等;熟悉 megatron、deepspeed、vllm等训练或推理加速框架。6、具备模型在端侧芯片(如高通、MTK、展锐、RK、地平线等)NPU移植的经验者优先。