多模态数据算法工程师

职位描述 负责多模态大模型的数据算法设计与优化，通过与算法研发、数据工程团队紧密合作，构建高效的多模态数据处理算子管线，确保模型训练数据的多样性和高质量，为多模态大模型提供优质的数据处理算法支撑。 核心职责 多模态数据处理算子设计与开发：开发设计多模态数据处理算子，包括音频-视频多模态融合算子的开发与优化 数据处理算子设计与开发：开发视频数据处理算子，包括视频帧采样、人脸人体检测、音视频同步、OCR、视频质量等关键步骤的算子优化 数据评测集构建：构建多模态算子评估体系，设计相关算子的评测集，评测流程自动化； 算子性能优化：针对大规模多模态数据处理场景，优化算子性能，提升处理效率和准确性，确保算子的可扩展性和稳定性； 任职要求 学历要求：硕士以上学历，计算机科学、人工智能、信号处理等相关专业，英语六级以上； 技术能力：熟练掌握Python、PyTorch/TensorFlow等深度学习框架，具备扎实的计算机视觉、音频处理、多模态学习基础； 算法经验：具有目标检测、图像识别、视频理解、多模态融合、视觉语言模型(VLM)等至少一个领域的算法开发经验； 算子开发经验：具备数据处理算子设计经验，熟悉算子优化、并行计算、内存管理等技术； 系统能力：熟悉Linux操作系统，具备大规模多模态数据处理和分布式计算经验； 优先条件 项目经验：具有多模态视频理解、视频生成、视频数据算法等项目的算子开发经验者优先； 技术深度：在目标检测、图像识别、多模态融合（视频-音频）、VLM等领域有深入研究或发表论文者优先； 工具掌握：熟悉OpenCV、FFmpeg等多媒体处理库，以及HuggingFace 等开源框架者优先； 工程能力：具备强烈的自我驱动力、优秀的团队协作能力，以及对前沿多模态技术挑战的极大热情； 算子优化经验：具有CUDA算子开发、算子融合、性能调优等项目经验者优先。