多模态融合工程师

岗位概述作为多模态融合工程师，你将负责设计和开发情绪引擎中的多模态数据融合模块，将文本、语音、视觉等多种模态的数据结合起来，提升机器人对用户情感状态的理解能力。你将与情感计算团队、NLP团队、语音团队和视觉团队紧密合作，推动多模态融合技术在陪伴机器人中的应用，打造更智能、更人性化的情感交互体验。岗位职责1.多模态数据融合算法开发设计和开发多模态数据融合算法，将文本、语音、视觉等模态的数据结合起来，提升情感识别的准确性。研究多模态对齐技术，确保不同模态的数据在时间和语义上的一致性。探索多模态融合的前沿技术（如跨模态注意力机制、多模态Transformer等）。2.多模态情感理解开发多模态情感理解模型，综合文本情感分析、语音情感识别和视觉情感识别的结果，生成更全面的情感状态判断。研究多模态情感冲突解决机制，处理不同模态情感识别结果不一致的情况。优化多模态情感理解模型的实时性和鲁棒性。3.多模态数据集构建与优化收集、清洗和标注多模态情感数据集，确保数据集的多样性和质量。设计数据增强策略，提升数据集的泛化能力。与数据科学家合作，确保数据集能够支持模型的训练与验证。4.模型优化与部署优化多模态融合模型的性能，降低计算资源需求。研究模型压缩、量化和加速技术，确保模型能够在嵌入式设备上高效运行。与嵌入式团队合作，完成多模态融合模型在机器人硬件上的部署。5.跨团队协作与NLP团队合作，优化文本情感分析与多模态融合的结合。与语音团队合作，优化语音情感识别与多模态融合的结合。与视觉团队合作，优化视觉情感识别与多模态融合的结合。6.研究与创新跟踪多模态融合领域的*新研究进展，探索前沿技术（如自监督学习、FewshotLearning等）。撰写技术文档、专利和论文，推动公司在多模态融合领域的技术积累。岗位要求教育背景计算机科学、人工智能、电子工程或相关领域的及以上。专业技能1.核心技能多模态学习熟悉多模态数据融合、跨模态对齐、多模态Transformer等技术。深度学习熟悉主流深度学习框架（如TensorFlow、PyTorch）。情感计算熟悉文本情感分析、语音情感识别、视觉情感识别等技术。2.编程能力熟练掌握Python、C++等编程语言。熟悉多模态处理相关工具库（如OpenCV、Librosa、Hu*ingFaceTransformers）。3.算法与模型熟悉主流多模态融合模型（如CrossmodalAttention、MultimodalTransformer等）。了解模型优化技术（如量化、剪枝、蒸馏等）。4.工具与平台熟悉云计算平台（如AWS、GoogleCloud）和分布式训练框架。了解嵌入式AI开发工具（如TensorFlowLite、ONNX）。经验要求2年以上多模态融合或相关领域的研究或开发经验。有多模态情感理解项目经验者优先。有机器人或多模态交互项目经验者优先。软技能强烈的创新意识和解决问题的能力。优秀的团队合作和沟通能力。对多模态融合技术有浓厚的兴趣和热情。加分项有心理学或认知科学背景，能够将人类多模态情感表达理论与AI技术结合。有开源项目贡献或技术社区活跃经历。有多模态融合相关专利或论文发表。工作环境你将在一个充满创新氛围的团队中工作，与全球*的AI研究员、硬件工程师和产品经理合作。公司提供丰富的资源支持，包括高性能计算集群、多模态数据集和实验设备。鼓励参与学术会议和技术交流，支持个人职业发展。职业发展技术路线多模态融合工程师高级多模态融合工程师多模态技术专家。管理路线多模态融合工程师团队负责人技术总监。薪酬与福利具有竞争力的薪资和股权激励。提供完善的福利体系，包括健康保险、带薪年假、学习补贴等。支持远程办公和灵活工作时间。如果你对多模态技术充满热情，并希望通过多模态融合技术改变人机交互的未来，
联系我时，请说是在58同城上看到的，谢谢！