数据工程师

岗位职责：1、数字治理，包括原始数据整理、数据向量化、数据入库、精确度调优，构建数据处理流水线，确保数据质量；2、对知识库数据定期维护，包括新数据更新，旧数据迭代；技术能力：1.熟练掌握Python、SQL等编程语言，能够运用pandas、numpy等数据处理库进行高效的数据清洗、转换和分析操作，具备扎实的编程基础和代码优化能力，能够独立完成复杂的数据处理任务，提高数据处理的效率和质量。2.熟悉常见的数据存储系统，如关系型数据库（MySQL、MSSQL、Oracle等）和非关系型数据库（MongoDB、Redis等），并对数据库进行调优，确保数据的快速存储和检索，满足AI模型对数据处理的高性能要求。3.熟悉自然语言处理、计算机视觉等领域的基本原理和算法，熟练掌握如Word2Vec、BERT、CNN、Transformer等技术，能够运用这些技术将文本、图像等非结构化数据转化为高质量的向量表示，并根据实际数据特点对向量化方法进行优化和改进，提升数据向量化的准确性和效果，为模型训练提供优质的输入数据。4.熟悉机器学习和深度学习框架，如TensorFlow、PyTorch等，具备丰富的模型训练、调优和部署经验，能够与算法团队紧密合作，通过调整模型超参数、优化算法结构、改进数据预处理流程等手段，提升模型的预测精度和性能表现，确保模型在实际业务场景中能够稳定发挥其*佳性能，满足应用场景对AI模型高精度的要求。任职要求：1、熟练掌握Python、SQL等编程语言，有3年及以上数据工程师工作经验；2、具备扎实的算法和数据结构基础，对AI算法（如机器学习、深度学习等）有基本了解，熟悉常用的AI算法库和框架；3、具备大语言模型微调与应用经验，具备AI相关项目经验优先；
联系我时，请说是在58同城上看到的，谢谢！