数据采集治理运维工程师

数据采集：设计并搭建数据采集架构，从数据库、文件系统、网络日志、第三方平台等多种数据源采集数据，确保数据的完整性和及时性；持续优化数据采集流程，提高采集效率，降低资源消耗。数据治理：制定和执行数据标准、规范和流程，确保数据的一致性、准确性和合规性；进行数据质量监控与分析，及时发现并解决数据质量问题，如数据重复、缺失、错误等；参与数据安全管理，保障数据的保密性、完整性和可用性。数据运维：负责数据处理系统的日常运维，包括服务器、存储设备、网络设备等硬件设施的维护，以及操作系统、数据库管理系统、数据处理软件等的安装、配置和升级；监控系统性能，及时处理系统故障和异常情况，保障数据处理系统的7×小时稳定运行。数据分析与支持：协助业务部门进行数据分析，提供数据查询和报表生成服务，为业务决策提供数据支持；参与数据挖掘和机器学习项目，提供数据预处理和特征工程方面的技术支持。任职要求专业技能：熟练掌握至少一种编程语言，如Python、Java等；精通SQL语言，具备良好的数据库设计和管理能力；熟悉数据采集工具（如Flume、Kafka等）、数据治理工具（如Informatica、DataStage等）和数据处理框架（如Hadoop、Spark等）。工作经验：及以上，计算机科学、统计学、数学等相关专业；具有2-5年以上数据采集、治理或运维相关工作经验；有大数据项目经验，医疗行业经验者优先。综合素质：具备良好的问题解决能力和逻辑思维能力，能够快速定位和解决复杂的数据问题；有较强的团队协作精神，能够与不同部门的人员进行有效的沟通和合作；具备良好的学习能力和自我驱动力，能够不断学习和掌握新的数据技术和工具。
联系我时，请说是在58同城上看到的，谢谢！