数据开发

数据开发工程师的主要职责包括：1.基于Hadoop构建和维护大数据基础平台，确保其高效稳定运行。2.负责公司大数据平台项目的搭建与整合，并进行系统运维。3.跟踪技术社区的发展动态，持续优化大数据平台的技术和业务流程。4.负责公司相关大数据业务的数据采集、聚合和汇总，确保数据质量。职位要求如下：1.本科及以上学历，具备扎实的编程基础，熟悉常用数据结构，精通Linux系统和Shell脚本。2.熟练使用Python进行脚本开发，掌握Java服务端开发框架Spring、MyBatis及Kafka等开源工具者优先。3.熟悉Flume、Kafka等数据采集和传输技术，能够有效处理大规模数据流。4.熟悉Hadoop、Hive、Spark、HBase等大数据存储和计算系统，了解其架构和工作原理，有相关源码研究经验者优先。5.掌握Flink、Kylin、Presto、ElasticSearch、Redis等一种或多种系统的优先考虑。6.性格乐观积极，具备主动分析和解决实际问题的能力和态度。我们期待有志之士加入，共同推动数据技术的发展。
联系我时，请说是在58同城上看到的，谢谢！