数据开发

数据开发岗位职责包括：1.使用Spark、Flink等技术框架开发和维护批处理与实时计算任务。2.开发数据采集、清洗、转换、入湖/入仓等全流程的数据处理任务。3.参与外部数据系统的接入及数据平台的对接开发，确保数据稳定传输与处理。4.协助构建数据治理相关能力，包括数据质量校验、元数据管理、数据血缘分析等。5.为算法、BI等下游系统提供高质量数据支持，推动数据平台与建模的协同优化。任职要求如下：1.至少5年的大数据开发经验，精通Spark、Flink、Hadoop等核心组件。2.熟练掌握Java和Python，具备扎实的数据结构与编程能力。3.熟悉Kafka、Hive、HBase、ClickHouse等大数据生态系统。4.理解数据治理理念，具备数据质量、元数据相关开发经验者优先。5.具备良好的数据建模与接口设计能力，熟悉常见性能调优手段。6.有机器学习平台对接、特征工程、模型数据支持或算法协作经验者优先。
联系我时，请说是在58同城上看到的，谢谢！