数据开发

数据开发岗位职责包括：-熟悉并运用分布式计算框架（如Hadoop、Spark、Flink、Storm），以及大数据生态工具（如Hive、HBase、Kafka、Zookeeper、Flink）。-精通SQL，并熟练掌握至少一门编程语言（Java/Scala/Python为主），具备数据仓库设计（如分层建模、维度建模）和ETL流程开发的能力。-了解数据湖（DeltaLake、Iceberg）和实时计算（Flink、KafkaStreams）技术，能够处理和优化大规模数据（TB/PB级）。-熟悉数据管道开发工具（如Airflow、DolphinScheduler），具备数据治理、元数据管理和数据质量监控的经验。-掌握数据管道调度工具（如Airflow、DolphinScheduler），并具备数据治理、元数据管理和数据质量监控的经验。-对OLAP引擎（ClickHouse、Doris、Presto）有一定了解，熟悉数据安全和隐私保护技术者优先。-具备DevOps经验（如Docker、K8s）者优先考虑。我们期待您能够为我们的数据平台带来创新和技术提升，共同推动业务发展。
联系我时，请说是在58同城上看到的，谢谢！