高级大数据开发工程师

工作职责：1、负责大数据项目架构设计，技术选型，技术实现，技术优化，技术支持等工作；2、设计并优化大数据架构，包括数据采集、数据治理、数据安全、数据仓库、数据应用等，支撑各个业务线快速增长对数据的使用需求；3、负责数据团队工作管理及能力提升、推动公司数据安全治理体系建设，满足数据安全合规要求；4、参与核心功能的架构与代码模板编写，开发与维护系统公用核心模块；5、参与产品/项目业务规划，讨论并提出有建设性的意见；技能要求：1、计算机相关专业统招以上，5年以上互联网大数据架构设计经验；3年以上互联网数据团队管理经验；2、熟悉Hadoop、Spark、Flink、Kafka、Hive、HBase等主流大数据系统原理及源码，熟悉ADB、MySQL等数据库；3、有扎实的编程语言基础，熟练掌握Java/Python相关的技术语言，熟悉掌握SQL、Java、Python等；了解数据仓库建模理论；4、熟悉SpringCloud，Dubbo、FastApi等不限于以上框架的微服务框架，有容器/微服务、中间件、开源大数据、基础云服务等技术积累和实战经验；5、对数据采集、数据开发、数据分析、数据建模、算法等有深刻认识和实战经验，具备大规模系统的故障诊断与性能优化能力；6、负责过多条大数据业务线或整个产品线的业务架构工作，组织过中等以上规模项目者优先，有企业级应用大数据行业经验优先；7、在大数据架构、产品、技术等方面有深入思考和中长期的产品和技术视野，对技术架构演进有清晰、成熟的思路；8、具备良好沟通能力和解决问题能力，优秀的业务理解能力，善于从复杂的数据问题中找到关键路径。加分项：1、熟悉Go、Python等一种或多种编程语言；2、熟悉linux操作系统，熟练掌握各种命令与操作，有模型相关项目经验者；5、有爬虫相关经验、熟悉js逆向、APP逆向，抖音风控，快手、小红书、淘宝风控，
联系我时，请说是在58同城上看到的，谢谢！