数据开发

岗位职责：-主动获取复杂网站架构下的相关数据信息。-负责数据的采集、清洗及分析工作。-构建高效爬虫平台，提升数据抓取效率。-应用分布式技术优化爬虫性能。任职要求：-具备优秀的学习能力和问题解决能力。-拥有良好的团队合作精神和沟通能力。-熟练掌握Java或Python等编程语言及相关算法和数据结构。-熟悉Linux操作系统，精通HTTP协议，了解大型爬虫框架。-熟练使用MySQL等关系型数据库，有NoSQL、Redis等非关系型数据库的工作经验者优先。-对计算机体系结构、分布式系统、协程和网络编程有深入理解。-具备敏捷开发经验，熟练使用SVN和Maven工具。
联系我时，请说是在58同城上看到的，谢谢！