数据采集工程师助理

岗位职责主要负责维护改善爬虫系统及数据清洗相关技术与系统不能解决的app爬虫开发，需要完成爬虫系统的技术选型、设计、实现等工作，保证采集到高质量的数据。任职要求1、计算机相关专业12年软件设计、爬虫开发经验，掌握Python或Java之一；2、精通网页抓取原理及技术，熟练使用Requests、Selenium，Urllib等库，熟悉爬虫相关技术和工具；3、熟练使用Re、Xpath、Json解析数据；4、熟悉Linux平台和掌握MySQL、Redis等数据库；5、具有很强的分析和解决问题的能力，攻克难题的强烈兴趣，善于学习。加分项：1、会安卓反编译脱壳优先；2、有Web或桌面开发经验优先；3、熟悉大型互联网内容搜索产品的设计架构,对大数据量搜索应用有一定经验优先；4、会使用消息队列如Kafka等，有Elasticsearch的使用经验优先；5、有分布式爬虫框架搭建项目经验优先；6、有JS加密、JS混淆破解经验优先。
联系我时，请说是在58同城上看到的，谢谢！