爬虫工程师（南京）

【招聘岗位】爬虫工程师（南京）【工作职责】1、数据采集​负责文本、图片、音频、视频等多模态公开数据的全方位采集工作。运用先进的数据采集技术和工具，精准定位数据源，确保采集数据的完整性、准确性与时效性。​针对不同类型的数据，制定个性化的数据采集策略，满足公司多样化的数据需求。​2、数据处理​承担大规模数据的处理与清洗任务，运用专业的数据处理工具和算法，对采集到的数据进行去噪、去重、格式转换等处理操作，提升数据质量。​3、客户支持​为客户提供专业、高效的技术支持服务，指导客户熟练使用公司产品。解答客户在产品使用过程中遇到的各类技术问题，确保客户能够顺利运用产品实现业务目标。​收集客户反馈，推动产品的持续优化和改进。​【任职要求】1、编程技能​精通Python编程语言，具备扎实的编程基础，能够编写高效、可维护的代码，遵循良好的编程习惯和严格的代码规范。​熟悉网络协议，掌握JavaScript、go语言，能够在实际工作中灵活运用。熟练使用Postman、Playwright等自动化测试工具和框架，进行接口测试、自动化测试等工作。​2、数据采集经验​熟练运用selenium、DP、scrapy等工具进行数据采集，能够根据不同的采集需求定制合适的采集方案。拥有app采集经验者优先。​3、数据处理能力​熟悉pandas、spark等数据处理工具，具备大规模数据处理的实战经验，能够高效处理和分析海量数据。​4、容器编排部署熟练掌握Docker容器化技术，能够构建、部署和管理容器化应用。熟悉Kubernetes（k8s）集群管理，了解Ansible、Terraform等自动化运维工具优先。​5、沟通协作​拥有良好的沟通能力和团队协作精神，能够与不同领域的团队成员进行无缝沟通和高效协作。在跨部门项目中，积极分享知识和经验，共同推动项目进展。​6、与专业​及以上，CET-6水平。计算机相关专业优先，如计算机科学与技术、软件工程、数据科学与大数据技术等。工作经验：不限，有经验优先薪资范围：k-k
联系我时，请说是在58同城上看到的，谢谢！