数据采集与舆情分析

岗位职责：1、数据采集与爬虫开发（1）设计并开发爬虫工具，每日/每周抓取公司相关新闻报道、社交媒体内容（如Twitter、行业论坛或其他媒体等）。协助团队监控品牌声誉，及时反馈异常舆情动态，确保数据的全面性与时效性。（2）处理反爬机制，优化爬虫稳定性，确保数据准确抓取（如公司名称、项目名称、产品关键词等相关信息）。2、数据预处理与整合（1）清洗原始数据（去重、过滤无效信息），按平台、时间、内容类型分类整理，形成结构化数据集。（2）对接AI工具接口，将处理后的数据导入舆情分析模型，生成初步分析报告。3、基础舆情分析与协助辅助解读AI生成的舆情报告，标注关键信息（如正面/负面评价、潜在风险点、传播量高等内容）。技能要求：1、掌握Python编程，熟悉爬虫框架（如Scrapy、BeautifulSoup）、数据清洗库（Pandas）。2、了解自然语言处理（NLP）、AI模型调用（如ChatGPTAPI、Hu*ingFace）。3、具备基础的SQL数据库操作能力，能独立设计数据存储结构。实习时间要求：实习时间不少于半年，每周至少三天。
联系我时，请说是在58同城上看到的，谢谢！