岗位职责：
1. 进行多平台（主要是视频类）信息的抓取和分析工作，实时监控爬虫的进度和警报反馈
2. 网页信息和APP数据抽取、清洗、消重等工作
任职资格：
1. 本科学历，计算机相关专业，2024年或者2025年毕业，可以实习半年以上；
2. 熟悉Python，有扎实的算法和数据结构能力
3. 熟悉爬虫原理，熟悉常见的反爬虫技术，熟悉常用开源爬虫框架（如 scrapy / pyspider等）
4. 掌握http协议，熟悉html、dom、xpath等常见的数据抽取技术
5. 有数据处理、数据挖掘、信息提取等经验者优先
6. 沟通能力好，认真好学，有责任心