岗位职责
● 根据业务需求开发网页爬虫
● 对爬取的数据进行标注与清洗
● 负责爬虫项目的部署与运维

任职要求
1. 技术能力
● 熟练掌握 Python/PHP，具备扎实的编程基础与数据结构知识
● 熟悉 HTTP/HTTPS 协议、TCP/IP 网络模型，能使用抓包工具（如 Charles、Fiddler）分析请求
● 熟悉 PostgreSQL/Mysql 数据库开发，掌握 SQL 优化与索引设计
● 熟悉 Scrapy、Selenium、Playwright 等框架，了解分布式爬虫框架（如 Scrapy-Redis）
2. 经验要求
● 1 年以上爬虫开发经验，有海外社媒类数据抓取项目经验者优先
3. 其他要求
● ***本科及以上学历
● 通过 CET-4 或以上英语等级认证
加分项
● 了解前端技术（HTML/CSS/JavaScript），能逆向分析动态渲染页面
● 熟悉常见反爬措施（如 JS 混淆、验证码识别、IP 限频），具备实战对抗经验