岗位职责：
1、负责多平台信息爬取和页面内容的提取分析，负责解决各类反爬机制；
2、编写抓取互联网爬虫代码，负责数据采集，参与需求分析和梳理，爬虫采集策略制定和实现；
3、负责网页的数据抓取和爬取链路优化（包括逆向分析、脱壳、加密参数破解、抓取攻防等），提取抓取能力；
4、研究爬虫策略和防屏蔽规则，解决封账号、封IP、验证码、页面跳转等难点，提升网页抓取的效率和质量。

岗位要求：
1、3年及以上python爬虫经验，本科及以上学历，计算机相关专业；
2、熟悉掌握至少一种开源爬虫框架（scrapy、appium、selenium等）；
3、精通动态网页抓取、浏览器模拟抓取、APP抓取等技术，熟悉使用fiddler或其他抓包工具；
4、具有js逆向，app逆向实际解决经验。熟悉js hook原理，熟悉各种反爬风控常见手段；
5、具有团队合作精神，有责任感，对工作认真负责，有较强的协调和沟通能力。