岗位职责：

1、负责多平台信息爬取，负责破解各类反爬机制；

2、负责APP的数据抓取和爬取链路优化(包括APP反编译、逆向分析、脱壳、加密参数破解、抓取攻防等)，提升抓取能力；

3、研究爬虫策略和防屏蔽规则，解决封账号、封IP、验证码、页面跳转等难点，提升网页抓取的效率和质量；

岗位要求：

1、2年以上python爬虫经验，本科以上学历，计算机相关专业；

2、熟悉掌握至少一种开源爬虫框架(scrapy、appium、selenium)；

3、精通动态网页抓取、浏览器模拟抓取、APP抓取等技术，熟悉使用fiddler或其他抓包工具；

4、具有js逆向，app逆向相关经验。熟悉js hook原理，熟悉各种反爬常见手段，并能够通过多种应对策略(如代理池、模拟登录、验证码处理、浏览器渲染等)来保证数据的持续交付；

5、具有团队合作精神，有责任感，对工作认真负责，具有较强的学习能力和抗压能力。页面跳转等难点，提升网页抓取的效率和质量；