【岗位职责】
1、负责各大电商平台数据采集，主要是动态数据。
2、负责网页爬虫架构设计（包括基础资源，如代理池技术、反爬技术、浏览器采集技术等等）与核心技术研发。
3、负责API或者爬虫获取数据，数据解析和分析等功能的研发。
4、设计各种策略和算法，提升抓取效果；充分利用带宽资源，避免限制。
【任职资格】
1、大专以上学历，计算机及相关专业，5年以上工作经验；有大规模爬取电商（抖、快、拼、京、淘）的经验。
2、扎实的java或者python语言基础，熟悉linux平台下主流Java或者python应用开发框架及中间件，能够对Java进行代码级的调优和调试。
3、能够熟悉使用RPA工具。
4、熟悉常用的浏览器调试技术。
5、熟悉常见的反爬机制及对应的应对措施，如cookie识别。
6、精通网页爬虫、分布式、多线程开发技术。
7、能够解决封账号、封IP采集、验证码识别、图像识别等问题,解决网页抓取、信息抽取等问题,构建完善的网络信息收集平台。
8、善于主动学习，责任心强，能够承受较高的工作压力。
9、有AI营销经验优先。