1、精通python语言，精通scrapy爬虫框架；
2、 精通web抓取原理及技术，从结构化和非机构化数据中获取信息；
3. 精通Html、JavaScript、XML等知识，熟悉前端异步请求方式；
4、精通自动化测试工具；
5、 熟悉一种或多种开源技术；
6、 具备一定的数据挖掘能力；
任职要求：
1、 负责为各个业务线提供垂直，精准的数据采集，抽取，存储服务
2、 设计爬虫策略和防屏蔽规则，提升网页抓取的效率和质量
3、 解决网页抓取，信息抽取等问题，构建高可用性，高扩展性网络信息采集平台
4、 能独立解决实际开发过程碰到的各类问题