岗位职责：
1，负责公司网络爬虫新产品的研发工作，参与基数架构建设；
2，研究爬虫策略和防屏蔽规则，功课技术难点；
3，分析和抓取网页内容，进行信息抽取等工作，构建高可用的信息收集平台；
4，持续对系统的基数架构进行改进，提升抓取数据的质量和效率；
5，探索和研究爬虫的新技术方案，应用于产品业务。

任职要求：
1，熟练掌握Python/Go/Java等（主要是python）至少一种编程语言，熟悉linux，3年以上爬虫开发相关经验；
2，理解HTTP、TCP/IP等网络通信协议，熟悉常见的反爬策略；
3，精通网页抓取原理与技术，熟悉JS逆向，扎实的网页/接口的分析能力；
4，有大规模网页爬虫开发经验者优先；
5，有机票相关工作者优先；
6，了解applepay流程优先；
7，了解AST反混淆JS代码优先；
8，有APP爬虫/逆向经验者优先。