岗位职责：
1.爬虫核心技术研发，根据业务规划及技术规划制定应用架构方案，解决实际开发过程遇到的各类问题；
2.python与MySQL数据统计、数据处理；

岗位要求：
1.熟悉TCP/IP、HTTP、XPath、beautifulsoup4、正则表达式等相关技术；
2.熟悉分布式系统、多线程，精通scrapy、selenium框架以及原理；
3.精通爬虫和反爬技术、精通JS逆向、APP逆向，精通http底层协议；精通深度抓取、动态网页技术抓取、浏览器模拟抓取、APP抓取等技术；
4.熟悉python，熟悉使用numpy、pandas，能对数据做结构化处理；
5.沟通表达佳，有博客撰写习惯或者在企业内外部有技术分享经验者优先。