【岗位职责】
1.负责爬虫的开发及优化迭代改进，设计爬虫策略和防屏蔽规则，提升网页抓取的效率和质量。
2.负责样本数据分析，并开发和优化已有的文本挖掘及统计算法。
3.负责应用经典的推荐算法，优化推荐效果。

【岗位要求】
1.计算机、数学、统计等相关专业，本科及以上学历。
2.精通Python，3年以上Python开发经验。有Flask、Tornado、Django等Web框架实际项目经验。
3.熟悉多线程、多进程编程，有高并发项目经验。
4.熟练使用正则表达式。
5.熟悉mysql、redis、ES、mongo等常用数据库。
6.熟练使用pandas、numpy等数据分析框架、熟悉pytest单元测试。
7.熟练使用git工具。
8.熟悉linux常用命令及docker部署。
9.有分布式爬虫和数据采集系统的架构设计和开发经验。
10.了解常见的机器学习算法以及TensorFlow等主流框架。
11.熟悉经典的推荐算法。
12.具备高度责任感，良好的沟通协作能力。 具有独立开展和完成工作的能力。