岗位职责：

1. 负责公司数据采集系统的设计与开发，实现高效、稳定的数据爬取；

2. 根据业务需求，制定数据抓取策略，优化爬虫算法，提高数据抓取速度和准确性；

3. 负责数据清洗、去重、存储等后端处理工作，确保数据质量；

4. 跟踪分析爬虫技术的发展趋势，对现有系统进行优化升级；

5. 与其他团队密切配合，完成数据挖掘、分析等相关工作；

6. 遵守相关法律法规，确保数据采集的合规性。

岗位要求：

1. 计算机相关专业本科及以上学历，2年以上爬虫相关工作经验；

2. 熟练掌握Python、Java、C++等至少一种编程语言，具备良好的编程基础；

3. 熟悉主流的爬虫框架，如Scrapy、requests等；

4. 熟悉Web前端技术，如HTML、CSS、JavaScript等；

5. 熟悉数据库技术，如MySQL、MongoDB等；

6. 熟悉Linux操作系统，能熟练使用shell脚本；

7. 具备良好的数据结构和算法基础，能独立解决复杂问题；

8. 具备良好的沟通能力和团队协作精神，能承受工作压力；

9. 有以下经验者优先：

- 有大规模分布式爬虫开发经验；

- 熟悉反爬虫技术，能应对网站反爬措施；

- 熟悉大数据处理技术，如Hadoop、Spark等。

薪资待遇：

1. 薪资范围：面议，根据个人能力及经验水平；

2. 享有五险一金、年终奖、项目奖金等；

3. 提供完善的职业发展路径和晋升机会；

4. 提供良好的工作环境和发展空间。

联系方式：

有意者请将个人简历发送至：[邮箱地址]，邮件主题请注明“爬虫工程师+姓名”。我们会尽快回复您的邮件，谢谢！