数据抓取工程师

职位描述：

1、负责搭建数据抓取系统，根据数据源头进行数据抓取，对数据抓取的及时性负责；

2、负责对抓取数据进行解析、清洗，对数据一致性、准确性负责；

3、负责相关数据抓取服务的工程建设和指标建设，对数据生产链条的健壮性、高效性负责。

任职要求：

1、本科或以上学历，有3年以上数据抓取开发经验；

2、熟练掌握Python等编程语言，具有扎实的编程基础和良好的代码风格；

3、具备丰富的爬虫开发经验，熟悉各类爬虫框架和工具，如Scrapy、Selenium等；

4、熟悉HTTP协议和常见的网页解析技术，具备良好的数据清洗和处理能力；

5、熟悉MySQL、MongoDB、Redis等；

6、具备良好的沟通和团队合作能力，能够与数据开发、后端开发人员等协作，共同完成项目目标