岗位职责：
1、梳理和解读业务，提供数据层面的问题解决方案；
2、协助进行数据提取.清洗.转换等处理工作，搭建自动化的数据生产线
3、参与数据处理框架的开发和数据处理平台的建设；
4、协助开发和维护独立的数据处理工具
岗位要求：
1.熟悉Python基本语法，熟练使用AI工具，具有独立项目开发经验以及具有大模型经验
2.工作年限3-5年
3.熟练掌握scrapy框架，tensorflow，pytroch等框架，了解多线程、多进程、网络通信编程相关知识，有分布式爬虫架构，数据挖掘经验；
4.掌握网页抓取原理及技术，了解基于Cookie的登录原理，熟悉基于正则表达式、XPath、CSS等网页信息抽取技术；
5.熟悉各种反爬机制，掌握Selenium，APP破解技术优先；
6.做过数据处理、ETL等相关工作优先；
7.对大数据相关技术感兴趣。
学历要求：**公办本科及以上，985与211大学优先录用。学信网可查，有***书