数据爬虫工程师12k-18k

西安经验3-5年本科及以上爬虫工程师
岗位所属职位类型
全职

  • 软件服务|咨询
  • MySQL
  • IT技术服务|咨询
  • Python
东方华数
分享到微信
微信扫一扫,用小程序打开分享
职位诱惑:

军工企业,团队氛围nice~

职位描述:

工作职责:
1.使用爬虫技术采集指定的互联网数据
2.对采集的数据进行清洗治理
3.根据项目需求导指定的项目数据
4.维护采集框架平台,维护采集脚本
5.根据公司内部的需求编写一些数据处理小工具

任职要求:
1.本科以上学历,3年以上相关工作经验;
2.计算机相关专业
3.精通Python语言,熟练掌握主流爬虫框架中的一种;熟悉常用的库requests/gevent等;
4.了解各种加密算法,能够独立解决js反爬和模拟登陆问题;
5.熟练掌握正则表达式、XPath、CSS等网页信息抽取技术;
6. 熟悉常见反爬机制,验证码识别,IP代理池、应用Ip池、headers认证和cookie等;
7. 熟练使用应用Selenium实施动态抓取;
8.熟悉熟练使用charles、fiddler等抓包工具者优先;
9. 熟悉数据清洗,能够用numpy、pandas、jieba等工具对数据进行处理者优先;
10.熟练使用sqlserver、mysql、mongodb、redis;
11.熟悉掌握rabbitMQ、kafka、spark 优先;
12.具有DBA工作经验者优先;
13.具有团队精神、积极的工作态度和对工作的责任心,有一定的稳定性。

附加信息:

  • 工作时间:周末双休
  • 上下班时间:09:00-18:00

面试信息:

  • 面试方式到场面试
  • 面试轮数1-2轮

工作地址

西安 - 雁塔区- 泰华金茂6号楼1501查看地图

职位发布者:

拉勾安全提示
· 求职中如遇招聘方扣押证件、要求提供担保或收取财物、强迫入股或集资、收取不正当利益或其他违法情形,请立即举报
· 如遇岗位要求海外工作,请提高警惕,谨防诈骗
面试评价
【查看更多评价】
  • 评价人头像匿名
    半年前
    • 描述相符
    • 面试官
    • 公司环境
    面试官很nice
    面试效率高
    环境高大上
    [面试过程]
    面试整体感受很好,企业很务实,面试官也很可爱,实事求是不画大饼
    (0)
  • 半年前
    • 描述相符
    • 面试官
    • 公司环境
    面试官很nice
    面试效率高
    环境高大上
    [面试过程]
    很专业,态度好,而且诚恳。
    (0)
北京东方华数信息技术有限公司

东方华数

相似职位