爬虫工程师20k-30k

北京经验5-10年本科及以上爬虫工程师
岗位所属职位类型
全职

  • 内容资讯
  • GO
  • 电商平台
  • Python
立达智胜
分享到微信
微信扫一扫,用小程序打开分享
职位诱惑:

空间大 领导nice 福利好

职位描述:

岗位职责:
1、从事网页及APP数据采集的技术工作;
2、负责设计爬虫策略及反爬规则,提升数据采集效率、完整度和稳定性;
3、负责智能采集系统设计与研发,如采集任务调度,页面解析和结构化抽取,海量数据存储和读取等。
4.、负责持续跟踪分析爬虫系统的技术缺陷,对策略架构做出合理地调整和改进,提升公司相关产品与服务的竞争力。
任职资格:
1、5年左右爬虫开发经验;能够独立承担爬虫工作;
2、熟悉JAVA/Python/go任意语言,熟悉常用的数据结构和算法;熟悉分布式、缓存、消息、搜索等机制;
3、熟悉爬虫原理、分布式架构,精通一种开源爬虫框架,熟练scrapy、feapder等一个或多个爬虫框架及原理,熟悉主流爬取技术,如协议破解、模拟点击、AST解混淆、app逆向等,能够解决封账号、封IP、验证码等问题;
4、熟悉Mysql、ES 和 kafka等使用;
5、有淘宝、拼多多等电商数据获取相关经验者优先。
6、熟悉Android逆向,有主流app逆向、风控对抗、算法破解经验

附加信息:

  • 工作时间:周末双休
  • 上下班时间:09:30-18:30

工作地址

北京 - 海淀区 - 西二旗- 环洋大厦四层查看地图

职位发布者:

拉勾安全提示
· 求职中如遇招聘方扣押证件、要求提供担保或收取财物、强迫入股或集资、收取不正当利益或其他违法情形,请立即举报
· 如遇岗位要求海外工作,请提高警惕,谨防诈骗
面试评价
【查看更多评价】
  • 半年前
    • 描述相符
    • 面试官
    • 公司环境
    面试效率高
    [面试过程]
    面了三轮,感觉还好,看后续安排
    (6)
北京立达智胜科技有限公司

立达智胜

相似职位