python爬虫工程师15k-23k

广州经验3-5年本科及以上爬虫工程师
岗位所属职位类型
全职

  • 抖音
  • pdd
  • 电商爬虫
  • 电商平台
  • 数据采集
  • Python
赛博威大数据事业部
分享到微信
微信扫一扫,用小程序打开分享
职位诱惑:

双休 五险一金 餐补

职位描述:

近期日采达到其中一项就行
1. 近期淘宝商品采集5w+
2.PDD商品近期采集5000+
3.抖音商品近期采集1w+

双休+五险一金+餐补
弹性上下班

【工作职责】:
1、负责分布式网络爬虫系统及数据库的设计与开发;
2、研究及破解电商及自媒体app反爬策略,保证爬取的稳定性;
3、维护和优化已有的爬虫服务;
4、负责爬虫核心算法的策略优化研究,设计爬虫策略和防屏蔽规则,充分利用资源,提升网页抓取的效率和质量;
5、负责数据平台建设,数据清洗、处理,提供数据服务以及数据管理;
6、分析、理解大数据业务需求,设计技术方案并落地实施;
7、处理各个业务在使用数据平台过程中的各种问题,分析并给出优化方案;
8、可以独立跟进需求项目开发进度。

【任职要求】:
1、计算机相关专业,3年以上Python爬虫工作经验;
2、熟悉爬虫原理及常用的反扒技术,包括但不限于JS防护、混淆、逆向分析、加密、App破解、防逆向、加固、代理等技能,具备较好的前端分析技能;
2、熟悉各类HOOK框架包括单不限于frida、xposed;
3、有天猫、京东、抖音等国内主流平台任意一个平台的项目经验,有App端数据采集经验;
4、熟悉网络爬虫开发原理,对互联网各种类型数据交互模式熟悉,知道如何处理需登录网站、动态网页等各种情况下的数据采集方法;
5、熟悉selenium、Appnium、Airtest、Scrapy、pyspider等爬虫相关框架;
6、熟悉常用数据库(MySQL/Oracle/SQLSever/Redis) ,熟悉索引技术和SQL优化,了解RabbitMQ、InfluxDB。

附加信息:

  • 候选人加分项:近期日采达到其中一项就行 1. 近期淘宝商品采集5w+ 2.PDD商品近期采集5000+ 3.抖音商品近期采集1w+
  • 工作时间:周末双休
  • 上下班时间:10:00-19:00

面试信息:

  • 面试方式到场面试 | 视频面试
  • 面试轮数1-2轮
  • 时间安排一天内完成
  • 补充标签可周末面试 | 可下班后面试

工作地址

广州 - 黄埔区- 润慧科技园查看地图

职位发布者:

拉勾安全提示
· 求职中如遇招聘方扣押证件、要求提供担保或收取财物、强迫入股或集资、收取不正当利益或其他违法情形,请立即举报
· 如遇岗位要求海外工作,请提高警惕,谨防诈骗
面试评价
【查看更多评价】
  • 评价人头像匿名
    半年前
    • 描述相符
    • 面试官
    • 公司环境
    面试官很nice
    [面试过程]
    面试官和hr小姐姐都很nice
    (1)
  • 评价人头像匿名
    半年前
    • 描述相符
    • 面试官
    • 公司环境
    面试官很nice
    面试效率高
    环境高大上
    [面试过程]
    都挺不错的,各方面。笔试加面试
    (0)
  • 评价人头像匿名
    半年前
    • 描述相符
    • 面试官
    • 公司环境
    面试官很nice
    [面试过程]
    一般般,先笔试人事技术,技术问的问题有点随意,反正就那样,估计给不了那么高的薪资!
    (0)
广东赛博威信息科技有限公司

赛博威

相似职位