爬虫工程师35k-70k·15薪

上海经验3-5年本科及以上爬虫工程师
岗位所属职位类型
全职

  • Unix
  • 区块链
  • Mac OS X
  • 内容资讯
  • 深度学习
  • Windows
  • 数据挖掘
  • Python
华尔街见闻
分享到微信
微信扫一扫,用小程序打开分享
职位诱惑:

年终奖金 股权激励

职位描述:

工作职责
负责 X / Twitter等平台相关数据的采集与处理,包括用户数据、推文、互动数据等;
搭建高效、稳定的爬虫系统,解决登录、接口调用、反爬机制等难点;
优化数据采集流程,保障采集结果的完整性与实时性;
对采集数据进行清洗、存储和结构化处理,建立高可用数据接口;
与数据分析、产品团队合作,提供高质量的海外社交数据支持。

任职要求
本科及以上学历,计算机相关专业优先(qs前200的本科毕业);
3 年以上 Web 爬虫 / 数据采集 相关经验;
精通 Python,熟悉 Scrapy / Requests / Selenium / Playwright 等爬虫框架;
熟悉 代理池、分布式爬虫、反爬机制应对;
熟悉 MySQL / Redis / Kafka / Elasticsearch 等常见数据库与中间件;
有 海外社交平台(X / Twitter、Reddit、Telegram 等)爬虫经验 者优先;
注重代码规范,能独立解决复杂采集与反爬问题。

工作地:
上海/香港(可沟通)

附加信息:

  • 工作时间:周末双休
  • 上下班时间:10:00-19:00

工作地址

上海 - 静安区- 凯迪克大厦17楼查看地图

职位发布者:

拉勾安全提示
· 求职中如遇招聘方扣押证件、要求提供担保或收取财物、强迫入股或集资、收取不正当利益或其他违法情形,请立即举报
· 如遇岗位要求海外工作,请提高警惕,谨防诈骗
面试评价
【查看更多评价】
  • 半年前
    • 描述相符
    • 面试官
    • 公司环境
    面试效率高
    面试官很nice
    [面试过程]
    流程很顺利,每个环节没让多等,三轮技术面+hr+次日CEO电话面试。跟CEO电话过程大概四十分钟,对面试者提的问题也很耐心的解答。据hr说老板很大方,该谈的都谈了,不论结果如何,不错的公司。
    (17)
  • 评价人头像匿名
    半年前
    • 描述相符
    • 面试官
    • 公司环境
    面试官很nice
    面试效率高
    环境一般般
    [面试过程]
    面试挺顺利,就是地方有点南召,找了好久才找到。公司氛围很棒。
    企业回复(7)
    评价回复人头像
    2017-07-04
    华尔街见闻HR人事
    对于迷路的候选人,HR会提供一次无偿寻找你的服务~~
  • 半年前
    • 描述相符
    • 面试官
    • 公司环境
    面试官很nice
    [面试过程]
    面试官还是可以的,通过问的问题就知道是在踏踏实实做技术的程序员。不管有没有offer,起码来面试一次也有一些收获吧。
    (10)
上海阿牛信息科技有限公司

华尔街见闻

相似职位