数据采集工程师15k-25k

杭州经验1-3年本科及以上自动化工程师
岗位所属职位类型
全职

  • IT技术服务|咨询
  • 电商平台
搜道
分享到微信
微信扫一扫,用小程序打开分享
职位诱惑:

五险一金,带薪年假,生日福利,周年福利

职位描述:


岗位职责:
1、负责企业各类数据采集,进行多平台信息的采集和分析;
2、建立完整的数据获取、解析、入库和监控流程,优化系统瓶颈,不断迭代完善;
3、有验证码破解、反扒、分布式爬虫架构经验;
4、研究优化算法,提升爬虫系统的稳定性和可扩展性;
5、快速支撑业务所需数据落地;
岗位要求:
1、全日制本科以上学历,计算机或其他相关专业;
2、熟练掌握Python/Java语言,熟练掌握JS语言;
3、精通数据采集技术,熟悉HttpClient/jsoup/XPath/CSS/正则表达式/验证码加密处理/代理池等网页信息抽取技术,熟悉HTTP底层协议;
4、精通各种反爬技术,并能够通过多种应对策略(如代理池、模拟登录、验证码与滑块的处理、浏览器渲染等)来保证数据的持续交付;
5、熟悉网页数据采集原理及技术,熟悉基于Cookie的网站登录原理; 6、熟悉数据清洗、去重、入库等技术,具有数据挖掘、机器学习背景者优先;
7、良好的编码能力,工作认真细致踏实,逻辑思维缜密,善于分析,以解决技术难题为乐趣,具备良好的沟通交流能力;

附加信息:

  • 工作时间:大小周
  • 上下班时间:09:00-18:00

工作地址

杭州 - 余杭区 - 金家渡- 莫干山路1418-50号8幢5楼查看地图

职位发布者:

拉勾安全提示
· 求职中如遇招聘方扣押证件、要求提供担保或收取财物、强迫入股或集资、收取不正当利益或其他违法情形,请立即举报
· 如遇岗位要求海外工作,请提高警惕,谨防诈骗
面试评价
【查看更多评价】
  • 半年前
    • 描述相符
    • 面试官
    • 公司环境
    面试效率高
    [面试过程]
    虽然没有去 但是hr小姐姐人很好 希望有机会可以合作
    (0)
  • 半年前
    • 描述相符
    • 面试官
    • 公司环境
    薪资与描述不符
    [面试过程]
    无人接待,电话没接,
    (0)
  • 半年前
    • 描述相符
    • 面试官
    • 公司环境
    面试官是大牛
    面试官很nice
    面试效率高
    [面试过程]
    很随和,面试过程的气氛很
    (0)
浙江搜道网络技术有限公司

搜道

相似职位