大数据开发工程师20k-35k·14薪

廊坊经验3-5年硕士及以上大数据开发工程师
岗位所属职位类型
全职

  • 能源|矿产|环保
  • 大数据开发经验
新奥
分享到微信
微信扫一扫,用小程序打开分享
职位诱惑:

五险一金 双休 员工宿舍 免费工作餐

职位描述:

1、数据平台设计与开发:
负责核聚变实验数据平台的架构设计与实现,包括数据采集、存储、处理、分析和可视化全链路;设计并实现高效的实验数据存储方案,支持 PB 级别数据的高效写入与查询。
2、数据管道构建:
开发可靠的数据 ETL 流程,支持实验数据从采集到分析的全程自动化;构建支持实时和离线计算的数据管道,满足不同实验场景的分析需求。
3、数据计算与优化:
使用分布式计算框架(如 Flink、Spark 等)处理和分析海量实验数据;优化数据存储与计算性能,提升查询速度和系统稳定性。
4、系统监控与维护:
搭建监控和告警系统,确保数据平台的高可用性和稳定性;定期对系统进行性能评估和优化,支持扩展性和容灾能力。
5、团队协作与支持:
与科研团队紧密合作,理解核聚变实验数据的特性和需求,设计针对性的解决方案;为团队提供技术支持与指导,推动数据开发团队的技术能力提升。

任职要求:
1、计算机科学、数学、物理或相关专业硕士及以上学历,具备 3 年以上数据开发或大数据处理相关工作经验。
2、熟悉以下技术栈中的至少一种:
分布式计算框架:Flink、Spark、Hadoop 等;
数据库与存储:ClickHouse、PostgreSQL、HBase 或其他分布式数据库;消息队列:Kafka、RabbitMQ 等。
3、熟练掌握数据建模、ETL 流程开发,能够在复杂场景下设计高效的数据管道。
4、深入理解分布式系统原理,具备大规模数据处理与性能优化的经验。
5、熟悉 Linux 操作系统,熟练使用 Shell 脚本、Python 或 Java 进行开发。
6、较强的沟通能力,能够与科研人员、产品团队和开发团队高效协作。

附加信息:

  • 工作时间:周末双休

工作地址

廊坊 - 广阳区- 新奥智能大厦查看地图

职位发布者:

拉勾安全提示
· 求职中如遇招聘方扣押证件、要求提供担保或收取财物、强迫入股或集资、收取不正当利益或其他违法情形,请立即举报
· 如遇岗位要求海外工作,请提高警惕,谨防诈骗
面试评价
【查看更多评价】
该职位尚未收到面试评价
新奥科技发展有限公司

新奥

相似职位