工作职责:
1、基于hadoop/Spark/Flink平台架构设计、数据应用开发工作
2、XFDP大数据平台的框架搭建、设计及核心代码编写
3、基于Spark SQL/Spark/Flink流式计算的设计及开发
4、对海量数据进行收集、存储、计算、治理等
5、负责完成大数据平台数据开放门户的构建与设计、落地等
6、负责大数据平台的监控及优化，针对持续增长的数据提供相应的解决方案


任职资格:
1、两年以上大数据搭建或开发经验
2、扎实的Java/Scala语言基础，可开发高效可利用的代码，熟练代码管理工具
3、具有丰富的Hadoop/Spark/Flink开发经验
4、熟练HDFS/Hive/Hbase/Doris/Kafka/Flume等大数据相关组件,对分布式存储及计算有较深入了解
5、熟练编写Shell，SQL,具有SQL优化能力