岗位职责：
负责大数据相关任务的设计与开发
岗位要求：
1、大专及以上学历，3-5相关工作经验；
2、深刻理解大数据处理（流计算，分布式计算，分布式文件系统，分布式存储等）相关技术和实现方法；
3、熟悉Hadoop大数据生态圈技术，精通分布式存储Hdfs,Hive,Hbase,Es等，资源调度Yarn、Oozie、Azkaban等，计算框架 Spark,Prosto,Hive,Impala等；
3、熟悉sqoop,flume,kafka等，熟悉Nifi源码优先；
4、熟悉并掌握离线和实时数据处理流程，熟练使用mapreduce，Spark，Flink处理；
5、熟练掌握springmvc、springboot开发；
6、熟练掌握Java、Scala开发，有Python语言开发经验优先；
7、熟悉Linux系统；