工作内容：
①故障处理-对客户多套Hadoop集群提供运维生产保障，处理HDFS、HIVE、HBASE、KAFKA等技术栈出现的异常故障；
②集群建设-参与2000台以上规模Hadoop集群建设，制定多租户权限隔离、资源隔离等方案；
③集群优化-对重点故障事件进行持续优化及跟踪，参与Hadoop集群架构级优化；
④创新预研-运维自动化能力提升，Hadoop相关新技术预研；


工作要求：
①在Hadoop领域参与具体运维工作两年及以上，集群规模大于200台优先，多租户集群优先；
②对HDFS、HBASE、YARN等模块的底层原理掌握，熟练掌握HDFS读写流程、HBASE读写流程、YARN资源分配过程等，理解各模块的高可用机制；
③有过实际HDFS、HBASE、HIVE等任务性能调优经验，对HIVE执行计划、HIVE权限隔离机制、HDFS-RBF联邦机制、HBASE-Bulkload等特性及功能有一定了解；
④熟练linux系统环境，有一定SQL开发能力，对python/shell/java至少一门语言有两年以上使用经验，能独立进行运维脚本开发；
⑤对Spark、flink等流处理计算引擎有过相关维护经验优先；