岗位职责：

1、参与大数据平台研发，协助部门经理进行大数据产品深化；

2、负责hadoop大数据平台架构及组件的优化、BI页面配置、数据仓库的设计和开发；

3、负责公司大数据平台数据模型的设计及开发，包括数据需求的沟通、离线/实时模型设计与开发、质量管理监控等工作;

4、负责数据仓库ETL流程的开发、优化及解决ETL相关技术问题；

5、参与数据展示系统，部分基于大数据综合库的Java产品开发；

6、配合部门经理完成其他工作。

任职要求：

1、计算机软件、数据分析、大数据等相关专业，应届硕士优先，本科5年及以上大数据开发经验；

2、熟悉流式计算，flink structrured streaming，kafka,clickhouse等

3、熟悉CDH和Hadoop大数据生态组件HDFS、Kudu、HBase、Yarn、Hive、Kafka等；

4、熟练使用Java/Scala/Shell等开发语言,熟悉Linux相关操作；

5、熟练掌握Spark、Flink任意一种计算框架；

6、熟练使用DataX、Sqoop、Flume等数据同步与对接工具；

7、熟悉ETL流程、数据仓库（实时+离线数仓）或数据中台建设；

8、具备很强的学习能力，高度责任心和敬业精神，良好的团队合作精神。

9、可接受出差/驻场