岗位职责1、负责基于大数据平台的数据采集，数据应用的设计、开发、测试和上线。

2、负责大数据平台系统的部署、维护和性能优化。

3、参与数据中台规划、制定并完善开发规范、标准和流程。

4、参与基于大数据平台的新技术预研。

5、负责卡中心各业务板块经营专题分析及其他重点分析工作的开展及落地应用。

岗位要求1、3年以上工作经验，有基于大数据数据仓库的数据需求分析、设计、开发和优化经验。

2、精通SQL或HQL，熟悉SHELL/PYTHON/PERL至少一种脚本语言，且有JAVA开发能力优先。

3、精通至少一种数据仓库系统，如：GREENPLUM、POSGREQSQL、TERADATA、ORACEL、DB2等。

4、熟悉HIVE及HQL，了解MR/TEZ/SPARK原理，且有优化及定制开发能力优先。

5、熟悉Tableau、SmartBI等自助分析工具的使用。

6、熟悉kafka以及至少一种实时流处理框架如sparkStreaming、flink、storm等，有实时流处理项目经验优先。