"1，数据清洗入库：将日志数据解析入库到oracle、hive等数据库。
2，数据报表统计：利用Hadoop yarn Hive/Spark进行开发、存储、分布式计算应用的代码实现。
3，算法模型实现：对所给的算法模型进行开发实现。
4，数据实时接入开发与实现。
5，数据分析需求的模型开发和实现。" "1、计算机相关专业，本科以上学历，有较好的英文阅读能力；
2、3年以上Hadoop/Spark/Hive/Kafka/Flink开发经验，对分布式、并行计算理论有深刻理解;
3、熟悉hadoop,linux等环境，精通java/perl/python/Scala中至少一种语言;
4、熟悉主流数据库技术，如oracle、Sql server、mysql、hive等；
5、熟悉数据开发流程，了解日常作业的部署和调度；
6、有很好的服务意识、技术敏感性，抗压力强，沟通能力强，具备良好的学习能力和吃苦耐劳能力。"