职位描述： 1、 负责大数据平台的TOB产品化方向探索和预研，能在B端客户的需求基础上把控好产品化的整体方向； 2、 负责多个B端客户的大数据平台使用过程中问题解决、需求识别和收集、需求分析和排期落地工作； 3、 负责大数据平台某个或多个系统的架构管理工作，及时消除平台架构不合理的隐患点； 4、 对大数据平台前沿方向保持积极的探索心态，并能基于此参与优化公司大数据平台的发展方向。 技能要求： 1、本科及以上学历，3-5年大数据平台系统开发经验； 2、 掌握java语言，熟悉SpringBoot、Mybatis等常用开发框架，熟悉dubbo分布式服务框架； 3、 SQL语法基础扎实，熟练使用MySQL、Hive、Spark等，有一定的SQL调优经验； 4、 熟悉Hadoop/Kafka/Flink/Spark等大数据开源框架的使用和调优。

职位职责： 1、面向互联网金融风控及用户增长业务，打造领先的数据资产托管平台，通过在线数据分析、离线数据挖掘、实时数据特征、离线数据仓库等方式管理用户数据，建设覆盖互联网金融全场景的数据智能解决方案； 2、负责机器学习平台、模型推理平台，用户画像（特征）平台、知识图谱平台和分布式计算平台的构建和迭代，打造业界领先的存储、计算等分布式系统，为海量数据和大规模业务系统提供可靠的基础设施； 3、负责海量用户行为数据的挖掘，在分布式计算平台基础上，进行大规模画像特征和实时行为特征建设，构建大规模特征集市； 4、负责基于业务需求，以数据为驱动，研发和改进智能辅助决策平台，辅助业务场景的开展和优化； 5、负责大数据基础设施和平台的改进，解决大规模生产环境集群可用性和性能优化问题。 职位要求： 1、本科及以上学历，计算机/数学/物理等相关专业； 2、熟悉Java、Go、Scala、Python、C++等至少一门常用语言，有一定分布式计算框架或流式计算框架使用经验，对数据仓库建模有一定概念，对数据结构和算法设计有较为深刻的理解； 3、熟悉SpringMVC、SpringBoot、MySQL、Redis、Kafka、Spark、Flink、Map、Reduce等框架和中间件使用经验，对框架原理源码有一定研究，有一定大规模，高并发服务经验，有一定的系统性能调优经验，有一定的大数据任务优化经验； 4、对数据敏感，掌握量化分析方法，善于从数据中发现问题，提出假设并使用数据进行验证； 5、有数据挖掘、机器学习、自然语言处理、知识图谱实际项目经验者优先考虑。

工作职责: 1. 负责大数据消息服务如 Kafka 集群优化，运维、部署、管理； 1. 参与大数据基础服务如 Hadoop 、Spark 等集群运维、部署、管理与优化； 2. 负责大数据平台服务器的维护与管理，保证各集群服务器正常运行； 职位要求: 1. 熟悉 Java、Scala、Go 等一门主流语言，熟悉并发和网络编程，有良好的数据结构和算法功底； 2. 熟悉消息系统的原理和关键技术，熟悉 Kafka/Pulsar/RocketMQ 等消息产品的原理和实现，有开源社区贡献者优先； 3. 有分布式存储的使用和研发经验者优先； 4. 对云原生相关技术有一定的了解； 5. 了解大数据相关技术，如Hadoop，Spark，Hive，Flink等，有开发或者运维经验者优先； 6. 熟悉Linux常用命令； 7. 有技术热情和较强的学习能力，以及良好的沟通能力、抗压能力和团队协作能力；

职位描述 1、负责机器学习平台的设计和开发。 2、参与AI平台业务模型优化和运营； 3、分析并解决系统研发过程或实际使用中遇到的各类问题，保证系统研发、运行正常进行。 任职资格 1、有丰富的python开发经验，熟悉java开发语言，掌握多线程及高性能的设计与编码及性能调优，有高并发应用开发经验优先。 2、熟悉机器学习建模流程、常用的机器学习算法和深度学习算法及框架，如：XGB、Lgb、Sklearn、TensorFlow、Pytorh等； 3、熟悉Linux平台下常用命令操作、环境部署； 4、了解云原生相关体系，如：Docker、Kubernetes等； 5、了解缓存、消息、大数据存储相关技术，例如：mysql、redis、kafka、hive、Hadoop、spark、flink等； 6、能适应高强度工作，责任心强，工作积极主动，善于学习和交流，具有良好的团队合作精神。

工作职责 1. 负责或参与大数据平台的架构设计以及基础组件的调优、改造、升级； 2. 结合客户需求，负责和参与大数据产品的设计与研发； 3. 负责数据平台新技术的研究及应用落地。 任职要求 1. 计算机或相关专业，3年以上大数据相关开发经验； 2. 熟悉linux/UNIX shell、熟悉(python/shell)任意一种脚本语言、熟悉Java/Scala/C++任意一种开发语言； 3. 熟悉大数据基础平台技术的原理和内部机制，包括但不限于Hadoop、ClickHouse、Hbase、Doris等； 4. 有大规模集群调优及容器化经验优先。 5.对新技术充满热情，具有良好的学习能力、团队协作能力和沟通能力； 6.逻辑思维能力及快速持续的学习能力。

职位描述 1. 负责技术方案和架构设计，包含技术架构和数据架构； 2. 责大数据平台开发过程中的技术攻关和关键设计； 3. 负责数据产品建设，实时离线计算，探索智能数据场景落地； 4. 与业务、产品、研发等紧密合作，深度挖掘大数据应用需求，结合平台特点，制定数据架构； 任职要求 1、计算机或相关专业本科以上学历，3年以上工作经验; 2、具备扎实的Java语言编程基础，具备良好的编程习惯，优秀的面向对象思维，较强独立解决问题的能力；掌握Spring等常用的开发框架； 3、有Hadoop、Spark、Flink、ES、Kafka等框架开发经验者优先； 4、熟悉多线程编程和JVM性能调优，有高并发、高吞吐量服务开发经验者优先； 5、做事严谨踏实，责任心强；具有良好的沟通能力和团队意识； 6、机器学习模型开发经验者优先；

Java后端研发工程师（大数据平台） 工作职责： 1、负责贝壳大数据平台工具的开发和维护，包括数据集成、离线开发、实时开发、数据地图、数据服务等； 2、负责大数据框架优化和源码定制开发，解决面临的各种复杂问题和挑战 岗位要求： 1、熟悉JAVA体系架构，熟悉常见数据结构、多线程并发、JVM等，精通spring、spring boot、MyBatis等主流的开源框架 2、熟悉MySQL、Redis等数据库技术 ，Http等常见网络协议 ； 3、熟悉Hadoop生态圈技术，包括HDFS、MapReduce、HBase、Hive、Zookeeper等，熟悉主流实时处理技术，如Spark、Flink、kafka、pulsar，提交社区patch者优先 4、良好的思维习惯及沟通能力，具有较强的主动意识，乐于接受挑战 5、具有较强的学习能力和问题解决能力

工作职责： 1. 搭建存储海量金融数据的分布式数据仓库。 2. 搭建公司的大数据平台，包括：调度系统、数据监控、数据处理流程、平台权限管控等，实现高可靠、高效率、高扩展的金融数据处理。 3. 开发实时数据处理系统和平台，实现实时数据处理、传输的自动化流程。 4. 和其他同事一起设计开发不同业务数据的自动化处理流程。 5. 基于大数据平台开发相关衍生数据的计算模块和流程。 职位要求： 1.本科及以上学历，具有计算机、电子、自动化等相关专业背景,具有至少3年的相关工作经验。 2.对数据仓库体系架构有深刻的理解，能熟练进行数据系统的设计和开发。 3.熟悉大数据处理方法，熟练使用hadoop、hive、hbase、spark、flink等分布式应用工具。 4.有知名互联网公司的大数据平台建设经验和大数据开发经验，能够独立搭建数据仓库和数据平台。 5.有金融领域的大数据平台工作经验，有处理海量金融数据的能力。 6.具有Linux系统环境下的开发经验，具有编写shell脚本的能力，精通Python、R、Scala等开发语言。 7.熟练使用常见的数据库，例如：MySQL、PostgeSQL、MongoDb、Redis等。 8.具有ZeroMQ、RabbitMQ、Kafka等消息中间件的数据开发经验。 9.具有优秀的团队沟通和协作能力、责任心强，善于学习，有较强的自我驱动，具有独立分析并解决问题的能力。

岗位职责： 1. 负责大数据实时、离线、异构数据的同步和传输生态的研发，提供灵活高效的接入能力； 2. 负责大数据接入组件的性能、效率、稳定性分析与优化。 任职要求： 1. 熟悉Flume/DataX/Logkit/Kafka等大数据接入技术和相关组件，有1年以上大数据接入研发经验； 2. 具备扎实的计算机基础，熟悉分布式系统研发，有云原生技术经验优先； 3. 精通Java/Scala研发语言，具有良好的编程研发能力； 4. 能够深刻理解业务，善于利用技术实现相关业务价值；

岗位职责： 1、负责公司大数据平台(采集/加工/调度等)建设，承担相关服务、平台的研发、集成和运维工作，工作中主要使用python； 2、保障应用系统稳定可靠，熟练运用合适技术对复杂场景做出合理技术设计，保障和提升数据平台相关系统的性能和稳定性； 3、工作范围涉及包括但不限于：分布式任务调度系统，数据采集系统，数据加工处理平台，数据应用服务等领域。 任职要求： 1、本科及以上学历，具有2年以上大数据平台应用系统开发及运维经验； 2、拥有扎实的计算机基础和代码能力，具备良好的编码习惯，有较强的问题处理能力； 3、熟悉常见大数据处理/分析相关的工具/框架，如Hive、Spark、Presto、Kafka、Clickhouse、Superset等； 4、具备良好的理解能力，能快速理解业务背景，具有良好的团队沟通与协作能力。

职位描述： 1、 负责大数据平台的TOB产品化方向探索和预研，能在B端客户的需求基础上把控好产品化的整体方向； 2、 负责多个B端客户的大数据平台使用过程中问题解决、需求识别和收集、需求分析和排期落地工作； 3、 负责大数据平台某个或多个系统的架构管理工作，及时消除平台架构不合理的隐患点； 4、 对大数据平台前沿方向保持积极的探索心态，并能基于此参与优化公司大数据平台的发展方向。 技能要求： 1、本科及以上学历，5年以上工作经验，有3年以上大数据平台系统开发经验； 2、 掌握java语言，熟悉SpringBoot、Mybatis等常用开发框架，熟悉dubbo分布式服务框架； 3、 SQL语法基础扎实，熟练使用MySQL、Hive、Spark等，有一定的SQL调优经验； 4、 熟悉Hadoop/Kafka/Flink/Spark等大数据开源框架的使用和调优。

岗位职责： 1、负责业务数据体系建设，合理构建业务数仓建模、埋点体系、应用体系等； 2、负责大数据平台产品的规划、设计、开发跟踪与迭代改进； 3、负责业务数据治理，包含元数据管理、指标设计、埋点治理等工作； 4、负责参与产品部门数据分析工作，并通过产品化形式，提高数据分析的效率。 任职要求： 1、**本科及以上学历，计算机、数学、统计学等理工类专业优先； 2、有大数据平台设计或使用经验，了解数据埋点、数仓建模、数据治理等相关知识； 3、熟练掌握SQL语言，能完成复杂数据环境下的数据提取、分析、可视化； 4、勤奋细致，有责任心，对数据敏感，执行力强，能在压力下工作； 5、良好的沟通能力和团队合作精神，有一定的组织协调和推动能力。

职责描述： 1、负责公司大数据平台的运维保障工作，保障平台的正常运行和相应数据服务的稳定高效； 2、对接数据开发侧团队，主动优化和完善服务巡检、监控工具、脚本等，减少人工操作提高运维效率；负责数据平台的故障处置、推动性能优化。如平台产品技术问题，提交给平台产品技术组进行后台处理，并及时反馈. 3、负责数据平台二线运维支撑保障，响应运维/服务台一线请求：处置生产事件，跟踪问题处理； 4、定期组织团队人员开展大数据平台的技术知识积累和移交； 5、负责设计日常运维相关的自动化工具或系统，并完成相应需求收集和需求管理 ； 任职要求： 1. 具有1年以上金融行业数据类项目运维经验，熟悉保险业务操作与管理。具有大数据平台相关技术进行数据仓库、数据中台开发、维护、优化等项目经验的人员，或长期在类似的运维项目上承担运维工作优先； 2. 具备较强的数据开发分析能力，熟练掌握SQL等技能，熟练掌握大数据平台、UNIX、LUNIX和中间件的技能。有java或Python开发基础优先； 3. 具备较强的数据分析，问题分析，逻辑思维能力，团队协作能力，有良好的沟通能力和责任感，能够承担工作压力，独立分析和解决问题者优先； 4. 强烈的自驱力和责任感，面对复杂业务问题，可以从业务和技术多角度推进，最终达成目标。

岗位职责: 1.负责CDH大数据平台的安装和部署； 2.负责CDH大数据平台各组件的性能优化； 3.负责CDH大数据平台各组件的运行维护和状态监控； 4.负责新技术调研，并能在团队内进行推广应用。 任职资格: 1.理解大数据计算原理，精通Hadoop/Spark体系，了解大数据平台运营基本思路； 2.熟悉HDFS、HBASE、KUDU、SPARK、HIVE等hadoop核心组件，具有两年以上hadoop/Spark技术的运维经验； 3.理解MapReduce计算框架的思想，熟悉分布式计算模型； 4.至少精通一种大数据开发语言，如JAVA、scala等； 5.至少熟练使用一种脚本语言，如Shell、Python等； 6.热爱技术，工作认真、严谨，有团队精神。

职责描述： 1、负责大数据运维体系搭建及大数据平台各个组件的运维； 2、负责大数据平台及相关组件的部署和维护，保证其稳定运行； 3、负责完善大数据平台运维监控工作。 任职要求： 1、本科或本科以上学历，计算机相关专业，3年以上大数据系统运维经验； 2、熟悉Windows/Linux操作系统； 3、熟悉Hadoop、Hive、Hbase、Yarn、Spark等组件的原理及运维方式； 4、熟悉中间件工作原理，对Tomcat/Redis/Nginx/Kafka有一定了解，具备一定的操作能力； 5、至少熟悉Java/PHP/Python/Bash/Shell一种或多种语言，可独立编写维护及监控； 6、工作细致、善于思考，有很强的问题分析和推进解决的能力； 7、有强烈的责任心、良好的沟通协调能力、极强的业务推动能力，勇于接受挑战； 8、良好的英文听说读写交流能力，能使用英语作为工作语言。