岗位职责 作为大数据研发工程师，你将深度参与搜推业务链路的实时与离线数据处理体系建设，核心工作包括但不限于： •基于Flink/Spark 构建用户行为数据的实时(或近实时)采集、清洗、聚合与特征计算链路，实现用户兴趣标签、行为序列、实时偏好等画像特征的更新与存储； •设计高并发、低延迟的实时数据管道，对接搜索/推荐业务的实时请求，支撑个性化排序、精准召回等策略的实时反馈优化； •通过Redis/Elasticsearch/OpenSearch实现画像特征的实时存储与高效检索，保障下游业务（如前端展示、策略调用）的低延迟访问。 •负责离线数据仓库的开发与维护（使用Spark/MaxCompute），完成海量用户行为数据的ETL、数仓分层建模与指标计算； •基于阿里云Lindorm/MaxCompute/DataWorks等工具，优化数据存储成本与计算效率（如冷热数据分层、任务调度调优），支撑业务方的高效取数与分析需求； •针对搜推业务中的复杂场景（如跨域数据关联、实时+离线特征一致性、大规模稀疏特征处理），设计可扩展的技术方案并推动落地； 任职要求 •**本科及以上学历，计算机相关专业，大数据开发相关经验； •​​熟练掌握并使用​​（Flink，Spark Spark SQL/DataFrame、DataWorks调度等），有海量数据（TB级以上）的ETL与数仓开发经验； •熟悉消息队列（Kafka必备）、搜索引擎（Elasticsearch/OpenSearch加分）、缓存（Redis等）及云原生大数据组件（阿里云Lindorm/MaxCompute/DataWorks优先）的原理与应用； •具备扎实的编码能力（Java/SQL至少一种），熟悉Linux环境与常用脚本工具，有分布式系统调优经验（如JVM调优、任务并行度优化等）。 •具有良好的沟通能力和组织协调能 ​​加分项：​​ •有实时画像/风控平台建设经验，熟悉用户行为特征工程、规则引擎或模型推理链路集成； •理解搜索/推荐业务逻辑，了解排序策略、召回链路与数据特征的关联性； •对数据敏感，具备较强的业务抽象能力与问题排查能力（如通过日志/指标定位数据延迟、丢失或不一致问题）。

工作内容： 1、根据业务需求进行数据业务开发，分析后台已有数据，理解数据维度和含义，并根据计算公式进行数据应用开发及分析。 2、参与数据治理工作，根据目前已有数据，解析数据依赖，编排数据拓扑结构，数据元数据结构优化；提升数据易用性及数据质量，统一数据口径，制定数据标准化规则。 3、对数据平台和执行引擎遇到问题时有一定的解决能力，负责 ETL 流程的优化及解决 ETL 相关技术问题，对数据稳定性和性能有一定的优化能力。 4、支撑采购供应链业务域的搜索、用户画像、推荐系统等业务的数据需求，确保输出时效性与准确性。 任职要求： 1、本科及以上学历，计算机相关专业，3年以上工作经验； 2、精通Python语言，能够使用python写数据分析算法； 3、精通FineBI、FineReport的开发、维护技术（有帆软高级工程师认证的优先）能够独立完成BI项目的开发； 4、精通数仓及BI系统业务建设流程； 5、熟练掌握SQL,能够熟练编写复杂的查询语句、存储过程、函数等,对常见关系型数据库(如Oracle、MySQL等)的性能优化有一定经验； 6、有良好的沟通和业务流程描述能力，书面表达能力，高度自驱。

管理过团队的来 【岗位职责】 1、主导公司数据平台的搭建，核心负责企业级数据仓库的建设，包括数据分层、数据清洗、数据库和表结构的设计和数据分析，以及数据开发的落地实施； 2、建立数据质量管理体系，开发分析型系统的数据报表，完成从数据建模到数据计算的开发工作； 3、数据资产化的落地，构建数据服务的API设计和开发，支持业务系统的数据对接和调用； 4、研发管理与项目交付：统筹数据项目的研发工作，确保项目按时交付、高质量上线； 5、对AI及算法有兴趣，做过AI模型搭建、调试的尝试，以及落地应用； 【经验要求】 1. 计算机、数学相关专业本科以上学历（硕士优先），在大平台数据开发经验优先； 2. 有过完整的数据体系搭建的经验，包括数据治理、指标体系搭建、数据挖掘和模型管理等，对数据质量、数据资产、元数据管理等有实战经验； 3. 对机器学习、自然语言处理等AI核心技术有一定了解，对AI模型在垂直行业的应用有关注，有尝试的经验； 4. 有一定团队管理经验的优先，在跨团队协作、资源调配和技术问题协同解决方面有实际成果；

岗位职责 1、监管数据映射脚本开发，监管数据需求分析及数据映射关系分析。 2、熟练掌握SQL语言，熟悉shell脚本编写。 任职要求 1、本科及以上，计算机/数学类相关专业，3年以上相关工作经验。 2、熟悉银行业务，包括但不限于存贷款业务，投融资业务，票据业务，同业业务。熟悉监管制度，包括但不限于1104，EAST，人行大集中，金融基础数据，一表通。 3、有良好的沟通交流能力，善于理解业务人员的问题，有对接业务人员的经验，有开发经验。

公司介绍： 我们是一家专注于金融科技服务的创新公司，致力于通过技术手段推动金融行业的进步。我们拥有优秀的团队，注重员工发展和企业文化建设。 职位详情： 1. 职位职责： * 负责银行数据仓库的架构设计、开发和维护工作； * 负责数据平台的优化和改进，提高数据质量和性能； * 参与数据治理和数据安全相关的工作。 2. 任职要求： * 本科及以上学历，计算机、数学或相关专业； * 3-5年相关工作经验，有银行背景优先； * 熟练掌握数据结构和算法，熟悉至少一种主流数据库； * 具备出色的架构设计能力，能够独立完成复杂系统的设计； * 具备良好的沟通能力和团队协作精神； * 对数据敏感，具备较强的分析问题和解决问题的能力。 3. 福利待遇： * 五险一金，带薪年假，节日福利，定期团建活动； * 优秀的培训体系和职业发展机会； * 舒适的工作环境和便利的交通。 4. 工作地点：杭州市拱墅区（需要能接受远程面试） 5. 简历请发送至邮箱：****************（注意在邮件主题中注明应聘职位） 以上职位是我们正在招聘的数据开发工程师，希望有相关工作经验和符合我们要求的人才加入我们的团队。我们期待着你的加入，共同推动公司的技术进步。 公司文化：我们重视创新、协作和团队精神，鼓励员工持续学习和进步。我们的团队由一群热爱工作、充满激情的人组成，我们相信只有优秀的团队才能创造出卓越的成果。

1.熟悉Hadoop，有过大数据开发经验 2.熟悉大数据开源技术，对Spark,flink,Hive, Hdfs等分布式计算存储引擎有实战经验 3.**本科，双证齐全

工作内容： 1.负责hadoop基础技术规划，编制相关规范文档； 2.负责Hadoop数据应用相关的数据存储、查询、计算、元数据管理的架构设计与实现； 3.负责hadoop的实际规划建设，包括环境与框架的规划搭建及部分核心编码工作； 4.负责hadoop相关技术发展方向的预研； 5.独立负责具体功能开发与实现、性能优化，保证系统健壮稳定及临时性数据处理工作的支持； 6.负责数据应用相关的数据存储、查询、计算、元数据管理等方面的架构设计。 岗位要求： 1.1年以上大数据开发经验，熟悉分布式的设计与应用。 2.熟悉hadoop大数据平台框架，包括不限于hadoop、hive、hbase等大数据生态平台组件的部署升级与调优。 3.熟悉hadoop、spark、flink、hbease、es等相关计算机存储框架的底层理论，并能应用至实际开发当中。 4.熟悉至少一款ETL工具，例如kettle、logstash等。 5.熟悉关系型及非关系型数据库的使用及优化，包括但不限于Oracle、PG、hive、clickhouse等。 6.熟悉各类大数据处理组件，sqoop、flume、kafka、azkaban等。 7.根据计划完成模块的编码开发工作，保证开发质量。 8.有良好的沟通能力，积极为项目建设提供建设性意见。 9.本科及以上学历，计算机相关专业，有银行工作、财务会计、管理会计业务经验优先。

岗位职责： 1.支持Hadoop集群底座的运维故障分析、解决、性能优化；大数据集相关组件主要包括：Yarn、HDFS、ZooKeeper、Storm、Kafka、Hbase、Hive、Spark、Kerberos、Spark、Flink、Flume、MySQL等组件运维； 2.开发数据采集、清洗、分析、挖掘及可视化功能，需熟悉ES、milvus、pgsql等。 3.熟悉国产数据库，包括doris等； 4.配合开展HDFS存储、Hive元数据治理优化，建立并完善存储治理方案； 5.配合开展Hive、Spark作业优化，对业务侧提出优化建议。如：作业小文件问题、数据倾斜治理方案等； 6.提出集群优化建设方案，配合建设和优化大规模分布式集群的自动化运维、监控等工具和管理平台。 任职要求： 1.本科及以上学历，通信/计算机等相关专业，具有良好的学习能力、沟通能力、团队合作能力及一定的抗压能力； 2.熟悉Hadoop、Hive、Hbase、Spark等开源项目，理解组件架构及原理； 3.对大数据运维开发有浓厚兴趣，熟悉Apache Hadoop部署、性能调优； 4.能阅读/理解Hadoop等相关开源组件源码； 5.对HQL、SparkSQL等有较深入的研究，能解决实际业务性能问题； 6.熟练掌握LDAP、Kerberos等安全认证体系； 7.熟练掌握Linux命令与工具进行问题定位，熟悉常规的互联网技术架构； 8.具备一定的Java开发能力； 9.有信控平台开发经验者优先录取。

1. 熟悉大数据云平台经验，再加Java开发 Java基础扎实，熟练掌握多线程编程，熟悉JVM，以及常规性能优化。 2. 熟悉spring，springboot，springcloud，nacos，mybatis，mybatis-plus等常⻅开源框架。 3. 熟悉redis，RocketMQ等常见中间件。 4. 熟练使用MySQL数据库，良好的数据库设计，SQL编写，索引性能分析能力。 5. 熟练掌握linux系统的使用。 6. 熟练掌握EKL系统的使用。 7. 有良好的逻辑思维能力，沟通能力，有责任心能独立完成需求。 1、本3专4，计算机/互联网/通信相关专业 2.熟悉java开发常用框架组件，能熟练运用到具体项目中 3.配合项目完成研发计划，有独立完成需求的能力

职位描述： 1、基础组件、基础设施的二次开发、L2支撑、交付； 2、围绕大数据组件服务平台开发，围绕组件进行串联部署、功能组合/抽象，给上层数据开发人员提供组件级平台服务 3、对Hadoop、Hbase、Hive、Flink等组件/系统进行持续研究、开发和交付，满足部署、集成、扩展、监控、高可用等生产需求； 4、根据理论与技术研究、产品对标和相关需求，持续产品规划与迭代； 5、根据现场信息搜集，分析、定位和解决现场问题，承担L3支撑 职位要求： 1、计算机相关专业，本科及以上学历； 2、3年及以上hadoop生态的基础设施开发经验，熟悉国内主流大数据平台； 3、熟练掌握Java，熟悉Linux开发环境及常用工具； 4、以下优先： (1)985/211（必备条件，不符合请勿投递，谢谢） (2)深入阅读过相关组件内核源代码 (3)深入理解分布式资源调度系统技术及原理 (4)深入理解linux系统能够独立排查及解决操作系统层问题 (5)有数据仓库经验者 (6)有运维经历者 (7)有C/C++开发经验 (8)有论文阅读、理论研究爱好与能力

岗位职责： 1.支持Hadoop集群底座的运维故障分析、解决、性能优化；大数据集相关组件主要包括：Yarn、HDFS、ZooKeeper、Storm、Kafka、Hbase、Hive、Spark、Kerberos、Spark、Flink、Flume、MySQL等组件运维； 2.开发数据采集、清洗、分析、挖掘及可视化功能，需熟悉ES、milvus、pgsql等。 3.熟悉国产数据库，包括doris等； 4.配合开展HDFS存储、Hive元数据治理优化，建立并完善存储治理方案； 5.配合开展Hive、Spark作业优化，对业务侧提出优化建议。如：作业小文件问题、数据倾斜治理方案等； 6.提出集群优化建设方案，配合建设和优化大规模分布式集群的自动化运维、监控等工具和管理平台。 任职要求： 1.***本科及以上学历，通信/计算机等相关专业，具有良好的学习能力、沟通能力、团队合作能力及一定的抗压能力； 2.熟悉Hadoop、Hive、Hbase、Spark等开源项目，理解组件架构及原理； 3.对大数据运维开发有浓厚兴趣，熟悉Apache Hadoop部署、性能调优； 4.能阅读/理解Hadoop等相关开源组件源码； 5.对HQL、SparkSQL等有较深入的研究，能解决实际业务性能问题； 6.熟练掌握LDAP、Kerberos等安全认证体系； 7.熟练掌握Linux命令与工具进行问题定位，熟悉常规的互联网技术架构； 8.具备一定的Java开发能力； 9.有信控平台开发经验者优先录取。

职位职责： 1、负责内容质量业务相关数据产品的技术架构设计和实现； 2、负责内容质量业务相关数据产品的功能迭代和性能优化，提高效率，优化流程； 3、背靠数据中台完善的数据体系，依托于集团平台整体技术架构完成对内容质量业务数据智能化产品的构建。 职位要求： 1、熟悉互联网产品和服务的开发过程，熟悉后端技术架构，具备良好的系统设计能力，有中长期的产品/技术视野； 2、熟悉Java/Go技术栈，了解微服务框架、容器、服务治理等相关技术； 3、有大数据开发、LLM开发经验者优先、了解查询引擎（如Clickhouse、Redis、Doris、ES等），对实时和离线数据仓库有一定的认知能力； 4、具备优秀的技术与业务结合能力。

职位职责： 1、为大规模推荐系统设计和实现合理的离线/实时数据架构； 2、设计和实现灵活可扩展、稳定、高性能的存储系统和计算模型； 3、生产系统的Trouble-shoting，设计和实现必要的机制和工具保障生产系统整体运行的稳定性； 4、打造业界领先的离在线存储、批式流式计算框架等分布式系统，为海量数据和大规模业务系统提供可靠的基础设施。 职位要求： 1、熟悉一个大数据领域的开源框架，Hadoop/Hive/Flink/FlinkSQL/Spark/Kafka/Hbase/Redis rocksdb/Elasticsearch/Parquet； 2、熟悉Java、C++等编程语言; 3、出色的编码和Trouble-shoting能力； 4、乐于挑战没有明显答案的问题，对新技术有强烈的学习热情; 5、有PB级别数据处理经验加分; 6、对某一大数据框架有原理/源码级别理解的加分。

职位职责： 团队介绍：国际化内容安全平台团队致力于为字节跳动国际化产品的用户维护安全可信赖环境，通过开发、迭代机器学习模型和信息系统以更早、更快发掘风险、监控风险、响应紧急事件，以人工智能技术支持业务发展，力求更高效、更敏捷、更全能地维护站内生态安全。 1、负责国际化内容安全平台中数据产品平台的服务端开发； 2、负责数据平台的架构设计、技术方案设计和需求开发； 3、根据业务发展需求，设计数据驱动的解决方案； 4、与产品经理、前端开发人员、数据仓库开发人员等角色紧密合作，实现共同目标。 职位要求： 1、计算机、通信和电子信息科学等相关专业； 2、有3年以上服务端开发经验，有业务安全平台、通用技术平台设计建设经验；英语听说读写流利；有个人技术产品、开源作品或活跃的开源社区贡献者优先； 3、熟悉Golang/Python/Java中的两种编程语言，熟悉多种大数据处理/分析相关工具/框架，例如Hadoop、Mapreduce、Hive、Storm、Spark、Kylin、Scribe、Kafka、Hbase、Canal、Sqoop等； 4、积极乐观，责任心强，工作认真细致，具备较强的编程能力和快速解决问题的能力，具备良好的服务意识和跨团队沟通与协作能力。

职位职责： 1、负责飞书产品线SaaS应用&私有化部署的离线&实时数据仓库构建； 2、负责维度模型的设计和大数据开发，解决P级数据任务性能优化、数据监控等技术问题； 3、负责构建各业务线功能、用户、推荐、搜索等主题，打造一站式数据驾驶舱系统； 4、负责全产品线数据治理，提升数据资产质量。 职位要求： 1、计算机、数学相关专业本科及以上学历，2年以上大数据开发工作经验； 2、深入理解常用的维度建模理论，可独立把控数据仓库的各层级设计，有OLAP分析应用经验；有数据挖掘、机器学习、推荐相关经验优先； 3、熟练掌握HSQL，熟悉Spark/Hive/Flink分布式计算框架，熟悉大数据的离线和实时处理，可以进行海量数据模型的设计、开发； 4、有产品意识，主动思考基于业务场景下的数据体系建设，而不单单只会做执行； 5、工作认真、负责，具备良好的合作精神和问题分析能力，钻研技术克服困难，勇于挑战。