岗位职责 ： 1、数据仓库和数据处理‌：负责大数据平台的数据仓库、数据治理和数据模型的设计与开发工作。进行日常数据报表开发，理解业务需求，发挥数据价值‌。 2‌、数据服务开发‌：负责离线和实时数据服务的设计、开发、性能调优和效果优化。构建和维护数据管道，处理ETL过程，确保数据质量和准确性‌。 3、技术研究和应用‌：参与相关项目的数据需求的实现，设计和编码工作。参与开发过程中相关技术的研究和验证‌。 ‌4、平台运维和质量管理‌：负责大数据平台的数据及相关的应用开发、调优及维护。完成日常数据质量的监控，参与大数据平台的日常运维工作‌。 5、针对数据一致性、准确性、及时性，制定数据管理与治理机制，提升数据易用性、可用性及稳定性； 任职要求 ： 1、本科及以上学历，计算机相关专业，3-5年以上数据开发经验； 2、具备至少一个完整的大数据平台和BI系统实施经验，熟知平台建设各环节工作，包括数据采集、数据落地、仓库建设、数据平台搭建、数据应用产品开发 3、熟悉基于推荐系统的数据仓库建设方法论,有数仓模型设计及ETL开发经验；有数据仓库分层架构设定经验者优先; 4、熟悉Hadoop生态相关技术,如Hive、HDFS、Impala、Spark、Presto、Flink、Hudi、Elasticsearch、HBase、Druid、Kylin等,有基于分布式数据存储与计算平台应用开发经验,有较为系统的海量数据性能处理经验； 5、熟悉java、scala、python等语言，熟悉微服务，分布式架构，熟悉springcloud,springboot等技术开发； 6、熟悉数据仓库原理，有离线数仓、实时计算、数据挖掘、ETL、用户画像、数据可视化等设计与开发经验； 7、熟悉MySQL、PostgreSQL、NoSQL等数据库中至少一种数据中心建设方案，可以进行产品的独立部署、高可用架构和性能优化，熟悉开源社区解决方案； 8、熟悉阿里云大数据组件E-MapReduce、Dataworks、MaxCompute和国际AWS的EMR相关数据产品等，市场常见BI产品（superset、FineBI、神策数据）等相关组件者优先； 9、较强的学习能力和技术钻研能力、有自我驱动意识，对数据采集、数据治理、数据开发、数据分析、数据建模、算法等有深刻认识和实战经验。 期待您的加入哟，我们为您准备丰厚福利待遇： 【法定福利】：公司按国家规定购买五险一金+商业保险（员工本人及子女商业保险）+带薪年假； 【节日关怀】：节日福利礼品，以及节日礼金； 【公司福利】： 机场及高铁的贵宾服务（龙腾卡权益）+年度员工健康体检+平安360服务（在线问诊、VIP挂号及重疾紧急入院服务）+年度2次免费洁牙服务 公司提供咖啡、零食、下午茶 员工活动、旅游及团建，不定期举办聚餐、唱K、电竞赛、篮球赛、拓展、旅游、生日Party等 【学习与培训】：助力职业发展与提升，内外训双引擎发力助你高速发展 【晋升机会】：公司设立良好的晋升机制和广阔的发展空间。

岗位职责 作为大数据研发工程师，你将深度参与搜推业务链路的实时与离线数据处理体系建设，核心工作包括但不限于： •基于Flink/Spark 构建用户行为数据的实时(或近实时)采集、清洗、聚合与特征计算链路，实现用户兴趣标签、行为序列、实时偏好等画像特征的更新与存储； •设计高并发、低延迟的实时数据管道，对接搜索/推荐业务的实时请求，支撑个性化排序、精准召回等策略的实时反馈优化； •通过Redis/Elasticsearch/OpenSearch实现画像特征的实时存储与高效检索，保障下游业务（如前端展示、策略调用）的低延迟访问。 •负责离线数据仓库的开发与维护（使用Spark/MaxCompute），完成海量用户行为数据的ETL、数仓分层建模与指标计算； •基于阿里云Lindorm/MaxCompute/DataWorks等工具，优化数据存储成本与计算效率（如冷热数据分层、任务调度调优），支撑业务方的高效取数与分析需求； •针对搜推业务中的复杂场景（如跨域数据关联、实时+离线特征一致性、大规模稀疏特征处理），设计可扩展的技术方案并推动落地； 任职要求 •**本科及以上学历，计算机相关专业，大数据开发相关经验； •​​熟练掌握并使用​​（Flink，Spark Spark SQL/DataFrame、DataWorks调度等），有海量数据（TB级以上）的ETL与数仓开发经验； •熟悉消息队列（Kafka必备）、搜索引擎（Elasticsearch/OpenSearch加分）、缓存（Redis等）及云原生大数据组件（阿里云Lindorm/MaxCompute/DataWorks优先）的原理与应用； •具备扎实的编码能力（Java/SQL至少一种），熟悉Linux环境与常用脚本工具，有分布式系统调优经验（如JVM调优、任务并行度优化等）。 •具有良好的沟通能力和组织协调能 ​​加分项：​​ •有实时画像/风控平台建设经验，熟悉用户行为特征工程、规则引擎或模型推理链路集成； •理解搜索/推荐业务逻辑，了解排序策略、召回链路与数据特征的关联性； •对数据敏感，具备较强的业务抽象能力与问题排查能力（如通过日志/指标定位数据延迟、丢失或不一致问题）。

团队背景 隶属于6767搜推工程策略组6767，是公司搜索与推荐业务的核心技术支撑团队。团队技术氛围开放，鼓励创新实践，团队成员具备丰富的分布式系统与海量数据处理经验。 岗位职责 作为大数据研发工程师，你将深度参与搜推业务链路的实时与离线数据处理体系建设，核心工作包括但不限于： 61基于Flink/Spark 构建用户行为数据的实时(或近实时)采集、清洗、聚合与特征计算链路，实现用户兴趣标签、行为序列、实时偏好等画像特征的更新与存储； 61设计高并发、低延迟的实时数据管道，对接搜索/推荐业务的实时请求，支撑个性化排序、精准召回等策略的实时反馈优化； 61通过Redis/Elasticsearch/OpenSearch实现画像特征的实时存储与高效检索，保障下游业务（如前端展示、策略调用）的低延迟访问。 61负责离线数据仓库的开发与维护（使用Spark/MaxCompute），完成海量用户行为数据的ETL、数仓分层建模与指标计算； 61基于阿里云Lindorm/MaxCompute/DataWorks等工具，优化数据存储成本与计算效率（如冷热数据分层、任务调度调优），支撑业务方的高效取数与分析需求； 61针对搜推业务中的复杂场景（如跨域数据关联、实时+离线特征一致性、大规模稀疏特征处理），设计可扩展的技术方案并推动落地； 任职要求 61**本科及以上学历，计算机相关专业，大数据开发相关经验； 616767熟练掌握并使用6767（Flink，Spark Spark SQL/DataFrame、DataWorks调度等），有海量数据（TB级以上）的ETL与数仓开发经验； 61熟悉消息队列（Kafka必备）、搜索引擎（Elasticsearch/OpenSearch加分）、缓存（Redis等）及云原生大数据组件（阿里云Lindorm/MaxCompute/DataWorks优先）的原理与应用； 61具备扎实的编码能力（Java/SQL至少一种），熟悉Linux环境与常用脚本工具，有分布式系统调优经验（如JVM调优、任务并行度优化等）。 61具有良好的沟通能力和组织协调能 6767加分项：6767 61有实时画像/风控平台建设经验，熟悉用户行为特征工程、规则引擎或模型推理链路集成； 61理解搜索/推荐业务逻辑，了解排序策略、召回链路与数据特征的关联性； 61对数据敏感，具备较强的业务抽象能力与问题排查能力（如通过日志/指标定位数据延迟、丢失或不一致问题）。

工作内容 职位描述： 1. 参与数据仓库规划、架构及研发，包括离线、实时的数据模型规划，建设PB级的数据集市和数据平台。 2. 负责数据模型的规划、架构、开发以及海量数据下的性能调优，复杂业务场景下的需求交付。 3. 参与平台数据治理相关工作，负责数据质量、数据一致性及稳定性保障等建设。 4. 深入业务，与业务团队紧密合作，理解并合理抽象业务需求，发掘数据价值，以数据驱动业务不断发展。 5. 关注行业技术趋势，引入新技术和工具，持续优化大数据处理流程与性能，提升业务的数据处理效率和价值产出。 岗位要求 任职要求： 1. 本科及以上学历，计算机、软件工程、数据分析或相关专业出身，2-5年大数据开发经验。 2. 掌握Java, Python等至少一门语言，熟悉常用数据结构与算法。 3. 熟悉大数据生态技术栈，具备较丰富的Hadoop，Hive，Spark，Flink等开发经验。 4. 精通数据仓库理论体系，对分层设计、维度建模等有深刻的认识和实战经验，熟悉不同建模方法的优劣。 5. 积极主动贴近业务，有良好的沟通协调能力，数据敏感度高，能够快速理解业务模型及数据模型，从业务角度出发分析和解决数据问题。 6. 具备优秀的问题解决能力和团队协作精神，对大数据技术充满兴趣，学习能力和自我驱动力强 7. 有数据中台建设经验优先。有数据分析能力、指标体系搭建或BI相关经验优先。有互联网工作经验优先。 8. 加分项：英文沟通表达、云平台（如阿里云、AWS、Google Cloud）经验。

岗位职责： 1.负责ETL相关开发工作，深度参与数据仓库的建设与优化，保障数据存储的高效性与稳定性，支撑公司战略级数据项目的落地。 2.主导复杂数据处理流程的开发与优化，基于 Python 编写高性能的数据处理脚本，结合 spark、pandas、duckdb等进行大规模数据清洗、转换与分析，实现数据挖掘与机器学习模型开发，推动数据价值的深度挖掘。 3.设计和维护基于 Airflow 的工作流调度系统，实现数据处理任务的自动化调度与监控，确保数据处理任务按时、准确执行，提升数据开发与运维效率。 4.与业务部门紧密协作，深入理解业务需求，将业务逻辑转化为数据解决方案，通过数据驱动业务决策，助力业务增长。 5.研究大数据领域的前沿技术，持续优化数据开发技术栈与流程。 任职资格： 1.具备 3 年及以上大数据开发相关工作经验，拥有丰富的大数据项目实战经验，能够独立承担复杂数据开发任务。 2.熟练掌握 Python 编程，具备基于 Python 的大数据开发工作经验，能够运用 Python 进行高效的数据处理与算法实现。 3.熟悉数仓建设方法论   1)熟悉etl分层建设方法   2）熟悉主题建设方法，能独立抽象主题，建设主题，并且物理化和性能调优   3）熟悉常用的BI系统建设方法，理解实现原理，理解各个工具使用场景 4.精通大数据开发相关技术栈，包括但不限于 Hadoop、Spark、Hive 等，能够熟练运用这些技术进行数据处理与分析。 5.熟练掌握 Airflow，能够基于 Airflow 进行工作流设计、调度与监控；熟练使用相关技术进行数据处理与分析并能够运用其实现常见的数据挖掘与机器学习算法。 6.熟练掌握sql和调优。 7.熟练掌握python。 加分项 1.具备统计学、数学建模等相关知识，能够运用统计方法进行数据分析与模型构建。 2.有分布式系统开发、数据可视化开发经验者优先。 薪资待遇 ****，我们提供具有竞争力的薪酬体系与广阔的职业发展空间，期待优秀的你加入！

职位职责： 1、为大规模推荐系统设计和实现合理的离线/实时数据架构； 2、设计和实现灵活可扩展、稳定、高性能的存储系统和计算模型； 3、生产系统的Trouble-shoting，设计和实现必要的机制和工具保障生产系统整体运行的稳定性； 4、打造业界领先的离在线存储、批式流式计算框架等分布式系统，为海量数据和大规模业务系统提供可靠的基础设施。 职位要求： 1、熟悉一个大数据领域的开源框架，Hadoop/Hive/Flink/FlinkSQL/Spark/Kafka/Hbase/Redis rocksdb/Elasticsearch/Parquet； 2、熟悉Java、C++等编程语言; 3、出色的编码和Trouble-shoting能力； 4、乐于挑战没有明显答案的问题，对新技术有强烈的学习热情; 5、有PB级别数据处理经验加分; 6、对某一大数据框架有原理/源码级别理解的加分。

【岗位职责】 1、负责基于hive、spark、flink技术的大数据平台需求分析、设计及开发工作； 2、负责基于datax、HQL、传统ETL 或基于spark、flink的大数据平台数据抽取、清洗、转换、加工等入仓的开发，优化大数据平台跑批作业； 3、负责使用Dolphinscheduler（海豚调度）批量配置跑批调度任务及调度优化工作； 4、负责使用flink采集并加工kafka、binlog等数据源。 【岗位要求】 1、能熟练使用大数据基础组件，不限于hdfs/kudu、hive、impala、yarn、Tez/spark、flink、hbase、sqoop、flume、datax、elasticsearch、kafka等，熟悉相关架构和原理，有一定的组件性能调优能力； 2、有CDH/CDP平台使用经验，熟悉基于Cloudera Manager的平台使用管理； 3、具有airflow/azkaban/xxl-job/Dolphinscheduler等一种基几种调度工具的开发使用经验，有Dolphinscheduler使用经验优先； 4、具备海量数据采集、加工、分析处理、高并发查询等数据平台的开发设计能力，并有具体的构建海量数据存储、离线/实时数仓等项目实施经验； 5、具有金融行业大数据平台实施项目经验； 6、了解常见的大数据产品和技术路线，如：ClickHouse、Doris、GBase、Kylin、Linkis、Flink CDC、Hudi/Iceberg等更优； 7、学习能力强，适应能力好，有强烈的责任心，主动关注数据发现问题并提出解决方案，具备良好的沟通能力及团队合作精神。

工作职责 1、负责大数据相关系统的开发、测试、部署及上线工作，参与代码评审，确保开发质量； 2、参与业务部门临时数据分析需求，合作开展专项数据分析工作； 3、协助运营人员处理生产问题并提供技术支持，解答业务部门反馈的数据问题及各类咨询； 4、参与公司数据分析需求调研、评估、系统分析及架构设计工作。 任职要求 1、本科及以上学历，计算机、数学、统计学、管理信息类相关专业； 2、熟悉关系型数据库如Oracle、Postgresql等的使用、可熟练编写SQL实现业务逻辑，了解SQL性能调优； 3、熟悉Hadoop生态圈组件，包括但不限于Hive、Spark、HBase、Kylin、Flink、ES、Kafka等； 4、具备良好数据分析及处理能力，熟悉常见的数据处理工具，如ETL、BI工具、Python等； 5、具有较强的责任心和服务意识，良好问题分析及处理能力。

职位职责： 1、负责内容质量业务相关数据产品的技术架构设计和实现； 2、负责内容质量业务相关数据产品的功能迭代和性能优化，提高效率，优化流程； 3、背靠数据中台完善的数据体系，依托于集团平台整体技术架构完成对内容质量业务数据智能化产品的构建。 职位要求： 1、熟悉互联网产品和服务的开发过程，熟悉后端技术架构，具备良好的系统设计能力，有中长期的产品/技术视野； 2、熟悉Java/Go技术栈，了解微服务框架、容器、服务治理等相关技术； 3、有大数据开发、LLM开发经验者优先、了解查询引擎（如Clickhouse、Redis、Doris、ES等），对实时和离线数据仓库有一定的认知能力； 4、具备优秀的技术与业务结合能力。

职位职责： 1、负责飞书产品线SaaS应用&私有化部署的离线&实时数据仓库构建； 2、负责维度模型的设计和大数据开发，解决P级数据任务性能优化、数据监控等技术问题； 3、负责构建各业务线功能、用户、推荐、搜索等主题，打造一站式数据驾驶舱系统； 4、负责全产品线数据治理，提升数据资产质量。 职位要求： 1、计算机、数学相关专业本科及以上学历，2年以上大数据开发工作经验； 2、深入理解常用的维度建模理论，可独立把控数据仓库的各层级设计，有OLAP分析应用经验；有数据挖掘、机器学习、推荐相关经验优先； 3、熟练掌握HSQL，熟悉Spark/Hive/Flink分布式计算框架，熟悉大数据的离线和实时处理，可以进行海量数据模型的设计、开发； 4、有产品意识，主动思考基于业务场景下的数据体系建设，而不单单只会做执行； 5、工作认真、负责，具备良好的合作精神和问题分析能力，钻研技术克服困难，勇于挑战。

职位职责： 1、综合收入和支出，预测用户生命价值，打造渠道投放和内容采买评估体系； 2、基于用户表现，建立用户衰减模型，打造DAU预测和多产品互导平台； 3、整合业务、财务、人力数据，提供一站式查询平台。 职位要求： 1、强悍的编码、系统设计和troubleshooting能力； 2、熟悉至少一个分布式框架，如Hadoop、Hive、Spark、Storm、Kafka、Flink等； 3、有扎实的数据结构和算法功底，熟悉统计学习、机器学习、深度学习中一项或多项； 4、有数据挖掘、指导业务策略的经验（如渠道投放、内容采买和产品互导等）优先。

工作职责: 1、负责支持日常数据采集和管理需求，包括业务条线数据对接、加工、整合和集中管理； 2、负责开发模块的开发工作，测试工作与数据核对工作； 3、负责数据仓库设计及相关工作； 4、完成领导安排的其他工作。 任职资格: 1、本科以上学历； 2、3年以上数据库设计和开发经验，有Oracle、其他大型数据库的开发经验，能编写性能良好的SQL； 3、熟悉SmartBI等工具，具备数据仓库技术、Hive/SparkSql/Kylin/doris等数据库开发经验； 4、具备高度责任心和积极工作态度，良好的沟通能力和团队合作精神，较强的分析问题和解决问题能力； 5、具有保险行业经验者、懂理赔业务流程者优先安排面试；

职位职责： 1、负责字节商业化数据仓库&集市的建设与维护，包括但不限于数据建模、数据开发、数据质量等 2、负责字节商业化业务数据BP，包括需求对接，抽象需求沉淀数据建模，结合产品矩阵灵活的把控技术方案，高质量交付需求 3、参与商业化数据治理工作，提升数据稳定性、易用性及数据质量 4、参与商业化大数据平台规划、为商业数据平台整体提供内容建设侧的应建议指导 职位要求： 1、本科以上学历，2年以上互联网业务数据仓库模型设计、开发经验； 2、熟练使用Hadoop及Hive、spark，熟悉HQL调优。具备一定的Java、Python等语言开发能力 3、具有Clickhouse、Druid、presto等OLAP引擎使用经验者优先 4、具有丰富的指标体系设计，指标管理经验优先 5、沟通能力强，业务sense好，良好的团队协作，以解决业务问题为导向，认同技术解决业务问题的价值理念，对处理海量大数据有较强的兴趣度和持续的热情

职位职责： 1、为大规模推荐系统设计和实现合理的数据系统； 2、生产系统的Trouble-shooting，设计和实现必要的机制和工具保障生产系统整体运行的稳定性； 3、打造业界领先的流式计算框架等分布式系统，为海量数据和大规模业务系统提供可靠的基础设施。 职位要求： 1、对大数据系统有深入的了解，在生产环境有TB级别Flink实时计算系统开发经验，深入掌握Flink DataStream、FlinkSQL、Flink Checkpoint、Flink State等模块，有Flink源码阅读经验优先； 2、熟悉常见消息队列原理和应用调优，有Kafka、Plusar、RocketMQ等项目源码阅读经验优先； 3、熟悉Java、C++、Scala、Python等编程语言，有出色的编码和Trouble-shooting能力； 4、乐于挑战没有明显答案的问题，对新技术有强烈的学习热情，有PB级别数据处理经验加分； 5、有数据湖开发经验，熟悉Hudi、Iceberg、DeltaLake等至少一项数据湖技术，有源码阅读经验优先； 6、熟悉其他大数据系统经验者优先，YARN、K8S、Spark、SparkSQL、Kudu等；有存储系统经验加分，HBase、Casscandra、RocksDB等。

职位职责： 1、广告各类在线业务的离线数据加工与在线数据服务开发与维护； 2、数据服务接口及产品需求研发迭代，代码review、bug修复及日常服务运维； 3、针对海量数据处理和查询需求，设计适应业务变化的合理的多维数据分析系统架构，满足多样性的需求； 4、海量日志清洗加工，并抽象出可以多业务复用的数据模型； 5、指导初级数据开发工程师进行日常开发。 职位要求： 1、熟悉Hadoop架构和工作原理，精通MapReduce编程；精通Hive，有HQL优化经验； 2、有web服务开发经验，具备独立完成模块开发能力，具备大规模分布式服务设计能力和经验； 3、理解基本的设计模式，能将业务需求快速理解成技术需求； 4、熟练使用Mysql，熟练使用ElasticSearch、Druid者优先；熟悉其原理者优先； 5、善于沟通，工作积极主动，责任心强，具备良好的团队协作能力； 6、具备良好的问题分析与解决能力，有较强学习能力和逻辑思维能力。