-
职位职责: 1、综合收入和支出,预测用户生命价值,打造渠道投放和内容采买评估体系; 2、基于用户表现,建立用户衰减模型,打造DAU预测和多产品互导平台; 3、整合业务、财务、人力数据,提供一站式查询平台。 职位要求: 1、强悍的编码、系统设计和troubleshooting能力; 2、熟悉至少一个分布式框架,如Hadoop、Hive、Spark、Storm、Kafka、Flink等; 3、有扎实的数据结构和算法功底,熟悉统计学习、机器学习、深度学习中一项或多项; 4、有数据挖掘、指导业务策略的经验(如渠道投放、内容采买和产品互导等)优先。
-
职位职责: 1、为大规模推荐系统设计和实现合理的离线/实时数据架构; 2、设计和实现灵活可扩展、稳定、高性能的存储系统和计算模型; 3、生产系统的Trouble-shoting,设计和实现必要的机制和工具保障生产系统整体运行的稳定性; 4、打造业界领先的离在线存储、批式流式计算框架等分布式系统,为海量数据和大规模业务系统提供可靠的基础设施。 职位要求: 1、熟悉一个大数据领域的开源框架,Hadoop/Hive/Flink/FlinkSQL/Spark/Kafka/Hbase/Redis rocksdb/Elasticsearch/Parquet; 2、熟悉Java、C++等编程语言; 3、出色的编码和Trouble-shoting能力; 4、乐于挑战没有明显答案的问题,对新技术有强烈的学习热情; 5、有PB级别数据处理经验加分; 6、对某一大数据框架有原理/源码级别理解的加分。
-
工作职责: 1、负责支持日常数据采集和管理需求,包括业务条线数据对接、加工、整合和集中管理; 2、负责开发模块的开发工作,测试工作与数据核对工作; 3、负责数据仓库设计及相关工作; 4、完成领导安排的其他工作。 任职资格: 1、本科以上学历; 2、3年以上数据库设计和开发经验,有Oracle、其他大型数据库的开发经验,能编写性能良好的SQL; 3、熟悉SmartBI等工具,具备数据仓库技术、Hive/SparkSql/Kylin/doris等数据库开发经验; 4、具备高度责任心和积极工作态度,良好的沟通能力和团队合作精神,较强的分析问题和解决问题能力; 5、具有保险行业经验者、懂理赔业务流程者优先安排面试;
-
技能要求: Hive,Hadoop,Spark,kafka,Python,数据架构 技能要求: 数据分析,Web安全,数据处理,Hive 岗位职责: 1.负责基于Hadoop/Spark/Hbase/Kafka等平台的批量处理和实时计算开发; 2.负责公司大数据平台数据模型的设计及开发,包括数据需求的沟通、离线/实时模型设计与开发、质量管理监控等工作; 3.负责大数据数据中台开发。负责大数据端与web端的对接; 4.负责对接各事业部及其他团队相关技术规划及管理工作。 任职资格: 1.本科及以上学历,计算机及相关理工科专业; 2.5年及以上相关工作经验,具有扎实的数据结构与算法的理论知识; 3.熟练使用shell、perl、 python、Java、C、C++等至少2门脚本语言; 4.了解Hadoop、Hbase、 Kafka、 Hive、 Spark、 ES、 Storm等组件的工作原理; 5.近3年从事 大数据研发、大数据处理技术架构、数据中心性能评估设计研究等相关岗位; 6.有较强的自学能力、钻研精神和动手能力,具有良好的逻辑思维能力、沟通能力和团队协作能力,做事认真、踏实、负责; 7.有团队管理及人员培养经验优先。
-
我司在招聘大数据工程师的同时也在招聘Java工程师 技能要求: Linux,网络安全,数据库开发 岗位职责: 1. 构建基于网络信息安全的大数据平台,支持数据采集、处理、分析、监控和可视化全过程。 2. 解决数据规模增长带来的技术、异地存储检索和复杂的业务问题。 3. 参与项目的需求分析和设计工作,并完成相关技术文档的编写。 4. 协助项目负责人解决项目中的技术难题; 任职要求: 1. 本科及以上学历,计算机相关专业,5年以上开发经验,2年及以上大数据从业经验。 2. 熟悉分布式编程,精通JAVA语言程序设计,具有良好的架构规划能力。 3. 熟悉Hadoop/Hive/Spark/Storm/Flink/Kafka/等技术,具备实际项目设计及开发经验。 4. 精通SQL,熟悉Mysql/Oracle处理机制及应用场景;熟悉NOSQL,如Redis、Hbase、MongoDB等 5. 有Druid、Clickhouse 或Kylin使用及性能优化经验者优先。 6. linux操作系统操作熟练,有能力进行复杂脚本(shell/PYTHON等)编程。 7. 工作态度端正,对技术充满热情具有钻研精神,有良好的问题分析和追踪能力,团队合作意识较好。 具有以下条件者优先考虑: 1)有Kubernetes/docker/Etcd 等容器技术使用者。 2)有网络信息安全从业经验者。
-
京东集团2025年数据开发工程师高薪招聘 【岗位职责】 千亿级数据处理系统开发 设计实时/批量处理架构,支撑京东市场营销、用户增长等业务在站外广告投放场景下的千亿级数据处理,支撑业务报表和算法模型的特征样本生产 百亿级报表引擎研发 构建高效数据仓库与实时分析平台,实现百亿级数据秒级查询与可视化 大模型智能体应用 开发AI驱动的问题发现/诊断工具,探索大模型在智能分析场景的落地 【任职资格】 硬性要求 · 计算机相关专业本科及以上学历 · 精通Java/Scala,具备良好的数据结构和算法基础 · 3年以上大数据开发经验,掌握Hadoop/Spark/Flink/Kafka/Redis/Hudi/Iceberg/ClickHouse/Doris等技术栈 · 具有较好的沟通能力、学习能力和团队合作精神,乐于挑战自我,有进取心和求知欲。 加分项 · 有搜推广数据系统、大模型应用开发经验者优先 【工作地点】 北京通州区京东总部 京东集团:以技术驱动零售变革,期待你的加入!
-
职位描述: 1. 研发阿里妈妈广告风控大数据平台,并推进平台产品化建设 2. 支撑阿里妈妈每日千亿流量, 为广告核心业务提供秒级识别风险能力 3. 打通数据与服务,构建从特征到模型再到在线AI决策的下一代引擎 职位要求: 1. 具备扎实的计算机理论基础,有较强的数据结构和算法功底 2. 具备优秀的系统调试/优化能力和经验,至少熟悉Java/C/C++之一 3. 熟悉常见的设计模式,具备优秀的分布式系统架构设计能力,有一定的产品意识 4. 熟悉Hadoop/HBase/Flink/Spark等开源大数据技术,并至少深度使用过其中的一种 5. 有技术梦想,对简单的美、性能、质量有极致的追求,对新事物有强烈的好奇心 6. 有互联网广告/搜索/推荐相关业务背景优先 7. 有支撑大规模机器学习迭代和服务的工程技术背景优先 8. 有推荐、搜索、风控系统设计和实现背景优先
-
岗位职责: 1. 负责广告物料流水系统的架构设计与性能优化,支持上亿级别物料的实时处理与下发,确保数据的实时性和可靠性 2. 负责大型分布式广告检索引擎的架构设计和优化,支持毫秒级别实时索引系统的研发,研究和设计针对不同场景的最优索引架构 3. 负责广告在线系统的性能调优、架构设计与优化,支撑数百亿请求压力的高可靠系统的研发,通过合理运用算力和系统容量以提高系统性能和进行广告收益最大化探索 4. 负责广告在线系统的业务能力建设,包括广告产品的业务需求落地、广告效果优化、在线系统的迭代效率提升等 5. 持续关注广告科技领域的最新进展和技术趋势,参与技术研究和创新,不断优化系统架构,提升广告在线系统的效果和性能 岗位要求: 1. ***大学硕士及以上学历,计算机相关专业 2. 熟练Java/scala高级语言,掌握SQL/Shell/Python脚本语言,熟悉常用的数据结构和算法,熟悉网络编程、多线程编程,有良好的编程习惯 3. 有分布式系统开发、大数据处理开发经验者优先;有Spark/Flink/Kafka分布式框架的实践并掌握原理,对源代码有一定研究者优先; 熟悉ElasticSearch、Lucene等开源项目,熟悉搜索引擎原理和代码实现者优先 4. 具备优秀的逻辑思维能力,对解决挑战性问题充满热情,善于解决问题和分析问题 5. 有强烈的上进心和求知欲,善于学习新事物 6. 良好的团队合作精神,较强的沟通能力和学习能力 7. 有广告在线系统经验者优先 地址:北京市亦庄京东总部 部门简介: 广告系统技术部作为京东平台运营与营销中心的核心团队,承接京东站内外流量商业化的系统建设工作,负责广告系统的整体架构设计和技术选型、高性能异构计算的设计和优化以及离线海量数据的存储与高时效计算。涵盖广告数据/物料流、 广告在线模型服务、广告在线播放、广告实时检索、广告数据系统等核心模块,涉及百亿吞吐高并发处理、海量数据的分布式存储、高效索引检索、在线高性能计算、离线大规模机器学习训练等技术,是京东技术栈最全面的团队之一。 我们拥有互联网广告业内一流的技术团队,有着丰富的行业经验和技术培养体系,作为我们技术团队的一员,你将有机会参与到各种创新性和有挑战性的项目中。你可以与各个领域的专业人员和同事合作,共同探索前沿的技术,有机会利用你的技术能力和个人兴趣来解决业务问题,创建出更丰富和更个性化的技术解决方案。 如果你具备创新意识和技术能力,渴望实现自己的人生价值和职业目标,我们诚挚地邀请你加入我们的技术团队,共同致力于技术创新和社会进步的使命!
-
工作职责: -负责构建大数据分析平台以及数据分析和挖掘工作 -跟进相关产品线的数据梳理,各数据指标的计算和分析 -参与海量数据的存储、查询和运营数据分析体系搭建 -运用hadoop、hive、spark、ES等分布式计算和存储平台 职责要求: -计算机相关专业,3年及以上相关工作经验,有扎实的计算机理论基础 -研究过Hadoop或者Spark源代码的优先 -熟悉Java/Python等编程语言,熟练使用SQL,有良好的编码习惯 -技术视野开阔,有强烈的上进心和求知欲,善于学习和运用新知识 -善于沟通和逻辑表达,良好的团队合作精神和积极主动的沟通意识 -具备大数据云平台、计算存储平台、可视化开发平台经验优先 百度地图
-
工作职责: -负责百家号和Feed相关大数据的基础建设 -负责数仓引擎、Spark底层的优化和基础建设 -为百度系APP相关业务分析及策略优化提供大数据支持 -参与百度系APP日志数据架构开发和APP端性能分析平台建设 任职资格: -本科及以上学历,计算机相关专业 -熟练使用SQL,以及Scala/C++其中一种编程语言,对分布式架构和并行计算有较深刻理解 -熟悉Hadoop/Spark/HBase/Kylin/ClickHouse等大数据计算和存储技术栈,了解其工作原理,并有实际开发经验 -熟悉Spark Streaming/Flink等流式计算框架,以及Kafka等常见消息队列
-
工作职责 岗位职责: - 设计、实施和维护大数据平台,包括数据采集、存储、处理和分析 - 开发和维护数据管道和 ETL 流程,开发建设数据分析BI报表,确保数据的准确性和完整性 - 使用数据分析工具和技术,解释和解读数据,提供有关业务和产品的见解和建议 - 创建和维护数据报告和仪表板,以便其他团队成员可以轻松访问和理解数据 - 与其他团队成员合作,确保数据平台的稳定性和可靠性 任职资格 岗位要求 - 本科或研究生,计算机、数学、统计学相关专业 - 对大数据研发、数据科学方向有兴趣,了解大数据技术栈,可使用Hadoop、Spark、Hive等大数据工具和技术 - 熟练掌握至少Python、Java、Scala等一门开发语言,有sql基础 - 加分项:优秀的英文水平、数据科学项目经验、Tableau数据可视化经验 - 优秀的问题解决能力和团队合作能力
-
岗位职责: 1、Hadoop大数据平台架构及组件的优化; 2、数据分析平台的开发和优化; 3、数据展示系统的开发和优化; 4、大数据集群的监控、管理、性能优化; 5、数据计算性能瓶颈的定位及优化。 这样的你是我们的理想型: 1、国家**本科及以上学历; 2、熟练使用C/C++/Java; 3、熟练掌握计算机数据结构和算法; 4、熟悉Hadoop架构,有大数据、分布式存储及计算等相关经验者优先。
-
岗位地点: 北京、深圳 岗位介绍: 1. 面向分布式数据系统和AI数据领域,负责自研serverless分布式数据系统的开发、验证及落地; 2. 负责分布式文件缓存/消息队列/KV缓存/流缓存等特性的设计及开发,基于统一数据底座构建serverless平台下的缓存系统; 3. 聚焦分布式引用计数、分布式一致性、Checkpoint、分布式事务、弹性扩缩容、多租户隔离、多副本、大规模集群管理及性能优化等互联网核心技术方向,实现个人能力和价值提升,共同打造业界性能领先的云原生数据系统。 岗位要求: 1. 熟练掌握C/C++/JAVA/PYTHON等主流开发语言的一种或多种,具有较强的编码能力; 2. 熟练掌握Linux操作系统、具备高并发、多进程、多线程服务端开发经验; 3. 熟悉性能profiling工具(intel vtune, iostat, dstat等),对于文件IO、高并发RPC、IPC、NUMA内存访问有分析优化经验优先;
-
【2002年成立,运营商软件厂商,有自己的产品,非外包岗位,专业从事DNS相关领域、网络安全领域、大数据领域软件产品和服务的高新技术企业】 岗位职责: 1、负责公司大数据相关项目研发工作;(数据量非常大,集群PB级别,日增数据几十T,业务需要熟练使用spark) 2、参与系统架构设计、数据库设计等架构工作; 3、完成团队安排的其他任务。 任职要求: 1、***硕士学历,学信网可查,计算机相关专业,2年以上工作经验;【学历或经验丰富者薪资、经验不受限,可谈】 2、掌握Hadoop、Hbase、Spark、Spark Streaming(精通)、Spark SQL、Sparkcore、Scala等大数据相关知识,熟练使用spark相关组件;有分布式应用软件(hadoop/kafka/redis等)经验; 3、熟练使用svn、git等版本控制工具,熟练使用maven等项目管理工具; 4、深入理解面向对象编程思想,具备扎实的Java编程基础,良好的编码习惯; 5、良好沟通能力和团队协作能力,具有较强的工作责任心,快速学习能力,乐观积极进取。 6、学历或技术方面特别优秀者,薪资、工作年限可议。 【五险一金、13薪+额外年终奖(最高可达16薪)、额外补贴、带薪年假】 上班时间:早9:00-晚6:00,周末双休 公司地址:北京市海淀区静芯园L座楼南三层301室
-
岗位职责: 1、负责大数据语音计算平台的架构设计、调整、维护和不断优化; 2、优化和设计高效、可靠的分布式计算服务系统并提升平台稳定性性能和可维护性; 3、有优秀的业务理解能力,能理解清楚业务并进行合理的平台演进和架构设计; 4、带领技术团队进行大数据平台项目开发。 任职资格: 1、计算机或相关专业硕士及以上学历; 2、精通Linux/Unix平台上的Python、Java、C++,熟悉常用脚本语言,熟悉常用算法和数据结构,熟悉网络编程、多线程编程技术; 3、有分布式软件开发和大规模并发访问开发经验者优先; 4、良好的团队合作精神,较强的沟通能力,较高的执行力。 5、应届硕士解决北京户口


