• 35k-60k·13薪 经验10年以上 / 本科
    数据服务 / D轮及以上 / 150-500人
    1、精通java/scala等编程技术,熟悉常用算法,熟悉多线程;有分布式开发的实践经验; 2、有技术追求,coding能力强,有很强的问题解决能力; 3、有主流大数据计算引擎(包括但不限于Spark、Flink、Hive、Impala等)实际应用经验,对原理有比较深入的理解,有调度(或ETL)系统、引擎平台的产品化、二次开发的经验; 4、有大规模集群分布式数据库(hbase、kudu等),或者minio、ceph等分布式存储有应用或二次开发的实践经验的加分; 5、对数据处理(实时/离线)、数据仓库(数据湖)、数据分析等业务处理过程有深刻体会,对业界的发展趋势有独立见解的加分; 6、对 Azure Data Factory、Google Cloud DataFlow、Ali DataWorks等类似产品有经验的加分; 7、对k8s调度机制有深入实践,对 argo、kubeflow等引擎有实践经验的加分; 8、对金融领域的规则引擎、决策引擎、风控引擎等产品有开发、产品经验的加分; 岗位职责: 1、参数批处理/实时处理平台 data pipeline 、data flow、规则引擎等产品的产品设计、架构设计、核心开发等工作; 2、参与Spark、hive、Spark Streaming、flink、kafka、hbase、kudu、impala等组件的应用架构设计、专家支持等工作; 3、参与大数据离线/实时计算平台、数据中台、数据湖等平台系统的应用架构优化、性能改进、功能扩展、故障分析等工作; 4、参与其他任务;
  • 15k-25k·13薪 经验3-5年 / 本科
    硬件 / C轮 / 500-2000人
    工作职责: 1. 负责当贝业务数据资产的设计与研发,包括架构和内容设计,项目计划,开发测试部署等。构建行业标杆级的操作系统领域核心数据资产池; 2. 打造先进的大数据平台,包括实时数据流、数据仓库、调度系统、查询引擎,用户行为分析,abtest 实验系统等,降低数据的使用门槛,实现数据的最大价值; 3. 建设适合业务的大数据存储、计算等分布式系统,为海量数据和大规模业务系统提供可靠的基础设施。 任职资格: 1. 本科以上学历,3年以上工作经验 2. 有3年以上的大数据仓库构建和数据分析经验 3. 有很强的架构设计能力, 编码能力扎实,熟悉Java,SQL及常用工具 4. 熟悉主流分布式计算引擎,中间件,NoSQL数据库,如hadoop,hive,flink,kafka,hbase,redis等,并熟悉运行原理 5. 有Github等开源社区贡献者优先 6. 具备大规模分布式服务设计能力和经验优先
  • 文娱丨内容 / D轮及以上 / 2000人以上
    职位职责: 1、广告各类在线业务的离线数据加工与在线数据服务开发与维护; 2、数据服务接口及产品需求研发迭代,代码review、bug修复及日常服务运维; 3、针对海量数据处理和查询需求,设计适应业务变化的合理的多维数据分析系统架构,满足多样性的需求; 4、海量日志清洗加工,并抽象出可以多业务复用的数据模型; 5、指导初级数据开发工程师进行日常开发。 职位要求: 1、熟悉Hadoop架构和工作原理,精通MapReduce编程;精通Hive,有HQL优化经验; 2、有web服务开发经验,具备独立完成模块开发能力,具备大规模分布式服务设计能力和经验; 3、理解基本的设计模式,能将业务需求快速理解成技术需求; 4、熟练使用Mysql,熟练使用ElasticSearch、Druid者优先;熟悉其原理者优先; 5、善于沟通,工作积极主动,责任心强,具备良好的团队协作能力; 6、具备良好的问题分析与解决能力,有较强学习能力和逻辑思维能力。
  • 25k-35k·13薪 经验5-10年 / 本科
    数据服务|咨询 / A轮 / 50-150人
    岗位职责: 1、参与公司内部数据仓库的建设,为各业务方提供完整、高效的数据支撑 2、基于简单、易用、高效、可靠等原则建设离线数据仓库,支撑上层数据产品和分析师 3、构建实时数据仓库,满足实时业务场景 4、深入参与数据产品建设,为公司内外提供完善的数据解决方案 5、满足公司各部门日常的数据需求 任职要求: 1、擅长大数据平台建设/数仓+BI,5年大数据研发经验,有2年以上大数据架构师经验优先。 2、具备数据应用解决方案创新能力,能提供内/外用户快速使用、产出基于数据和各个引擎应用之间的数据解决方案,提高用户效率。 3、密切关注大数据相关技术的发展趋势,有Hadoop/Hbase/Hive/Kafka/Zookeeper/Flink/Spark等其中一种或多种相关技术研究或开发经验。了解分布式存储系统原理,有相关设计经验尤佳。 4、熟悉Java/Python/Scala/go等一种或多种编程语言,了解Docker/Mesos/Kubernetes等容器相关技术者优先 5、具备强烈的进取心、求知欲及团队合作精神,具有良好的沟通能力,具有良好的问题分析和解决能力。思维敏捷,逻辑性强,并具备快速学习与知识整合能力。 加分项:熟悉常见的机器学习算法,了解CNN/RNN/LSTM/GBDT等算法
  • 30k-50k·16薪 经验5-10年 / 本科
    影视|动漫,内容社区 / D轮及以上 / 500-2000人
    工作职责:
 1.深入理解业务需求,对业务建模,设计大数据系统架构,满足业务需求;
 2. 维护和升级现有的大数据集群架构,根据业务需求规划集群和架构的扩展;
 3. 解决工作中遇到的技术难题,指导其他同事的开发工作。

 任职条件:
 1.计算机相关专业本科以上学历,编程基础扎实,有5年以上大数据开发经验;
 2.对Hadoop生态和体系架构有深入理解,精通一些常见开源工具源码者优先; 3.在用户行为日志采集、海量数据处理、数据建模、业务理解、大数据架构设计方面有丰富经验; 4.擅长挖掘和梳理需求,具有良好的逻辑性思维,能协调好各方需求; 5.能快速的学习新的开源框架和知识体系,并应用到我们的架构体系中; 6.自我驱动,热爱创业、创新文化氛围。
  • 30k-60k 经验3-5年 / 本科
    文娱丨内容 / D轮及以上 / 2000人以上
    职位职责:1. 打造业内领先的品牌营销数据产品2. 负责云图数据架构搭建,基于云图业务完成数仓开发与优化数仓稳定性3. 负责云图后端架构搭建,提升业务架构稳定性与可扩展性职位要求:1. 对互联网广告兴趣浓厚,具有强烈的团队意识和执行力2. 熟悉并掌握Hadoop/Spark/Hive等常见大数据组件,具有海量数据处理经验优先3. 熟悉Python/Java/Golang/C++中的一种或多种语言,熟悉MySQL、Redis等常用后端组件、 有生产系统快速 trouble-shooting 的经验优先4. 熟悉常用的数据建模理论,可独立把控数据仓库的各层级设计优先
  • 20k-40k 经验5-10年 / 本科
    数据服务|咨询 / D轮及以上 / 150-500人
    岗位职责 : 1、负责大数据产品功能组件的设计、开发、测试和技术支持。 2、参与特定数据处理平台领域的研究与开发,如数据摄取、数据转换、访问优化、元数据生成/管理、数据安全、系统隔离,数据存储、分析查询和数据可视化。创建产品或组件的方向和路线图。 3、独立地对整个系统或子系统进行性能分析和优化。 4、深度参与产品需求和解决方案讨论,站在客户和行业的角度形成产品的差异化竞争力,生成研究报告和产品原型化。 5、搭建、整合、测试全套大数据方案,并输出用户指导手册和最佳实践。 6、响应,解决和修复客户使用中的问题和故障。 7、指导初级员工的职业道路。 岗位要求 : 1、大学本科或以上学历,计算机科学或数学专业。 2、具备5年以上大数据产品研发经验。 3、熟悉至少二种主流大数据产品(Hadoop、Spark、Hudi、iceberg、delta lake、flink等)的相关技术。 4、精通Java、Scala、golang和脚本语言的编程。 5、对SQL计算、大数据分析、存算分离、弹性计算、实时分析、ELT、流批一体、查询优化、存储优化分布式等技术非常熟悉,有全局观,且在某方面技术有突出能力。 6、具有性能分析和调优方面的工作经验 ,有华为FushionInsight产品、阿里云MaxCompute、星环、Spark、Hadoop、Flink 等产品架构经验优先。 7、拥有云计算、虚拟化和容器化的知识,如Docker、K8s。 8、在主流大数据、数据库或数据湖方面有开发或规划的工作经验,熟悉NoSQL数据库。 9、有良好的沟通能力,工作热情,有良好的团队合作精神。
  • 20k-40k·15薪 经验3-5年 / 本科
    人工智能服务 / B轮 / 150-500人
    岗位职责: 1. 负责大数据系统的开发,包括分布式传输计算,数据仓库等系统; 2. 负责梳理公司数据业务。 岗位要求: 1. 计算机相关专业,本科以上学历,三年以上相关工作经验; 2. 精通Java/Python/Scala/Golang等至少一门语言,熟悉Hadoop/Spark/Hive/Flume等大数据工具; 3. 精通数据建模及ETL设计开发,对数据仓库、数据平台、数据分析等有深刻理解,具备丰富的海量数据加工处理和优化经验; 4. 有机器学习,深度学习pipeline研发经验者优先; 5. 优秀的自我驱动力和责任心,对新技术有强烈的学习热情。
  • 20k-30k 经验3-5年 / 本科
    IT技术服务|咨询 / 上市公司 / 500-2000人
    岗位职责 - 负责设计和构建大数据平台的各类组件,包括但不限于数据采集,计算,对外服务及治理平台的设计和开发搭建,降低数据的使用门槛,实现数据的最大价值; - 基于开源解决方案,构建完整的数据开发、治理框架,以满足实时、近实时以及批量计算的需求。 - 持续升级和解决自主建设和开源产品中的问题, 包含基于开源项目源码的新功能开发和集成。 - 探索和实践新技术和现有平台的集成。 -Be responsible for the design and construction of various components of the big data platform, including but not limited to the design, development and construction of data collection, calculation, external service and governance platform, so as to reduce the threshold of data use and realize the maximum value of data; -Based on open source solutions, build a complete data development and governance framework to meet the needs of real-time, near real-time and batch computing. -Continuously upgrade and solve problems in open source products, including bug repair in spark, hive, HDFS and presto, and development and integration of new functions based on source code. -Explore and practice the integration of new technologies and existing platforms. 技能和要求 - 计算机相关专业,本科及以上学历。4年以上大数据相关工作经验。 - 精通Java,基础扎实 ,对于多线程、网络、IO方面有实际的应用经验,了解Java 内存模型,垃圾回收机制,对于Java的内存监控、调优、线上Debug有丰富经验。 - 熟悉基于Springboot的微服务应用开发。 - 精通一种或多种大数据相关组件技术,包括但不限于 Hadoop、Spark、Flink、Presto、调度系统、元数据管理系统等,理解其内部原理和适用场景,了解核心源码及调优方法。 - 有大数据中台建设经验、数据治理经验者优先。 - 熟悉Yarn、Kubernetes等调度和资源管理系统,参与过大型集群的搭建或维护优先; - 熟悉Azure 云服务的优先 -Bachelor degree or above in computer related major. At least 4 years working experience in big data. -Be proficient in one or more big data related component technologies, including but not limited to Hadoop, spark, elk, presto, scheduling system, metadata management system, etc., understand their internal principles and application scenarios, and understand the core source code and tuning methods. -Proficient in Java, solid foundation, practical application experience in multithreading, network and IO, understanding Java Memory Model and garbage collection mechanism, and rich experience in JAVA memory monitoring, tuning and online debugging. -Hands on Experience on Springboot -Familiar with spark kernel, optimized spark kernel components, or participated in the development of quasi real-time data processing system; -Experience in big data platform construction is preferred. -Familiar with scheduling and resource management systems such as yarn and K8S, and having participated in the construction or maintenance of large clusters is preferred; -Familiar with Azure Data Cloud is preferred
  • 25k-45k·15薪 经验5-10年 / 本科
    硬件 / 上市公司 / 2000人以上
    岗位描述: 1 、负责中台技术架构、系统设计和核心代码开发,发现和解决存在的性能瓶颈等技术难题。 2 、协助产品梳理业务需求,产出业务系统架构设计方案。 3 、独立完成项目的系统分析、设计,并主导完成详细设计和编码的任务,确保项目的进度和质量。 4 、主动关注并学习新技术,并能够在实践中应用,帮助建设团队技术氛围。 5 、对未来技术架构具有前瞻性和规划能力。 任职要求: 1.三年以上 Java 开发经验,编程基础扎实。 2.精通 Java 开发语言,精通 jvm 、缓存、分布式架构、消息中间件等核心技术。 3.深入了解 Java 相关的主流框架,并熟知它的原理及机制,如 Springboot、dubbo 、SpringCloud 等。 4.熟悉常用的开源分布式中间件、消息队列、缓存 实时计算引擎等。 5.具备良好的面向对象的设计能力,熟悉面向对象设计原则,掌握设计模式及应用场景。 6.对于有过高并发、高可用、高性能、稳定性保障、以及大数据处理实际项目经验者优先。 加分项: 1. 熟悉 Docker/Kubernetes 等容器相关技术者优先。 2. 熟悉流式计算相关生态技术,包括但不限于 Flink/Spark/Kafka/Hadoop 等,有实时计算经验优先。 3. 熟悉 CI/CD 优先。
  • 29k-42k 经验5-10年 / 本科
    金融,数据服务 / 不需要融资 / 2000人以上
    Job Background: Global Functions Technology is responsible for Citi's overall Information Technology strategy. GFTS' mission is to optimize Citi's IT environment by driving standardization of the production environment, reducing complexity, optimizing management of systems supporting global functions such as Compliance, Enterprise Risk Management and Finance, and introducing innovative technologies that provide new business capabilities, reduce the technology total cost of ownership, and create a competitive advantage for the firm. Global Functions Technology Services is responsible for Technology development and support for Enterprise Risk Management, Capital Planning, Financial Planning and Analysis, Information Security, Compliance Metrics, Audit, Assessments and Controls across the entire bank. Responsibilities: • Conduct tasks related to feasibility studies, time and cost estimates, IT planning, risk technology, applications development, model development, and establish and implement new or revised applications systems and programs to meet specific business needs or user areas • Monitor and control all phases of development process and analysis, design, construction, testing, and implementation as well as provide user and operational support on applications to business users • Utilize in-depth specialty knowledge of applications development to analyze complex problems/issues, provide evaluation of business process, system process, and industry standards, and make evaluative judgement • Recommend and develop security measures in post implementation analysis of business usage to ensure successful system design and functionality • Consult with users/clients and other technology groups on issues, recommend advanced programming solutions, and install and assist customer exposure systems • Ensure essential procedures are followed and help define operating standards and processes • Serve as advisor or coach to new or lower level analysts • Appropriately assess risk when business decisions are made, demonstrating particular consideration for the firm's reputation and safeguarding Citigroup, its clients and assets, by driving compliance with applicable laws, rules and regulations, adhering to Policy, applying sound ethical judgment regarding personal behavior, conduct and business practices, and escalating, managing and reporting control issues with transparency. Qualifications: • 5-8 years of relevant experience • Strong proficiency in Core Java (Java concurrency/JDBC/JMX/Unit and Integrational tests) • Excellent knowledge of Spring stack of technology • Web technology knowledge – REST/Web sockets • Strong experience with SQL and NoSQL databases (MsSQL/MongoDB) • Cloud experience – Docker/Kubernetes – Nice to have • Experience in systems analysis and programming of software applications • Experience in managing and implementing successful projects • Working knowledge of consulting/project management techniques/methods • Ability to work under pressure and manage deadlines or unexpected changes in expectations or requirements
  • 20k-35k 经验3-5年 / 大专
    移动互联网,游戏 / 不需要融资 / 150-500人
    岗位职责: 1、基于CDH的Hadoop生态圈平台搭建和维护; 2、负责大数据平台的规划、设计、实施,熟悉常用的数据仓库建模方法,能够独立完成数据模型设计、开发; 3、能够使用合理技术实现数仓设计、离线ETL分析、实时分析、用户画像、智能推荐、机器学习等; 4、具备游戏行业背景或工作经验优先; 岗位要求: 1. 计算机或相关专业本科及以上学历,5年及以上大数据相关工作经验; 2. 精通大数据生态相关技术,具有长时间的实战、维护、调优的能力,包括但不限于Hadoop, Spark, Flink, Kafka, ELK, Impala等,有docker,k8s使用经验优先考虑; 3. 精通并熟练使用java、python、SQL, 能独立承担较大模块的设计、核心功能开发、上线工作; 4. 热爱学习,具备开阔的技术视野, 了解大数据领域最新技术动态; 5. 较强的抗压能力;
  • 25k-50k·13薪 经验3-5年 / 本科
    汽车丨出行 / 未融资 / 150-500人
    职位描述: 岗位职责: 1、负责数据质量保证工作,以及各类算法测试工具的开发和探索; 2、根据实际的测试业务需求进行数据模型测试工作,并持续进行模型的优化验证; 3、能够根据实际业务需求产出完备的测试方案,并制定可执行测试计划; 4、能够根据测试需求快速开发测试脚本、工具或平台; 5、独立建设大数据平台及相关服务的自动化测试框架建设、自动化测试开发工作。 职位要求: 岗位要求: 1.了解熟悉hadoop/hbae/torm/park等分布式计算技术,熟悉其运行机制和体系结构 2.有两年以上测试经验,熟悉自动化测试等主流测试工具和方法论; 3.熟悉一门语言,熟悉开发过程中的主要问题; 4.具备较强的技术前瞻性,了解测试技术的发展趋势,以及业内热点测试理念和技术; 5.能结合行业发展趋势,促进团队质量保障效率和团队技能的提升; 6.对数据敏感,有良好的沟通表达能力和跨团队协调能力,乐于寻求挑战和突破自我; 7.大厂经验优先;
  • 25k-40k·14薪 经验5-10年 / 本科
    电商平台 / C轮 / 2000人以上
    岗位职责: 1.负责电商流量域数据仓库及模型建设和设计,并根据需求变化和业务发展,持续优化模型; 2.负责电商流量域数据仓库模型代码开发、部署,并对数据质量进行管理和优化; 3.提升电商流量域数据质量和运营效率,参与相关事件应急响应; 4.参与大数据体系的建立以及配套系统平台的建设与运营。 岗位要求: 1.计算机或信息技术相关专业,大学本科及以上学历; 2.4年以上大数据数仓开发相关工作经验; 3.有扎实的数据仓库理论功底和丰富的数据治理实战经验,能够围绕业务和产品特性建模并解决实际问题; 4.熟悉大数据系统组件(如Hive、MapReduce、Spark、HBase等),具备编写、优化复杂SQL的能力; 5.了解实时处理技术相关组件(如Kafka、Flink等); 6.负责过大型数据平台或数据仓库设计优先。
  • 消费生活 / 上市公司 / 2000人以上
    美团平台汇聚美食、外卖、酒店旅游、电影、打车、共享单车、休闲玩乐、美容美发等200多个品类和900万活跃商家,是具有全国影响力的零售科技平台。 我们团队不仅负责美团App的用户增长、大前端技术基础设施建设、公司语音和智能交互技术及产品研发,还承担了多条业务线的产品设计及品牌营销职责,同时整合地图服务部、客户服务和体验部等部门,致力于用科技提升美团数亿消费者、数百万商家、骑手、司机和团长的服务体验。美团平台拥有高并发、多业务的复杂场景,为技术深度优化提供了最佳实践可能。这里有简单、讲逻辑、有爱的团队,更是一块理想的实战场地,舞台广阔,欢迎你来尽情施展。 岗位职责 1、负责服务端或大数据方向的测试工作,包括地图相关后台服务或数据平台的功能测试、接口测试、策略算法测试、性能测试及ETL测试等 2、全面把控产品质量,设计针对不同产品的质量保障和测试策略,规范整体测试流程、完善发布流程 3、维护测试环境及测试数据, 参与code review,参与生产环境的故障应急、排查和修复 4、从业务中提炼效能工具需求,引进和开发测试工具来提高整体需求迭代效率,完成工具推广使用和质量数据运营 5、参与服务端或大数据测试体系建设,参与团队技术规划和质量工具平台开发,提升产品质量和研发效率 岗位基本需求 1、计算机或相关专业,本科以上学历 2、三年以上后台服务开发或测试经验,有大型软件项目或互联网软件研发经验 3、有良好的编程能力(熟练掌握Java编程,并熟悉Ruby/Python/JavaScript/Shell等脚本编程中至少一种) 4、对服务端接口自动化、流量回放平台、监控体系、Tracing 链路体系、全链路测试等某一方向有深入理解 5、了解软件测试的行业动态,熟悉常见的软件测试方法论、设计模式、微服务架构等 6、结果导向,自驱力强,具备良好的团队合作精神,能够分解复杂问题并带领团队拿到结果 7、对技术有浓厚兴趣,乐于构建工具或对工具做改造(Hack精神) 具备以下者优先 有大数据处理、地图服务端或数据生产服务等领域测试经验者优先 岗位亮点 业务方向多、专业性强、成长空间大、团队氛围好 其他补充信息 美团地图服务部是美团重要产品研发团队,承载来自美团各业务及用户的地图服务需求。 核心职责包括 1、为美团各业务提供业务定制化解决方案; 2、建设贴合业务需求的基础服务能力,以及对应业务需求的定制化数据生产服务; 3、构建公司级LBS大数据能力,挖掘美团自身数据价值优势,形成地图和业务的有效循环; 4、同时不断优化终端地图体验,提升美团用户消费决策效率。 我们欢迎优秀的你加入,共创美团的未来!