• 35k-60k·13薪 经验10年以上 / 本科
    数据服务 / D轮及以上 / 150-500人
    1、精通java/scala等编程技术,熟悉常用算法,熟悉多线程;有分布式开发的实践经验; 2、有技术追求,coding能力强,有很强的问题解决能力; 3、有主流大数据计算引擎(包括但不限于Spark、Flink、Hive、Impala等)实际应用经验,对原理有比较深入的理解,有调度(或ETL)系统、引擎平台的产品化、二次开发的经验; 4、有大规模集群分布式数据库(hbase、kudu等),或者minio、ceph等分布式存储有应用或二次开发的实践经验的加分; 5、对数据处理(实时/离线)、数据仓库(数据湖)、数据分析等业务处理过程有深刻体会,对业界的发展趋势有独立见解的加分; 6、对 Azure Data Factory、Google Cloud DataFlow、Ali DataWorks等类似产品有经验的加分; 7、对k8s调度机制有深入实践,对 argo、kubeflow等引擎有实践经验的加分; 8、对金融领域的规则引擎、决策引擎、风控引擎等产品有开发、产品经验的加分; 岗位职责: 1、参数批处理/实时处理平台 data pipeline 、data flow、规则引擎等产品的产品设计、架构设计、核心开发等工作; 2、参与Spark、hive、Spark Streaming、flink、kafka、hbase、kudu、impala等组件的应用架构设计、专家支持等工作; 3、参与大数据离线/实时计算平台、数据中台、数据湖等平台系统的应用架构优化、性能改进、功能扩展、故障分析等工作; 4、参与其他任务;
  • 25k-50k 经验不限 / 不限
    文娱丨内容 / D轮及以上 / 2000人以上
    职位职责: 1、负责字节跳动面向企业客户的实时数据体系建设,对长中短期工作目标、工作方法和结果负责; 2、深入理解企业客户的业务场景,建立并不断优化面向企业客户的整体离线、实时数仓、数据服务解决方案,降低开发、运维成本; 3、具备客户现场交付能力,负责大数据架构拆解落地、技术侧沟通协调工作。 职位要求: 1、具有3年以上数据开发经验,并且具有复杂场景的方案设计和开发经验; 2、精通并行计算或者分布式计算原理,熟悉高并发、高稳定性、可线性扩展、海量数据的系统特点和技术方案; 3、深入了解Spark、Flink或Spark Streaming,有大规模实践经验; 4、对数据湖、MPP引擎有落地实践经验; 5、拥有扎实的计算机和Java语言基础,熟悉主流的Java框架,包括Spring、Netty、Mybatis、Guava等等,了解JVM的基本实现原理; 6、善于沟通,对业务敏感,能快速理解业务背景,具备优秀的技术与业务结合能力; 7、有任一行业的企业客户技术服务经验优先。
  • 40k-80k 经验不限 / 本科
    文娱丨内容 / D轮及以上 / 2000人以上
    职位职责: 1、构建国际化短视频业务的大数据安全体系; 2、作为团队架构师/负责人,负责抽象短视频业务在安全与隐私场景下的数据需求,领导产品的设计、研发等。 职位要求: 1、7年以上工作经验,具备在一线互联网公司的大数据团队工作经验,有数据安全和隐私合规背景佳; 2、具备大型横向项目协作能力和成熟的团队管理能力; 3、熟悉企业级数据仓库和大数据组件,并精通其中的一项或多项,如Hive、Spark、Flink等; 4、英文工作能力是加分项。
  • 25k-40k·15薪 经验5-10年 / 本科
    移动互联网,企业服务 / 不需要融资 / 500-2000人
    职责描述: 1.负责基于图数据库的大数据应用开发,涉及OLTP应用和OLAP应用; 2.能设计和实现基于图数据存储的数据创新架构; 3.能根据业务需求优化数据库的查询、存储性能。 4.负责基于大数据开发工具设计和开发数据应用。 任职要求: 1.具有计算机、软件、网络等相关专业本科及以上学历; 2.熟悉Java开发语言技术栈,熟悉大数据开发和设计; 3.熟悉Titan/JanusGraph、Neo4j、NebulaGraph等至少一种图数据库,有开发或使用经验; 4.熟悉大数据开发生态,HBase、Spark、MapReduce、ES、Flink等大数据平台与工具,有相关开发或使用经验; 5.具有良好的快速学习能力,具有责任心,有团队合作精神; 6.具有三年以上图数据库应用开发经验者和基于Spark的Graphx的大规模图分析经验优先;
  • 25k-39k 经验3-5年 / 本科
    金融 / 未融资 / 500-2000人
    工作职责 1、负责架构选型和技术预研,参与完成大数据平台相关产品开发和项目交付; 2、指导并参与核心代码的书写,组织解决开发过程中遇到的重大技术问题; 3、把控开发进度,按时完成提测和系统上线; 4、为团队提供技术指导,负责大数据平台的持续迭代优化; 5、负责大数据分析挖掘平台的技术选型和架构设计,以及大数据平台工具、数据服务和数据可视化能力的规划建设。 任职要求 1、本科及以上学历优先,4年及以上大数据相关系统研发经验; 2、熟练掌握一种或以上开发语言,如Python、Java、Go等; 3、熟练掌握大数据分布式存储技术(如HDFS/HBASE/cassandra/Kafka等),熟悉Hadoop生态圈,熟悉主流的数据仓库建模理论、流式处理技术以及海量数据采集与处理技术; 4、熟悉大数据的完整处理流程者优先,包括数据的采集、清洗、预处理、存储、分析挖据和数据可视化; 5、有云计算相关大数据平台化、数据仓库开发经验者优先; 6、具备较强的工作责任心和团队合作意识,抗压能力强,具备良好的协调沟通能力。
  • 20k-40k 经验3-5年 / 本科
    移动互联网 / 不需要融资 / 2000人以上
    工作职责 1、负责数据需求调研、数据采集分析、商业分析及数据建模等工作,探索数据价值和行业机会; 2、负责结合客户业务场景和数据现状, 规划大数据分析模型解决具体业务问题及推动落地实施; 3、负责与客户沟通,收集、拆解需求,输出产品需求文档,推进项目进度; 4、有数据类产品工作经验,产品形态包括但不限于业务标签梳理、基于bi工具的报表报告、风险预警模型、可视化大屏; 5、理解数据仓库分层设计架构与维度建模理论; 6、有较强的业务分析、总结能力,熟悉工商、市场监管领域业务和数据建设经验优先 。 任职要求 1、本科及以上学历,3-5年产品工作经验,有责任心; 2、3年以上数据产品经验,具备优秀的需求分析、业务学习、独立思考能力; 3、对数据敏感,了解从业务模型到数据模型的设计及开发工作,有数据分析、AI人工智能、知识图谱相关经验佳; 4、具备良好的沟通表达能力、逻辑思维能力个应变能力,良好的团队协作精神,积极主动做好内外沟通,组织推动问题解决; 5、会SQL,Python,Excel等编程语言能力优先。
  • 25k-32k 经验5-10年 / 本科
    金融 / 上市公司 / 2000人以上
    工作职责 1、负责企业级数据平台整体架构,包括计算引擎、存储引擎、数据开发平台等方向的技术体系规划、架构设计及方案落地,为业务产品和算法开发提供高效的数据系统支撑; 2、负责大数据服务体系的环境、流程、规范和配套工具系统建设,保证数据研发体系的高效性与生产服务体系的稳定性、高性能、高可用性和可扩展性; 3、负责实时&离线计算框架的创新与落地,包括但不限于以下领域:大规模数据实时化、数据模型组织方式业务化等方面,参与制定并实践团队的技术发展路线; 4、负责与业务团队协同规划大数据平台能力开发,为业务平台提供数据交换,数据服务,数据开发等能力,参与制定并实践团队的技术发展路线; 5、关注业界最新技术,深入理解业务特征,前瞻性的进行技术预研与引入,支持业务的高速发展;建立良好的公司内外的业界技术影响力;参与培养未来数据人才;有效辅导团队,提升数据研发能力。 任职要求 1、计算机相关专业本科以上学历优先;8年以上大数据系统开发、设计经验,5年以上架构设计经验,金融行业从业经验; 2、精通大数据全栈架构,精通一种或多种分布式计算、存储、调度框架或工具(Yarn/Hive/MapReduce/Spark/Flink等),通读过其中之一的源码,有分布式系统的开发经验; 3、具有扎实的编程功底,熟悉常用的算法和数据结构,精通Java/GO/Python其中一门编程语言,有较强的分布式计算基础和算法工程能力,并具备丰富的实战经验; 4、负责过PB级别大数据平台整个产品线的业务架构工作,负责过海量数据平台上高可用、高性能分布式系统的架构开发,组织过中等以上规模项目,有互联网大数据平台建设等技术背景者优先; 5、熟悉常见的互联网,大数据、云计算、人工智能等技术和知识,优秀的业务理解和分析能力,有关键技术攻关的决心和能力; 6、有良好的团队沟通和协作能力,良好的自驱力和学习能力;主动积极,富有热情,能主动积极的思考和推动数据价值的落地。
  • 30k-50k·15薪 经验5-10年 / 本科
    金融业 / 不需要融资 / 50-150人
    岗位描述: 1.负责大数据平台组件、数据中台、大数据应用、流式数据处理等领域的开发工作。 2.参与大数据技术验证、方案选型、架构设计。 3.负责大数据领域的技术平台的迭代与更新,促进大数据应用能力提升 任职要求: 1、3-5年以上,计算机技术类、信息技术类等相关专业本科及以上学历并取得相应学位; 2、熟悉java和shell;掌握MapReduce处理问题思想,熟悉分布式计算模型或有高效索引技术经验者优先。 3、熟悉Spark job性能分析和调优,有spark使用和管理经验优先; 4、熟悉Hadoop体系结构、有Hadoop、hive集群使用和管理经验; 5、有AWS EMR使用经验,了解AWS上面大数据产品优先。
  • 15k-27k 经验3-5年 / 大专
    企业服务 / 不需要融资 / 2000人以上
    大数据开发工程师 岗位职责: 1 理解分析业务需求,理清业务链路,明确业务与数据源的关系 2 负责数据仓库模型建设,设计符合不同层次要求的业务数据模型 3 负责数仓开发,理清ETL实现链路,对数据开发中的技术问题进行优化 4 负责在大数据平台中,发现和提出离线与实时端到端的各项技术方案 5 负责数据开发到交付过程中的整条业务链路,主动发现和解决问题 6 按期完成各项数据开发的任务 任职要求: 1 计算机、数学、统计学相关专业,大专及以上学历 2 3年以上工作经验,熟悉或精通数据仓库的建设方法、建模理论(维度建模或范式建模) 3 精通SQL的编写,有离线或实时数据开发经验,能基于数据平台进行SQL的调优 3 熟悉各种大数据平台组件,包括不限于hadoop 、hive、spark、flink、hbase、Kafka等 4 熟悉各种关系型数据库,包括但不限于 DB2、Oracle、Mysql等 5 熟悉一种或多种编程语言,如Java 、Python,完成相关脚本的编写 6 熟悉各类的OLAP计算引擎,包括但不限于Kylin、ClickHouse、Presto 等 7 有企业级数据仓库的实施经验,有保险行业实施经验为加分项 8 有阿里云产品Dataworks 、Hologres 等产品开发经验为加分项 9 善于沟通表达,有钻研精神
  • 25k-30k 经验5-10年 / 本科
    移动互联网 / 不需要融资 / 500-2000人
    岗位职责: 1、负责征信数据同步、处理。 2、参与征信数据仓库建模、优化、迭代,满足多方数据的存储及数据应用需求。 3、负责征信数据仓库开发,包括离线数据仓库、实时数据仓库。 4、负责数据应用类产品开发,提供数据支持。 5、协助数据分析师完成数据的提取,加工,支持数据分析工作。 任职要求: 1、本科以上学历,计算机相关专业,5年以上大数据开发经验。 2、熟悉大数据平台体系架构,精通离线、实时数据开发。 3、精通hive、spark、flink、presto、ES等两种以上大数据组件及技术。 4、有丰富的数据仓库设计及建模经验,熟悉企业征信数据优先。 5、至少掌握一门开发语言,如:java、python. 6 善于沟通,与他人协作,共同解决问题,推动业务发展。
  • 20k-40k·14薪 经验5-10年 / 本科
    电商平台 / C轮 / 2000人以上
    岗位职责: 1.大数据基础平台、应用平台功能设计和开发。 2.负责大数据平台及组件的调研选型,部署,日常监控及问题解决。 3.参与海量数据处理方案设计,提供业务系统技术支撑。 任职标准: 1.本科以上,计算机相关专业。 2.至少精通java/scala其中一种开发语言,熟悉主流后端开发框架。 3.精通大数据平台常用框架(hadoop/hive/spark/hbase/flink/presto/clickhouse/kafka)和组件的原理及常用应用场景,至少有3年以上大型生产系统上管理经验。 4.熟悉linux系统,熟悉常用的操作系统命令和shell脚本编写。 5.责任心强,有较强的沟通能力和团队合作精神。
  • 电商平台 / C轮 / 2000人以上
    岗位职责: 1.大数据基础平台、应用平台功能设计和开发。 2.负责大数据平台及组件的调研选型,部署,日常监控及问题解决。 3.参与海量数据处理方案设计,提供业务系统技术支撑。 任职标准: 1.本科以上,计算机相关专业。 2.至少精通java/scala其中一种开发语言,熟悉主流后端开发框架。 3.精通大数据平台常用框架(hadoop/hive/spark/hbase/flink/presto/clickhouse/kafka)和组件的原理及常用应用场景,至少有3年以上大型生产系统上管理经验。 4.熟悉linux系统,熟悉常用的操作系统命令和shell脚本编写。 5.责任心强,有较强的沟通能力和团队合作精神。
  • 12k-20k 经验3-5年 / 本科
    软件服务|咨询 / 未融资 / 500-2000人
    岗位职责: 1、负责大数据平台搭建、架构设计、研发、测试、业务应用等工作; 2、规划大数据平台的架构和部署需求,保障系统的高可用、扩展、安全、性能、伸缩性等; 3、及时与产品经理/项目经理沟通需求,分析梳理业务场景,协助需求侧解决各种业务实现问题; 4、负责核心技术难题的攻关,攻克团队遇到的技术难题,持续对系统进行性能优化及稳定性提升; 5、参与对平台的运维和运营的支撑体系的制定和实施,对线上突发问题进行及时响应并解决; 6、负责海量数据和大规模业务系统的实时/离线数据处理框架开发与优化以及大数据平台安装和运维; 7、配合和支持业务团队在大数据领域的创新和探索,探索大数据分析前沿技术,提供基于数据驱动的分析服务能力; 任职要求: 1、本科及以上学历,4年以上相关工作经验; 2、热衷于产品研发和技术创新, 具有很强的学习能力并有强烈的责任意识和开放的心态, 工作态度好,积极向上者为先; 3、具备大型分布式、高并发、高负载、高可用系统设计、开发及调优经验,有大数据平台的软件设计、开发、调优、部署经验; 4、熟悉掌握 HBase、Hive、MapReduce、Flink、Spark、Storm、Kafka、 Zookeeper、K8S、ES、Redis 等相关技术及其生态圈,具备相关平台项目集成开发经验优先; 5、熟练掌握JAVA、Python等开发语言中的一种,具有Linux后台开发经验,有大规模系统开发经验; 5、熟悉容器、人工智能、微服务等新技术,有互联网运营平台架构设计或大数据公司同类 平台或产品设计、开发经验者优先; 6、精通SQL,熟悉常用的关系型数据库、非关系性数据库和数据仓库,具有SQL性能优化经验; 7、具有良好的学习能力、沟通能力、团队合作意识; 8、善于沟通,对业务敏感,能快速理解业务应用场景,具备优秀的技术与业务结合能力;
  • 30k-60k·16薪 经验5-10年 / 本科
    电商 / 不需要融资 / 150-500人
    工作职责: 1、负责电商交易、流量等多个产品线的数据体系建设 2、负责底层数据平台建设,包括离线数仓/实时数仓/OLAP系统等 3、负责BI系统的设计和建设,向业务和管理层提供数据可视化展示 4、深度理解大数据体系建设,构建国际化的数据基础设施和数据应用体系 5、负责优化和改进研发流程,提高开发人员的效率 6、负责团队培训、相关人员的管理 任职要求: 1、本科以上学历,计算机、数学等相关专业,具备数据仓库开发经验; 2、熟悉 hadoop、hive、spark、flink、kafka、es、redis、zookeeper 等大数据相关技术及中间件; 3、熟悉阿里云大数据组件,如maxcompute、tablestore、hologres等经验优先; 4、有埋点数据采集,用户行为数据分析等项目经验优先; 5、有扎实的SQL基础,熟悉至少一种数据库 oracle、mysql、hive、maxcompute; 6、熟悉ETL设计开发流程,至少掌握一种ETL工具 kettle,datax等; 7、熟练使用Python、Shell、Java中的一种; 8、了解Hadoop生态体系,具备离线/实时计算经验; 9、良好的沟通协调能力,能承受一定的工作强度与压力。
  • 40k-80k·16薪 经验5-10年 / 本科
    电商 / 不需要融资 / 150-500人
    大数据leader 工作职责: 1.构建从数据采集、数据接入、数据处理到数据统计和服务的完整数据解决方案,实现数据闭环,提升数据价值 2.搭建处理海量数据的大数据平台,能够持续优化并改进现有的技术框架,保证高可用、稳定、低延迟的优质服务体验 3.推动数据治理,规范化和标准化数据的开发、访问和使用 任职要求: 1.本科以上学历,5年以上大数据项目开发经验 2.熟悉大数据平台体系架构,精通离线(Hive,Spark)和实时(Flink,Spark Streaming)数据开发,熟悉Hadoop,Flume,Sqoop,Kafka,ES,Redis等大数据组件和技术 3.有搭建数据开发框架和性能调优经验,能够设计和构建业务复杂、高并发、大数据量的数据处理系统 4.有丰富的数据仓库设计和数据建模经验,有完整指标体系搭建经验的优先 5.有一定的数据治理经验,包括元数据管理,数据标准,数据安全,数据质量等 6.熟练掌握Java,有Scala或Python语言开发经验优先 7. 擅于沟通和解决问题,对于业务可以进行抽象总结,推动并优化业务发展 具备以下这些优先考虑: Hadoop、Spark、Hive、Flink、Kafka、数据中台、数据开发、数据治理、训练平台