• 数据服务|咨询 / 未融资 / 50-150人
    岗位职责: 1、负责海量数据离线、实时处理系统的开发建设;  2. 负责大数据平台资源规划、权限控制、运维架构设计,为各产品业务提供稳定、高效、安全的运行环境;  3. 负责大数据数据底层技术研究及开发,技术能力输出、技术引导、技术风险识别;  4. 负责大数据平台建设工作,实践平台战略,包括:平台建设、数据架构实施、数据开发等;  5. 跟踪大数据前沿技术和产品,与业界先进技术保持同步;  6. 跨团队项目协调。 任职要求: 1.大专及以上学历,计算机相关专业,3年及以上大数据架构工作经验,参与实施过1个以上大数据平台项目;  2. 熟练使用Flink,并且对Flink的底层原理有很深的理解,包括Runtime、SQL&Connectors、State、CK等,有结合 Iceberg 应用优先;  3. 熟悉大数据领域生态,如:Spark、Hive、HDFS、ClickHouse、Kylin、ES、Presto、Iceberg;  4. 熟练使用java、python、scala等编程语言,熟练操作linux系统,具备上述工具在linux下的部署实施经验;  5. 具有良好文档编写能力,能输出标准、准确的手册供部门实施人员参考;  6. 良好的团队协作与沟通能力。 备注:有基于CDH平台研发背景者优先
  • 25k-40k 经验不限 / 本科
    文娱丨内容 / D轮及以上 / 2000人以上
    职位职责: 1、负责字节跳动网络接入大数据体系建设,构建接入网络数据中台,赋能业务; 2、负责字节跳动网络接入数据仓库、实时计算、质量体系、智能归因等系统设计与研发。 职位要求: 1、本科及以上学历,计算机、通信等相关专业,两年以上工作经验; 2、有扎实的编程能力,有优秀的设计和代码品位,有独立的代码实现能力 ; 3、深刻理解计算机原理,有良好的数据结构和算法基础; 4、熟悉Hadoop/YARN、Hive、Spark、Storm、Kafka 等,有Flink实时处理经验优先; 5、优秀的理解沟通能力,能快速理解业务背景,责任心强,具有良好的团队沟通与协作能力; 6、有大数据处理、数据平台、数据仓库经验者或数据挖掘算法优先。
  • 25k-50k 经验不限 / 本科
    文娱丨内容 / D轮及以上 / 2000人以上
    职位职责: 1、负责头条系产品短视频用户体验的持续优化; 2、构建短视频相关数据仓库,分析和报表系统; 3、设计并优化视频播放QoS数据上报机制,构建面向用户体验的APM系统; 4、通过建设实时数据分析,构建智能播放调度策略和自动报警归因系统。 职位要求: 1、本科及以上学历,计算机、通信等相关专业,两年及以上全职工作经验; 2、有扎实的编程能力,有优秀的设计和代码品位,有独立的代码实现能力 ; 3、深刻理解计算机原理,有良好的数据结构和算法基础; 4、熟悉数据采集、清洗入库、统计计算、Web展示核心要点,可实现指标计算需求; 5、熟悉至少一个分布式框架,如 Hadoop/YARN、Hive、Spark、Storm、Kafka 等,有Flink实时处理经验优先; 6、优秀的理解沟通能力,能快速理解业务背景,责任心强,具有良好的团队沟通与协作能力;; 7、有大数据处理、数据平台、数据仓库经验者或数据挖掘算法优先。
  • 25k-45k 经验5-10年 / 本科
    硬件 / 上市公司 / 2000人以上
    岗位职责: 1、参与开发和设计数据管理平台,支持各种大数据和数据库系统,参与管控平台、开发平台和云服务等子系统研发工作; 2、参与大数据内核系统的研发工作,基于开源体系,针对ETL、AI、实时等众多场景深度开发或者优化存储、计算等子系统,打造云原生、分布式、可扩展、高性能的大数据产品服务; 3、参与数据库内核系统的研发工作,基于开源体系,针对事务处理、多模和时序等众多场景进行深度开发、优化,打造云原生、高性能、稳定可靠的数据库产品服务。 任职资格: 1、熟练掌握Java/C/Go等中的一种或多种编程语言,有清晰的编程思路,兼顾性能和测试Sense的更佳; 2、熟悉Linux操作系统,有扎实的数据结构、算法等编程基础,有分布式、高并发、高可用、高可靠等实践经验更佳; 3、了解大数据系统,包括但不限于Hadoop/Spark/Flink/Hudi/Impala/Clickhouse中一个或者多个有实践和开发经验者优先; 4、了解数据库系统,包括但不限于MySQL/PG/MongoDB/TSDB/HBase等中的一个或者多个有实践或者开发经验者优先; 5、了解数据采集/数据计算/管控平台/SQL开发平台/数据管理平台等中的一个或者多个有实践或者开发经验者优先; 6、了解云服务架构,对云原生大数据、数据库服务有一定理解或者实践经验者优先; 7、对代码或者系统有钻研精神、对技术有好奇心,在前端/后端某个领域或者开源社区有影响力的更佳; 8、良好的沟通和团队协作能力,有上进心、能够脚踏实地、长期发展的。
  • 数据服务|咨询 / C轮 / 150-500人
    职位描述: 1. 负责大数据基础平台架构建设和研发; 2. 负责大数据存储系统和计算引擎相关研究、特性研发和性能调优,偏向于存储引擎; 3. 负责大数据系统整体及组件的性能、效率、稳定性分析与优化。 职位要求: 1. 熟悉HDFS/Hive metastore/Presto/Kudu/Kafka等大数据技术和组件,有3年以上大数据组件的使用和二次研发经验; 2. 熟悉kudu/对象存储/数据湖(Hudi/Iceberg等)等多种存储解决方案,有源码级别的特性增加或调优经验; 3. 熟悉Presto/Impala/Clickhouse等OLAP引擎, Spark/Flink计算引擎; 4. 具备扎实的计算机基础,熟悉分布式系统研发; 5. 精通Java研发语言,具有良好的编程研发能力; 6. 对新技术敏感,有较强的学习能力和解决问题的能力,乐于学习分享,有较好的沟通能力和执行力。
  • 数据服务|咨询 / C轮 / 150-500人
    职位描述 1. 负责大数据基础平台架构建设和研发; 2. 负责大数据存储系统和计算引擎相关研究、特性研发和性能调优,偏向于存储引擎; 3. 负责大数据系统整体及组件的性能、效率、稳定性分析与优化; 职位要求 1. 熟悉HDFS/Hive metastore/Kudu/Kafka等大数据技术和组件,有3年以上大数据组件的使用和二次研发经验; 2. 熟悉MPP架构,熟悉Presto/Impala/Clickhouse等OLAP引擎, Spark/Flink计算引擎,有源码级别的特性增加或调优经验; 3. 熟悉kudu/对象存储/数据湖(Hudi/Iceberg等)等多种存储解决方案. 4. 具备扎实的计算机基础,熟悉分布式系统研发; 5. 精通Java研发语言,具有良好的编程研发能力; 6. 对新技术敏感,有一定独立分析,技术研究能力,具有良好的团队合作精神; 7. 能够深刻理解业务,善于利用技术实现相关业务价值;
  • 数据服务|咨询 / B轮 / 150-500人
    岗位职责 1. 负责数澜EMR的架构设计和研发; 2. 管理和优化Hadoop、Spark等集群,计算作业的调优,保证集群和平台的高效和稳定; 3. 负责Hadoop、Spark、Flink的功能、性能和扩展,解决并实现业务需求; 4. 调研和把握当前的最新技术,将其中的先进技术引入到自己的平台中,改善产品,提升竞争力。 岗位要求 1. 精通Java,熟悉Scala、Python语言加分。 2. 熟悉Hadoop、Spark、Flink、Kafka、Presto、Kylin、ES、Hive等三门以上,熟悉源码、有二次开发优先。 3. 有数据传输、开发、计算、治理、安全等平台设计和开发经验的优先。 4. 有数据分析、机器学习、数据挖掘经验者优先。 5. 擅于沟通和解决问题,乐于总结分享,有想法,有冲劲,有团队精神和主人翁意识和责任感。 6. 喜欢去看及尝试最新的技术,追求编写优雅的代码,从技术趋势和思路上能影响技术团队。
  • 15k-20k 经验3-5年 / 大专
    数据服务|咨询 / 未融资 / 50-150人
    大数据开发工程师(数据中台)(JAVA方向) 岗位职责: 1、参加大数据分析平台的设计与开发,解决海量数据面临的挑战;  2、负责在大数据平台源数据层基础上,基于模型运用大数据技术,进行数据清洗、计算,提供稳定可靠的数据。 岗位要求: '1、熟悉Hadoop/Kafka/Hdfs/Hbase/Kudu/Hive/Spark/Impala/Flink等大数据技术以及数据挖掘策略与算法;  2、熟练使用python进行复杂业务逻辑的数据处理工作,具备海量数据处理以及性能优化的能力;  3、熟练使用MySQL、Redis、HBase;   4、思路清晰,具备良好的沟通能力和理解能力,较强的学习能力以及快速解决问题的能力;  5、计算机相关专业,3年以上大数据开发相关经验。
  • 数据服务 / 未融资 / 500-2000人
    技能要求: 1、3年以上需求分析经验/产品设计经验/数据建模经验之一; 2、熟悉运营商通信业务(熟悉LTE业务优先),有网优经验或做过信令分析系统项目优先; 3、正规大学本科及以上,计算机或通信相关专业,35周岁以下。有良好的沟通意识,优秀的沟通表达能力,应变能力强,团队配合精神,能够在压力下工作 岗位职责: 需求分析与业务支撑,包括应用系统的功能规划设计、数据建模、系统使用的Q&A、数据验证与保障等。具体工作内容如下: 1)需求调研分析,对局方或应用厂家调研分析需求,输出需求说明文档,并与开发人员沟通解说需求; 2)平台模型设计:根据平台接入的XDR数据,设计平台公共模型,并提交开发人员; 3)需求进度管理,监督开发人员对需求完成的进度和质量; 4)需求交付管理,负责需求内部验收和外部验收; 5)业务支撑,对外部人员使用系统功能或数据上的疑问进行答疑支撑。
  • 30k-60k 经验5-10年 / 本科
    内容资讯,内容社区,社交媒体 / C轮 / 150-500人
    我们正在寻找一群高级数据开发工程师,致力于打造业界领先的数据平台,支撑亿级月活的移动 App,服务公司核心业务。我们提供业界有竞争力的薪资和灵活透明的工作氛围,团队均来自海内外知名企业或高水平大学。如果您正在寻找这样的创业氛围或团队,欢迎加入我们。 岗位职责: 1、构建海量数据实时 OLAP 查询引擎解决方案,支持公司业务分析与指标的秒级产出,构建适用于万亿级数据规模的核心数据分析产品; 2、负责分析系统瓶颈与架构的合理性,参与超大规模离线数据计算、存储、查询、可视化解决方案的设计、研发; 3、参与海量数据处理,负责开源新技术的验证实施,提供业务系统数据支持; 4、参与数据仓库的分层设计、模型建设以及优化;主数据,元数据设计,数据治理和优化,构建结构合理完善可扩展的数据仓库; 任职资格: 1、本科及以上学历,拥有 5 年以上大数据研发经验; 2、具备较强的编码能力,掌握 Java/Python/Scala 开发语言之一,熟练使用 SQL 进行数据访问; 3、深入了解至少一种大数据 OLAP 框架,如Doris/Clickhouse/Presto 等,并在业界有领先的实践经验; 4、熟悉 Hadoop 生态系统基础设施:Flink、Kafka、Spark 等; 加分项: 1、有开源社区源码贡献者优先,有存算分离改造经验优先; 2、有支撑每日亿级别数据的大数据系统搭建经验优先;
  • 25k-30k 经验5-10年 / 本科
    企业服务,人工智能,信息安全 / 不需要融资 / 150-500人
    岗位职责: 1、管理公司大数据集群,提供高可用、高性能大数据集群系统,并保障系统稳定运行。 2、负责大数据集群各服务自动化运维与监控工具,日常监控、数据备份、数据监控、数据报警。 3、负责大数据平台集群的配置优化、权限管理、故障处理、迁移扩容、紧急情况处理等。 岗位要求: 1、熟悉Hadoop、Hive、Kafka、Spark、Flink等组件运行原理,有相关运维部署、配置优化经验; 2、熟悉Linux操作系统,精通shell脚本; 3、具备PB级大数据集群运维经验; 4、五年以上大数据运维相关经验; 5、有大数据集群优化、资源调度优化、迁移扩容经验者优先; 6、有Java/Python、docker/k8s能力者优化;
  • 22k-32k 经验5-10年 / 本科
    企业服务,人工智能,信息安全 / 不需要融资 / 150-500人
    职责描述: 1、负责公司大数据平台产品的组件开发和维护; 2、负责公司大数据平台产品相关模块的设计及编码工作; 3、负责相关模块环境发布及维护; 4、参与规划与制定后台的框架和技术栈的使用,与团队配合完成整体项目的开发; 5、完成项目相关文档的编写; 任职要求: 1、精通SpringCloud、MySQL、Redis,对常用微服务框架有丰富的应用经验; 2、熟悉presto、clickhouse等查询引擎; 3、熟悉Kafka、Hive、Hadoop、Spark等常规大数据组件使用; 4、熟悉docker、Linux环境的配置和使用; 5、了解大数据任务调度、组件生态; 6、本科及以上学历,5年及以上java或大数据开发工作经验; 7、熟悉spark、flink技术者优先;
  • 20k-40k·20薪 经验5-10年 / 本科
    硬件 / 不需要融资 / 2000人以上
    岗位职责: 1、承接业务团队离线计算、实时计算需求,对外提供稳定、高效的数据服务; 2、负责实时流服务平台、实时数仓的规划、设计、研发和落地; 3、保持技术前瞻性,持续推动实时系统架构的行业先进性; 4、针对具体的业务场景问题,快速设计和实现解决方案; 5、负责工程架构相关新技术方向研究、开发和应用。 任职要求: 1、本科及以上学历,计算机相关专业,6年以上的spark、Flink等相关研发经验; 2、熟悉spark、Flink原理、深入研究底层技术,具有很强的实际问题解决能力; 3、掌握MapReduce系列大数据系统原理,熟练使用HDFS、Hive,Spark,Flink,HBase,Kafka等分布式计算系统,并对于使用场景,优化方式有着深入理解; 4、有数据中台或应用中台设计开发经验者优先; 5、具备优秀的逻辑思维能力,对解决挑战性问题充满热情,善于解决问题和分析问题。
  • 15k-30k·13薪 经验1-3年 / 本科
    IT技术服务|咨询,专业服务|咨询,软件服务|咨询 / 未融资 / 2000人以上
    Solid and proficient skills in Java & Scala Experience using Git, Maven, Shell scripting, Python  Experience of SQL Server / Oracle /PostGes  Experience in Hadoop/HDFS/Hive/Spark  Software development experience and SDLC, Agile & DevOps,CI/CD
  • 工具类产品,内容社区,音频|视频媒体 / 上市公司 / 2000人以上
    岗位职责: 1、深入理解业务,根据业务进行数据建模并实施建设业务数仓; 2、参与数据相关项目的架构设计、需求评审、技术攻坚及优化; 3、负责企业级大数据平台的研发工作;包括数据存储、数据集成、数据开发、数据资产、数据治理等; 4、负责建立数据领域:代码开发、业务流程、质量安全相关标准规范,并推广实施; 5、跨团队/部门协作,系统分析并解决各类大数据平台相关的运行或数据问题;参与数据平台产品的日常运维和技术支持工作。 岗位要求: 1、计算机、数学、统计、数据挖掘等相关专业,***大学本科及以上学历,5年以上大数据分析与挖掘项目经验; 2、精通python/java/php等至少一种开发语言; 3、深入理解hadoop生态圈,精通Hive、Spark、Flink、Presto、Airflow、Clickhouse、Elasticsearch、Kafka、Flume等常用大数据组件; 4、精通Hive SQL或Spark-sql,可根据业务对SQL进行梳理优化; 5、精通数据仓库生命周期及各类建模理论,对数据分析、挖掘、建模及数据质量监控有实际的项目经验者; 6、责任心强,有担当,有良好的编码习惯,遵守团队开发规范和代码规范,良好的逻辑思维能力,具有很强的分析问题和解决问题的能力、团队协作能力和沟通能力; 7、有企业级大数据应用项目经验优先。