• 25k-35k 经验5-10年 / 本科
    居住服务 / C轮 / 2000人以上
    工作内容: 1、负责自如大数据平台组件的运维 2、负责自如一站式大数据开发平台的建设 任职要求: 1、大学本科及以上学历,计算机或相关专业; 2、精通clichouse、hbase运维及封装 3、熟练掌握haoop、atlas、ranger、hive、flink、夜莺监控等大数据组件的运维,对大数据组件具备源码改造能力 4、熟练掌握Java、Python、shell,熟悉springboot; 5、有大数据项目开源社区贡献者优先
  • 20k-35k 经验5-10年 / 本科
    汽车丨出行 / 上市公司 / 2000人以上
    职位描述 1. 负责大数据平台的运维,包括部署、管理、优化等,保障平台稳定运行; 2. 负责大数据集群的架构升级、容量规划、资源管理、成本优化、业务管控; 3. 理解大数据平台架构和业务流程,发现并解决系统问题或瓶颈; 4. 开发自动化运维、监控报警、故障处理脚本和工具,优化整个运维的流程; 岗位要求: 1. 本科及以上学历,5年以上规模集群管理和运维经验; 2. 熟悉Linux操作系统,熟悉TCP/IP基本原理,有系统调优经验; 3. 掌握Shell、Python等至少一门常见脚本语言; 4. 熟悉常用的监控工具,熟悉自动化运维工具(如Saltstack/Ansible/Puppet等),有二次开发能力者优先; 5. 熟悉hadoop/hbase/elasticseach等大数据组件的架构及基本原理; 6. 对运维体系有一定认识,善于思考总结,做事积极主动,责任心强、细心谨慎,能独立解决问题。
  • 35k-70k 经验3-5年 / 本科
    内容资讯,短视频 / D轮及以上 / 2000人以上
    职位职责: 1、 负责相关业务大数据项目整体架构规划; 2、 负责指导工程师进行技术验证与实现,关键技术问题的攻关,解决项目开发过程中的技术难题; 3、 负责项目对外技术沟通,具有较强的沟通,表达和文案能力; 4、 根据公司项目和业务发展特点,负责研究相关大数据前沿技术。 职位要求: 1、 熟练使用Hadoop、Hive、spark,flink等大数据框架,熟悉SQL、Java、Python等编程语言; 2、 有PB级大数据处理实战经验,熟悉整个大数据的完整处理流程,优秀的问题解决能力; 3、 善于沟通,对业务敏感,能快速理解业务背景,具备优秀的技术与业务结合能力; 4、 6年以上数据仓库或大数据开发,丰富的实时或者离线数据体系建设经验。
  • 35k-60k·14薪 经验5-10年 / 本科
    移动互联网,企业服务 / 不需要融资 / 500-2000人
    岗位职责: 1.负责客户需求的沟通与分析工作,为客户提供大数据的架构和技术解决方案; 2.负表业务场景分析,问题定位和数据挖掘等工作,为提供客户提供大数据的解决方案; 3.负责大数据平台,数据仓库,大数据中台、存储计算引擎等相关产品设计和规划落地。 岗位要求: 1、**本科以上学历,8年以上工作经验,主导过大数据平台产品的设计与开发工作,至少同类2年以上经验; 2、熟练掌握YARN、Hive、HBase、Kafka、Flink 、Spark、lceberg等大数据引擎和平台的常用使用方法(至少精通三个以上的大数据常用工具和框架) 3、对数据仓库,存储计算引擎有深入的理解,孰悉不同存储类型,计算引擎特征,以及所能解决的适应场景; 4、深度参与或主导过大数据平台、数据治理、数据中台等产品建设者优先; 5、具备较强的需求分析和技术规划能力,高度的抽案设计能力,思路清晰,善于思考,能独立分析和解央问题,具备良好的团队合作精神; 6、对新技术敏感,具备一定的技术预见和前瞻性,对不同的产品有自己的见解。
  • 25k-50k 经验3-5年 / 本科
    企业服务 / 未融资 / 15-50人
    岗位职责 1、设计、开发和维护企业级大数据平台和解决方案,包括数据采集、数据存储、数据处理和数据分析等。 2、使用Flink等流式计算引擎,实现实时数据处理和流式分析,提供实时的业务洞察和决策支持。 3、针对OLAP需求,设计和实现数据立方体、多维数据模型和数据聚合查询,以支持复杂的联机分析处理。 4、编写高效且可扩展的大数据处理和分析代码,提高数据处理和分析的效率和质量。 5、与数据科学团队合作,开发和实现数据处理和分析的需求和解决方案。 6、进行数据模型设计和数据架构优化,提高数据存储和计算的性能和可扩展性。 7、负责数据质量和数据安全的管理和监控,确保数据的合规性和机密性。 8、研究和探索新的大数据技术和解决方案,以不断提高大数据处理和分析的效率和质量。 9、建立和维护技术文档和标准,确保大数据开发的规范和一致性。 任职要求 1、本科及以上学历,计算机科学、软件工程或相关领域。 2、3年以上大数据开发经验,熟悉大数据技术栈和工具,如Hadoop、Spark、Kafka、Hive等。 3、熟悉流式计算引擎Flink,具备在实时数据处理和流式分析方面的经验。 4、了解OLAP(联机分析处理)的概念和技术,具备数据立方体和多维数据模型的设计和开发经验。 5、熟练掌握编程语言,如Java、Python或Scala,具备良好的编码和调试能力。 6、熟悉大数据处理和分析的各种技术和工具,如数据流处理、批处理、数据仓库等。 7、具备良好的数据库和SQL技能,熟悉关系型数据库和NoSQL数据库。 8、具备良好的沟通和团队合作能力,能够与不同背景和专业的人合作,解决技术和业务问题。 9、具备较强的学习能力和自我驱动能力,热爱技术研究和创新。 10、有较好的英文阅读和写作能力,能够阅读和编写英文技术文档。 必备条件 1、在Flink和流式计算领域有深入的研究和实践经验。 2、在OLAP(联机分析处理)领域有相关项目经验。 3、有大数据架构设计和优化经验,能够提供有效的解决方案和建议。 4、具备数据挖掘和机器学习的基础知识和经验。
  • 15k-30k·14薪 经验3-5年 / 本科
    新零售 / 不需要融资 / 500-2000人
    1、负责大数据平台方向规划和系统设计,参与核心代码编写,进行业务场景和平台实现; 2、构建高效,实时,稳定的流式计算引擎,支撑公司内数产品线的实时数据分析业务; 3、搭建大数据平台实时数仓,基于模型运用大数据技术,进行数据清洗、计算,提供稳定可靠的数据。 1、计算机或信息技术相关专业,本科以上学历,有5年以上的大数据领域工作经验,对大数据体系有深入的理解; 2、熟练使用python进行复杂业务逻辑的数据处理工作,具备海量数据处理以及性能优化的能力; 3、具有扎实的大数据系统构建经验,对Hadoop、Spark、Flink、HDFS、Hbase、Kafka等分布式框架和中间件有深刻理解,有大数据中间件开发经验者优先; 4、丰富的数据仓库及数据平台的架构经验,熟悉ETL设计开发,对大数据一站式处理有一定产品化经验者优先。
  • 30k-40k·16薪 经验3-5年 / 本科
    居住服务 / 上市公司 / 2000人以上
    工作职责: 1. 参与贝壳大数据平台建设,研发大数据相关的基础服务和中间件,包括实时计算平台/查询引擎/任务调度系统/权限平台等大数据生态服务,提升系统的稳定性和可扩展性; 2. 负责解决大数据离线(Hive/Spark) 和 实时( Spark Streaming/Flink)等技术领域的相关难题,提升系统的稳定性和性能; 3. 跟进和调研大数据领域的前沿技术,包括OLAP引擎、Data Lake 等,并推动其在贝壳业务的应用落地; 任职资格 : 1. 计算机相关专业本科以上学历,3-4年以上相关工作经验; 2. 具有扎实的专业基础,较强的编码能力,熟悉常见的数据结构与算法; 3. 精通Java编程,理解IO、并发、网络等基础框架,熟悉JVM原理; 4. 精通大数据处理技术栈中的一个或多个平台/框架,包括但不限于:Hadoop/Hive/Spark/Flink/Kafka/ClickHouse/StarRocks等, 深入了解其原理优先; 5. 具有较强的问题解决能力和技术钻研精神;
  • 30k-60k 经验3-5年 / 本科
    内容资讯,短视频 / D轮及以上 / 2000人以上
    职位职责: 1、负责字节跳动抖音业务数据仓库的开发与优化; 2、基于Hive/Flink等平台建设数据仓库,实时数仓建设; 3、负责数据模型的设计,etl实施,etl性能优化以及相关技术问题的解决; 4、负责面向业务的olap,报表,数据提取工具等开发工作。 职位要求: 1、熟悉大数据相关技术:Kafka/Flink/Hadoop/Druid/HBase/Hive 等; 2、熟练使用 Java、Go、Python语言中的一种或者多种; 3、具备数据库系统理论知识,掌握主流数据库管理和应用,精通SQL; 4、了解统计以及数据挖掘、机器学习、人工智能技术,会使用关联分析、分类预测、聚类分析等常用分析方法; 5、有高性能分布式平台开发经验,有电商行业经验优先。
  • 数据服务 / 上市公司 / 500-2000人
    岗位职责 1.负责大数据后台离线分析、实时计算业务功能的实现,并能独立解决开发过程中的技术难题; 2.配合项目实施团队进行大数据后台、分布式数据库的性能调优; 3.配合项目实施团队进行例行的系统上线部署工作; 4.编写与大数据平台相关的技术文档及进行知识分享。 任职要求 1.理工科相关专业本科及以上学历,3年以上大数据项目实施经验; 2.具备一定的Java基础,熟悉scala,shell,python优先考虑; 3.熟悉MySQL、Oracle等关系型数据库的使用及配置; 4.熟悉主流Hadoop生态技术,包括Flink、Spark、Hive、HBase、ES等,且具备一定的调优经验; 5.熟悉redis分布式缓存、kafka消息组件、任意一款olap组件; 6.有ETL、实时计算项目、BI项目开发相关经验; 7.有大数据平台搭建、组件选型经验者优先考虑; 8.具备良好的沟通能力,能独立分析并解决问题; 9.具备互联网金融行业经验者或建行P9数仓项目经验者优先。
  • 15k-25k·13薪 经验3-5年 / 本科
    软件服务|咨询,IT技术服务|咨询 / 上市公司 / 2000人以上
    任职要求: 1、精通Unix/Linux操作系统下Java或Scala开发,有良好的编码习惯,有扎实的计算机理论基础; 2、熟练掌握大数据处理技术栈,有丰富的Hadoop/Spark/SparkStreaming/Storm/Flink的实际项目使用经验; 3、熟练掌握HDFS/HBase/Hive/S3等分布式大数据存储技术。 岗位职责: 1、4年以上大数据项目经验;具有实际的代码编写经验; 2、有电信大数据平台经验者优先; 3、热衷于追求技术完美与创新。
  • 电商平台 / C轮 / 2000人以上
    岗位职责: 1、分析业务需求,建设数据库仓库,对业务部门提供数据支持; 2、参与数据源分析,完成大数据平台与各业务系统的数据对接; 3、完成基于大数据技术平台基础上的数据仓库设计和ETL开发; 4、调研相关技术,优化大数据开发流程,规划大数据平台应用。 任职标准: 1、3年以上数据仓库相关工作经验, 有互联网、电商行业数据仓库建设经验; 2、精通Hive-sql编写和优化,精通常用etl工具,至少熟悉java、python、shell等语言中一种; 3、精通大数据背景下数据仓库模型设计,熟练掌握OLAP的维度建模设计方法; 4、有数据平台(数据开发、治理、资产等)相关建设经验; 5、责任心强,有较强沟通能力和团队合作精神; 6、有spark streaming、flink等实时数据开发经验; 7、有统计学数学知识,海量数据处理、数据分析和挖掘经验者优先
  • 15k-25k·13薪 经验3-5年 / 本科
    软件服务|咨询,IT技术服务|咨询 / 上市公司 / 2000人以上
    任职要求: 1、精通Unix/Linux操作系统下Java或Scala开发,有良好的编码习惯,有扎实的计算机理论基础; 2、熟练掌握大数据处理技术栈,有丰富的Hadoop/Spark/SparkStreaming/Storm/Flink的实际项目使用经验; 3、熟练掌握HDFS/HBase/Hive/S3等分布式大数据存储技术。 岗位职责: 1、4年以上大数据项目经验;具有实际的代码编写经验; 2、有电信大数据平台经验者优先; 3、热衷于追求技术完美与创新。
  • 12k-18k 经验3-5年 / 本科
    数据服务 / 上市公司 / 500-2000人
    岗位职责: 1、利用大数据相关技术,根据业务需求,对海量数据进行处理、分析、统计等; 2、数据组件性能调优运维及问题解决。 任职要求: 1、计算机及相关专业毕业,三年以上相关工作经验; 2、熟悉Java语言,精通SQL,熟悉至少一种主流数据库MySQL等; 3、熟悉Linux系统及常用命令,熟悉Shell脚本编程; 4、熟悉大数据生态圈,不限于HDFS、Hive、Hbase、Redis等组件,有Spark相关经验更优; 5、具有良好的沟通能力,工作态度积极主动,有良好的团队合作意识。
  • 移动互联网,游戏 / 不需要融资 / 150-500人
    岗位职责: 1. 理解游戏数据业务,负责核心数据资产内容的设计与开发工作。 2. 负责数据仓库、数据集市的数据模型设计。 3. 负责数据仓库ETL规则设计和开发。 任职要求: 1. 本科及以上学历,计算机相关专业。 2. 3年以上数据仓库开发建设经验。1年以上游戏数据开发经验,熟悉数据仓库架构和模型设计。 3. 精通ETL开发和SQL开发及SQL性能调优。 4. 熟悉Python编程,了解相关编程框架。 5. 了解大数据生态相关技术,包括但不限于Hadoop, Spark, Flink, Kafka, ELK, Impala, Kudu等,有相关维护调优经验者优先。 6. 良好的数据敏感度,能从数据中发现问题并解释,较强的数据和业务理解能力。 7. 具有良好的表达能力和沟通能力,态度积极,责任心强,思维清晰。 8. 具有较强的抗压能力。
  • 11k-19k·20薪 经验3-5年 / 本科
    汽车丨出行 / 未融资 / 2000人以上
    岗位职责: 1.负责红旗车型项目车端数据埋点设计/开发、云端数据解析、数据管理体系建设 2.负责红旗车联网企业级数据中台的平台架构设计与建设,在平台内的数据的接入、解析、存储、服务、应用 3.负责红旗车型研发各领域内的数据分析、挖掘工作,为产品的设计、迭代提供数据支撑 4.负责红旗各车型车载DMS/OMS产品的自主算法开发、算法集成、产品测试 5.负责车载语音前端降噪、语音识别、自然语言处理、语音合成等算法设计、开发、测试集成 6.参与AI大数据研究与业务开发、技术选型、风险把控、关键节点评审 任职要求: 1.学历要求:**大学本科及以上学历,英语CET-4及以上 2.工作经验:具有4年及以上车联网/大数据/算法开发领域工作经验,特别优秀者可适当放宽 3.其他: ① 计算机、数学类、信息技术类、模式识别、车辆工程等相关专业优先 ② 至少具备其中1项技术栈: 1)掌握C++,Python、SQL等编程语言,熟悉Linux开发环境 2)熟悉Tensorflow或Pytorch至少一个深度学习框架 3)熟悉Hadoop、Hive、Spark、Flink、Kafka等大数据技术使用经验 4)熟悉MQTT、HTTP、Websocket等物联网协议,具备车载嵌入式开发经验优先 ③ 良好的团队合作精神和沟通能力,善于学习新知识,主动性强,有责任心 ④ 有相关汽车领域工作经验者优先