• 短视频 / 上市公司 / 2000人以上
    职位描述 1、负责快手亿级用户的大数据平台产品的落地,包括分析工具、元数据管理、实时数据加工等系列平台产品; 2、负责数据产品架构设计和后端开发,不断优化系统架构,支撑业务规模增长,保障服务稳定; 3、负责数产品的功能迭代和性能优化,提高效率,优化流程。 任职要求 1、熟悉互联网产品和服务的开发过程,熟悉后端技术架构,具备良好的系统设计能力; 2、具备扎实的计算机基础,对技术有热情,愿意不断尝试新技术和业务挑战; 3、善于沟通,对业务敏感,能快速理解业务背景,具备优秀的技术与业务结合能力; 4、熟练使用clickhouse、flink、HBase等开源大数据组件,具备数据组件化开发的能力; 5、有足够的耐心梳理和解决复杂而又繁多的产品研发问题,善于沟通与团队协作。
  • 20k-35k 经验5-10年 / 本科
    汽车丨出行 / 上市公司 / 2000人以上
    职位描述 1. 负责大数据平台的运维,包括部署、管理、优化等,保障平台稳定运行; 2. 负责大数据集群的架构升级、容量规划、资源管理、成本优化、业务管控; 3. 理解大数据平台架构和业务流程,发现并解决系统问题或瓶颈; 4. 开发自动化运维、监控报警、故障处理脚本和工具,优化整个运维的流程; 岗位要求: 1. 本科及以上学历,5年以上规模集群管理和运维经验; 2. 熟悉Linux操作系统,熟悉TCP/IP基本原理,有系统调优经验; 3. 掌握Shell、Python等至少一门常见脚本语言; 4. 熟悉常用的监控工具,熟悉自动化运维工具(如Saltstack/Ansible/Puppet等),有二次开发能力者优先; 5. 熟悉hadoop/hbase/elasticseach等大数据组件的架构及基本原理; 6. 对运维体系有一定认识,善于思考总结,做事积极主动,责任心强、细心谨慎,能独立解决问题。
  • 15k-30k 经验1-3年 / 本科
    软件服务|咨询,IT技术服务|咨询 / 上市公司 / 2000人以上
    岗位职责: 1. 大数据组件开发。 2. 基于Python 体系下的数据质量引擎开发; 3. 基于Java及Linkis开源框架的质量引擎开发; 4. 大数据资产应用的开发、部署、调优; 5. 数据稽核引擎开发,数据共享交换能力对接。 任职要求: 1. 本科及以上学历,计算机相关专业; 2. 3年以上互联网或软件行业工作经验,熟悉Linux环境;熟悉Linux和Python开发; 3. 熟悉Spring,Spring boot,Spring Cloud等框架、熟悉Eclipse或IntelliJ IDEA开发工具等使用 以下满足其一即可: 4. 熟悉Hadoop,MapReduce,Hbase,Flink等大数据部署、运维、开发; 5. 熟悉数据治理理论概念、架构,有元数据、数据质量、数据标准、主数据等相关数据治理经验; 6. 有分布式相关项目(分布式存储/分布式计算/高性能并行计算/分布式cache)经验; 7. 对数据库的架构、扩展特点非常熟悉,能熟练进行SQL优化、集群部署、数据同步等。
  • 18k-22k 经验5-10年 / 本科
    人工智能服务,科技金融 / 上市公司 / 500-2000人
    大数据开发工程师 岗位职责: 1、负责搭建大数据技术架构,负责主导从0到1建设数据中台产品。 2、参与公司技术架构的升级迭代工作,参与应用软件系统的分析、设计、编码工作; 任职资格: 1、本科及以上学历,计算机相关专业毕业,有五年以上开发经验; 2、熟悉Java, 同时掌握scala、python等语言者优先; 3、熟悉springCloud及周边技术架构体系:springboot、mybatis、nacos、MQ等; 2、熟悉大数据Hadoop/Yarn/Presto/Spark/Hive/Flink等相关技术栈,熟悉大数据应用场景; 熟悉Hive/MySQL/ES/Clickhouse/StarRocks的基本原理和调优策略,熟悉大数据处理相关技术,具有丰富的大数据开发经验; 5、熟悉分布式高可用系统架构设计,对网络安全技术有一定的了解。 6、熟练掌握mysql、Hbase、redis等主流关系型与非关系型数据库的应用与配置,具备一定的sql优化能力,对事务理解深刻; 7、具备很强的系统分析与设计能力;能够熟练地完成需求分析、概要设计、详细设计、数据库设计、系统上线等项目设计工作以及编写相关文档; 9、具有很强责任心、良好的学习能力、团队协作能力和沟通协调能力,工作认真、积极、主动; 10、思维活跃、逻辑缜密。
  • 19k-28k·15薪 经验3-5年 / 本科
    金融 / 上市公司 / 2000人以上
    岗位职责: 1. 大数据平台组件运维及优化,进行必要的二次开发; 2. 数据湖、数据仓库技术研究及落地; 3. 实时、离线数据产品设计及开发。 任职要求: 1. 本科及以上学历,计算机及相关专业; 2. 3-5年Java/Scala开发经验,熟悉多线程编程; 3. 熟悉大数据生态相关技术,有二次开发经验者优先; 4. 熟悉实时及离线数仓架构及开发流程,有Phoenix/StarRocks使用经验优先; 5. 熟悉常见设计模式,熟悉如Spring/SpringMVC/Mybatis等主流框架; 6. 有较强的学习能力与逻辑思维能力,良好的团队合作精神。
  • 电商平台 / C轮 / 2000人以上
    岗位职责: 1、分析业务需求,建设数据库仓库,对业务部门提供数据支持; 2、参与数据源分析,完成大数据平台与各业务系统的数据对接; 3、完成基于大数据技术平台基础上的数据仓库设计和ETL开发; 4、调研相关技术,优化大数据开发流程,规划大数据平台应用。 任职标准: 1、3年以上数据仓库相关工作经验, 有互联网、电商行业数据仓库建设经验; 2、精通Hive-sql编写和优化,精通常用etl工具,至少熟悉java、python、shell等语言中一种; 3、精通大数据背景下数据仓库模型设计,熟练掌握OLAP的维度建模设计方法; 4、有数据平台(数据开发、治理、资产等)相关建设经验; 5、责任心强,有较强沟通能力和团队合作精神; 6、有spark streaming、flink等实时数据开发经验; 7、有统计学数学知识,海量数据处理、数据分析和挖掘经验者优先
  • 25k-35k·14薪 经验5-10年 / 本科
    IT技术服务|咨询 / 上市公司 / 2000人以上
    职位描述: 1. 从事工业数据的采集、传输、分析、集成等技术研究及开发应用; 2. 负责但不限于生产制造管理主题领域的指标体系、数据模型和治理逻辑设计,从业务应用的视角,构建数据驱动的运营管理平台方案; 3. 作为大数据专家角色,充分与内外部合作,负责项目数据类的方案架构设计和技术规划并确保最终落地, 4. 牵头项目关键架构设计和组织技术难点攻关; 5. 参与工业数据标准制订,并且推动团队应用标准; 任职要求 1. 计算机、软件工程及相关专业,本科及以上学历,至少3年以上大数据项目相关工作经验; 2. 掌握Hadoop、HBase、Kafka、Hive、Flink、Spark、datav等组件中至少2项的工作原理,熟悉Hadoop生态系统; 3. 精通Java,Python中的一种或多种语言,熟练掌握海量数据分析的相关模型、算法,有制造行业大数据分析模型经验者优先; 4. 熟悉数据库开发,精通面向对象设计、设计模式,熟练MySQL、Redis等数据库; 5. 有指标系统和数据可视化系统开发经验优先; 7. 具备开发项目管理经验。
  • 15k-25k·13薪 经验3-5年 / 本科
    软件服务|咨询,IT技术服务|咨询 / 上市公司 / 2000人以上
    任职要求: 1、精通Unix/Linux操作系统下Java或Scala开发,有良好的编码习惯,有扎实的计算机理论基础; 2、熟练掌握大数据处理技术栈,有丰富的Hadoop/Spark/SparkStreaming/Storm/Flink的实际项目使用经验; 3、熟练掌握HDFS/HBase/Hive/S3等分布式大数据存储技术。 岗位职责: 1、4年以上大数据项目经验;具有实际的代码编写经验; 2、有电信大数据平台经验者优先; 3、热衷于追求技术完美与创新。
  • 30k-40k·16薪 经验3-5年 / 本科
    居住服务 / 上市公司 / 2000人以上
    工作职责: 1. 参与贝壳大数据平台建设,研发大数据相关的基础服务和中间件,包括实时计算平台/查询引擎/任务调度系统/权限平台等大数据生态服务,提升系统的稳定性和可扩展性; 2. 负责解决大数据离线(Hive/Spark) 和 实时( Spark Streaming/Flink)等技术领域的相关难题,提升系统的稳定性和性能; 3. 跟进和调研大数据领域的前沿技术,包括OLAP引擎、Data Lake 等,并推动其在贝壳业务的应用落地; 任职资格 : 1. 计算机相关专业本科以上学历,3-4年以上相关工作经验; 2. 具有扎实的专业基础,较强的编码能力,熟悉常见的数据结构与算法; 3. 精通Java编程,理解IO、并发、网络等基础框架,熟悉JVM原理; 4. 精通大数据处理技术栈中的一个或多个平台/框架,包括但不限于:Hadoop/Hive/Spark/Flink/Kafka/ClickHouse/StarRocks等, 深入了解其原理优先; 5. 具有较强的问题解决能力和技术钻研精神;
  • 11k-19k·20薪 经验3-5年 / 本科
    汽车丨出行 / 未融资 / 2000人以上
    岗位职责: 1.负责红旗车型项目车端数据埋点设计/开发、云端数据解析、数据管理体系建设 2.负责红旗车联网企业级数据中台的平台架构设计与建设,在平台内的数据的接入、解析、存储、服务、应用 3.负责红旗车型研发各领域内的数据分析、挖掘工作,为产品的设计、迭代提供数据支撑 4.负责红旗各车型车载DMS/OMS产品的自主算法开发、算法集成、产品测试 5.负责车载语音前端降噪、语音识别、自然语言处理、语音合成等算法设计、开发、测试集成 6.参与AI大数据研究与业务开发、技术选型、风险把控、关键节点评审 任职要求: 1.学历要求:**大学本科及以上学历,英语CET-4及以上 2.工作经验:具有4年及以上车联网/大数据/算法开发领域工作经验,特别优秀者可适当放宽 3.其他: ① 计算机、数学类、信息技术类、模式识别、车辆工程等相关专业优先 ② 至少具备其中1项技术栈: 1)掌握C++,Python、SQL等编程语言,熟悉Linux开发环境 2)熟悉Tensorflow或Pytorch至少一个深度学习框架 3)熟悉Hadoop、Hive、Spark、Flink、Kafka等大数据技术使用经验 4)熟悉MQTT、HTTP、Websocket等物联网协议,具备车载嵌入式开发经验优先 ③ 良好的团队合作精神和沟通能力,善于学习新知识,主动性强,有责任心 ④ 有相关汽车领域工作经验者优先
  • 10k-14k·20薪 经验1-3年 / 本科
    汽车丨出行 / 未融资 / 2000人以上
    岗位职责: 1.负责红旗车型项目车端数据埋点设计/开发、云端数据解析、数据管理体系建设 2.负责红旗车联网企业级数据中台的平台架构设计与建设,在平台内的数据的接入、解析、存储、服务、应用 3.负责红旗车型研发各领域内的数据分析、挖掘工作,为产品的设计、迭代提供数据支撑 4.负责红旗各车型车载DMS/OMS产品的自主算法开发、算法集成、产品测试 5.负责车载语音前端降噪、语音识别、自然语言处理、语音合成等算法设计、开发、测试集成 任职要求: 1.学历要求:**大学本科及以上学历,英语CET-4及以上 2.工作经验:具有2年及以上车联网/大数据/算法开发领域工作经验,特别优秀者可适当放宽 3.其他: ①计算机、数学类、信息技术类、模式识别、车辆工程等相关专业优先 ② 至少具备其中1项技术栈: 1)掌握C++,Python、SQL等编程语言,熟悉Linux开发环境 2)熟悉Tensorflow或Pytorch至少一个深度学习框架 3)熟悉Hadoop、Hive、Spark、Flink、Kafka等大数据技术使用经验 4)熟悉MQTT、HTTP、Websocket等物联网协议,具备车载嵌入式开发经验优先 ③ 良好的团队合作精神和沟通能力,善于学习新知识,主动性强,有责任心 ④ 有相关汽车领域工作经验者优先
  • 内容资讯,短视频 / D轮及以上 / 2000人以上
    职位职责: 1. 负责抖音直播业务的离线与实时数据仓库的构建; 2. 负责数据模型的设计,ETL实施,ETL性能优化,ETL数据监控以及相关技术问题的解决; 3. 负责指标体系建设与维护; 4. 深入业务,理解并合理抽象业务需求,发挥数据价值,与业务团队紧密合作; 5. 参与大数据应用规划,为数据产品、挖掘团队提供应用指导; 6. 参与数据治理工作,提升数据易用性及数据质量。 职位要求: 1. 熟悉数据仓库实施方法论、深入了解数据仓库体系,并支撑过实际业务场景; 2. 熟练使用Hadoop及Hive,熟悉SQL、Java、Python等编程语言; 3. 善于沟通,对业务敏感,能快速理解业务背景,具备优秀的技术与业务结合能力。
  • 18k-21k·16薪 经验3-5年 / 本科
    IT技术服务|咨询 / 未融资 / 50-150人
    岗位职责: (1)负责民生卡大数据管理、分析、挖掘,开展相关数据应用建模; (2)制定相关数据标准,包括元数据、数据质量、数据标准和流程管理等; (3)负责数据分析、加工、清洗、处理程序的开发,数据治理技术优化及开发; (4)通过技术手段,提升数据链路分析能力,维护血缘准确性、协助跟进日常数据质量问题; (5)对业务部门的数据分析需求给予实现与支持; (6)负责领导交办的其他工作。 任职资格: (1)计算机相关专业本科及以上学历,3年以上大数据开发工作经验; (2)熟练掌握Hadoop、Spark、Kafka等大数据处理技术和工具; (3)熟悉SQL,具备数据库设计、优化和性能调优能力; (4)熟悉Java或Python等至少一种编程语言,具备良好的编程习惯和代码规范; (5)具备良好的问题分析和解决能力,能独立承担项目开发任务; (6)具备良好的沟通能力和团队协作精神,能适应高强度的工作压力; (7)优秀的学习能力和创新意识,对大数据领域有浓厚的兴趣和热情。
  • 15k-25k 经验5-10年 / 本科
    数据服务 / B轮 / 150-500人
    工作职责: ⁃ 设计和开发工业大数据应用支撑产品 ⁃ 支持用户交付高质量的工业大数据分析应用 任职要求: ⁃ 熟练掌握linux下Java、Python、Golang开发语言(至少两种) ⁃ 熟悉领域驱动设计,以及其他OO模式,能写出结构优雅的代码 ⁃ 了解和熟练使用PostgreSQL、influxDB、S3等多种存储技术 ⁃ 良好的抽象思维和技术产品思维 -良好的文档编写能力,能够编写产品设计文档和用户开发文档 优先任职条件: ⁃ 熟练一种关系数据库并有项目开发与调优经验者优先(如PostgreSQL、MySQL、Greenplum等) ⁃ 曾经参与分布式系统开发,熟悉Flink、Spark等相关技术
  • 25k-35k·14薪 经验5-10年 / 本科
    IT技术服务|咨询 / 上市公司 / 2000人以上
    职位描述: 1. 从事工业数据的采集、传输、分析、集成等技术研究及开发应用; 2. 负责但不限于生产制造管理主题领域的指标体系、数据模型和治理逻辑设计,从业务应用的视角,构建数据驱动的运营管理平台方案; 3. 作为大数据专家角色,充分与内外部合作,负责项目数据类的方案架构设计和技术规划并确保最终落地, 4. 牵头项目关键架构设计和组织技术难点攻关; 5. 参与工业数据标准制订,并且推动团队应用标准; 任职要求 1. 计算机、软件工程及相关专业,本科及以上学历,至少3年以上大数据项目相关工作经验; 2. 掌握Hadoop、HBase、Kafka、Hive、Flink、Spark、datav等组件中至少2项的工作原理,熟悉Hadoop生态系统; 3. 精通Java,Python中的一种或多种语言,熟练掌握海量数据分析的相关模型、算法,有制造行业大数据分析模型经验者优先; 4. 熟悉数据库开发,精通面向对象设计、设计模式,熟练MySQL、Redis等数据库; 5. 有指标系统和数据可视化系统开发经验优先; 7. 具备开发项目管理经验。