• 内容资讯,短视频 / D轮及以上 / 2000人以上
    职位职责: 1、负责字节跳动所有产品线UG方向的数据流和相关数据服务; 2、面向超大规模数据问题,每天处理千亿增量的用户数据; 3、负责流式数据的实时传递,清洗,转换,计算,并对外提供查询服务; 4、参与数据治理工作,提升数据易用性及数据质量; 5、理解并合理抽象业务需求,发挥数据价值,与业务团队紧密合作。 职位要求: 1、熟悉Linux操作系统及开发环境; 2、扎实的计算机软件基础知识:数据结构,操作系统等; 3、熟悉 C/C++、Java、Python 等任意一门编程语言; 4、对数据敏感,认真细致,善于从数据中发现疑点; 具备以下条件者优先: 1、研究过开源项目; 2、参加过 ACM 或者其他类型的软件开发大赛; 3、熟悉大数据处理工具/框架中的一项或多项,包括但不限于Hadoop, Mapreduce, Hive, Storm, Spark, Druid, kafka, hbase,ES等。
  • 18k-35k·14薪 经验5-10年 / 本科
    生活服务,旅游|出行 / 上市公司 / 150-500人
    岗位职责 : 1、数据仓库和数据处理‌:负责大数据平台的数据仓库、数据治理和数据模型的设计与开发工作。进行日常数据报表开发,理解业务需求,发挥数据价值‌。 2‌、数据服务开发‌:负责离线和实时数据服务的设计、开发、性能调优和效果优化。构建和维护数据管道,处理ETL过程,确保数据质量和准确性‌。 3、技术研究和应用‌:参与相关项目的数据需求的实现,设计和编码工作。参与开发过程中相关技术的研究和验证‌。 ‌4、平台运维和质量管理‌:负责大数据平台的数据及相关的应用开发、调优及维护。完成日常数据质量的监控,参与大数据平台的日常运维工作‌。 5、针对数据一致性、准确性、及时性,制定数据管理与治理机制,提升数据易用性、可用性及稳定性; 任职要求 : 1、本科及以上学历,计算机相关专业,3-5年以上数据开发经验; 2、具备至少一个完整的大数据平台和BI系统实施经验,熟知平台建设各环节工作,包括数据采集、数据落地、仓库建设、数据平台搭建、数据应用产品开发 3、熟悉基于推荐系统的数据仓库建设方法论,有数仓模型设计及ETL开发经验;有数据仓库分层架构设定经验者优先; 4、熟悉Hadoop生态相关技术,如Hive、HDFS、Impala、Spark、Presto、Flink、Hudi、Elasticsearch、HBase、Druid、Kylin等,有基于分布式数据存储与计算平台应用开发经验,有较为系统的海量数据性能处理经验; 5、熟悉java、scala、python等语言,熟悉微服务,分布式架构,熟悉springcloud,springboot等技术开发; 6、熟悉数据仓库原理,有离线数仓、实时计算、数据挖掘、ETL、用户画像、数据可视化等设计与开发经验; 7、熟悉MySQL、PostgreSQL、NoSQL等数据库中至少一种数据中心建设方案,可以进行产品的独立部署、高可用架构和性能优化,熟悉开源社区解决方案; 8、熟悉阿里云大数据组件E-MapReduce、Dataworks、MaxCompute和国际AWS的EMR相关数据产品等,市场常见BI产品(superset、FineBI、神策数据)等相关组件者优先; 9、较强的学习能力和技术钻研能力、有自我驱动意识,对数据采集、数据治理、数据开发、数据分析、数据建模、算法等有深刻认识和实战经验。 期待您的加入哟,我们为您准备丰厚福利待遇: 【法定福利】:公司按国家规定购买五险一金+商业保险(员工本人及子女商业保险)+带薪年假; 【节日关怀】:节日福利礼品,以及节日礼金; 【公司福利】: 机场及高铁的贵宾服务(龙腾卡权益)+年度员工健康体检+平安360服务(在线问诊、VIP挂号及重疾紧急入院服务)+年度2次免费洁牙服务 公司提供咖啡、零食、下午茶 员工活动、旅游及团建,不定期举办聚餐、唱K、电竞赛、篮球赛、拓展、旅游、生日Party等 【学习与培训】:助力职业发展与提升,内外训双引擎发力助你高速发展 【晋升机会】:公司设立良好的晋升机制和广阔的发展空间。
  • 12k-20k 经验1-3年 / 本科
    金融 / 不需要融资 / 2000人以上
    岗位职责: 1.负责CDH大数据平台的安装和部署; 2.负责CDH大数据平台各组件的性能优化; 3.负责CDH大数据平台各组件的运行维护和状态监控; 4.负责新技术调研,并能在团队内进行推广应用。 任职资格: 1.理解大数据计算原理,精通Hadoop/Spark体系,了解大数据平台运营基本思路; 2.熟悉HDFS、HBASE、KUDU、SPARK、HIVE等hadoop核心组件,具有两年以上hadoop/Spark技术的运维经验; 3.理解MapReduce计算框架的思想,熟悉分布式计算模型; 4.至少精通一种大数据开发语言,如JAVA、scala等; 5.至少熟练使用一种脚本语言,如Shell、Python等; 6.热爱技术,工作认真、严谨,有团队精神。
  • 20k-30k 经验3-5年 / 本科
    移动互联网 / C轮 / 150-500人
    数据工程师 岗位职责: 1、负责数据分析与模型的开发工作。 2、与同事解决日常工作中的问题。 3、对数据与模型存在的问题进行分析与定位并给出合理的解决方案。 4、严格执行工作计划,主动汇报并高效完成任务保证部门及个人工作目标实现 任职要求: 1、数学、统计学、计算机、软件工程等相关专业,具有3年及以上大数据分析与模型工作经验。 2、熟悉和使用过Spark生态技术,包括 sparkSQL、pyspark等,1个以上大数据分析与模型实施经验。 3、熟练使用Python数据分析组件,如NumPy、SciPy、Pandas、Matplotlib等。 4、熟练使用Logistic regression、皮尔逊相关系数、k-means、决策树、时间序列 等分析与模型,并有实际落地项目。 5、具有一定的应用系统数据分析能力,有良好和规范的编程习惯和文档编写习惯。 4、有较强的学习能力,对数据和算法有钻研精神,并有较高的热情,热衷于新技术、新理论的学习和实践。
  • 20k-35k 经验5-10年 / 本科
    企业服务,数据服务 / C轮 / 50-150人
    岗位职责: 1. 负责大数据采集、存储、计算、分析等场景的通用架构设计和开发; 2. 负责流式数据的实时传递、清洗、转换和计算(实时统计、分析等)的设计和开发; 3. 负责大数据相关框架/工具/中间件的设计和开发; 4. 负责以上各种架构平台及相关基础技术组件的稳定性保障及源码级的bug修复; 5. 负责大数据相关解决方案的设计文档撰写。 任职要求: 1. 本科以上学历,计算机相关专业; 2. 五年以上大数据平台相关开发及架构设计经验; 3. 深入使用Java,深入理解并熟练使用Java类库及框架,如多线程、并发处理、I/O与网络通讯; 4. 对Java虚拟机有较深了解,有运行态JVM分析及调优的实际经验; 5. 熟悉Linux系统,具备Shell、Python等脚本开发能力者优先; 6. 熟悉并使用过各种大数据相关框架或组件优先,如Kafka、Storm/JStorm、Hadoop/Spark、Hive、HBase、kylin、opentsdb、redis、flume等,具备源代码级问题解决和集群优化改造能力者优先; 7. 具备丰富的数据处理和数据仓库建模的项目实践经验者优先; 8. 具有良好的语言表达和文档撰写能力,学习能力强,喜欢研究开源新技术,有团队观念,具备独立解决问题的能力; 9. 有一年以上大数据团队带领经验优先。
  • 企业服务,金融 / 上市公司 / 2000人以上
    1,本科及以上学历,5年及以上大数据开发经验 2,深刻理解大数据平台, 具备对大数据组件(Hadoop/Spark/Hbase/Flink/Kafka/ES/Redis/ClickHouse, 等的应用/Debug/调优经验,有实时流处理经验 3,熟练Java/Scala,熟悉(python/shell,任意一种脚本语言。 4,熟练Mysql、Oracle等数据库,熟悉shell 5,沟通能力和团队合作能力 加分项: 1,有数据库调优和海量数据存储经验 2,有数据质量经验 3,熟悉数据仓库、数据集市建模,了解业界通用的数仓建模方法; 4,有汽车行业相关经验 5,英文文档阅读能力 1,参与数据仓库、大数据分析平台的设计与开发 2,根据大数业务需求,从功能和非功能角度,参与架构和产品的设计、实现 3,参与ETL开发,实现大数据数据采集、清洗、转换,保证数据质量 4,和架构师紧密合作,了解客户问题,设计解决方案,用技术推动大数据业务发展
  • 35k-40k 经验5-10年 / 本科
    工具类产品,软件服务|咨询 / 上市公司 / 500-2000人
    岗位职责: 1、负责公司数据产品的数据建模、数据抽取、监测数据的开发与优化; 2、负责基于业务的需求做数据支撑的数据应用开发; 3、负责通过模型优化提升数据统计效率。 任职要求: 1、5年以上数据仓库模型设计开发或大数据开发经验,熟练sql,python等数据任务开发。 2.对关系型数据库与非关系型数据库、图数据库,Mysql等能够熟练操作; 3. 有一定的数据系统开发经验,能够基于业务指导团队进行数仓开发与建模设计。 5、有PB级数据项目或数据库管理经验者优先,熟悉云厂商数仓开发优先。
  • 18k-35k·14薪 经验5-10年 / 本科
    数据服务 / 不需要融资 / 50-150人
    工作内容: 1. 负责高性能、高可用的大数据数据处理与分析paas软件的研发。 2. 参与包含数据集成系统、元数据管理、数据质量管理等平台的构建与维护; 3. 基于spark上用scala编程语言开发,完成相关网络安全产品的需求实现。 4.了解一定的数据挖掘算法,熟悉相关数据模型 任职要求: 1. 本科及以上学历,计算机相关专业五年以上工作经验; 2. 扎实的计算机基础,掌握常用的数据结构及算法,熟练掌握Scala/Python/go/Java 中的一项或多项; 3. 了解分布式系统、大数据平台,有完整的数据工程项目经验,具备一定的框架设计以及抽象能力; 4. 熟悉 Hadoop 生态体系,包括但不限于:Hadoop、Hive、HBase、Spark、Flink、Kafka、Beam 等; 5. 良好的团队精神以及合作意识,热爱技术,高度自驱,追求卓越,对数据敏感; 6. 对批量计算、流式计算、时序数据处理、存储引擎、资源调度等一项或多项有深入理解优先 说明:自研项目非外包,但此岗位会有出差,介意勿扰 学历最低要求本科, base上海,北京,长沙,无锡,成都均可
  • 15k-25k·13薪 经验3-5年 / 本科
    数据服务,金融 / D轮及以上 / 150-500人
    岗位职责: 1、负责大数据、BI系统相关模块的实施和项目管理工作,包括但不限于需求管理、项目规划、过程实施、上线验收、交付运营等; 2、依据业务场景,分析需求提供技术、业务解决方案并加以实现; 3、与技术部门对接,解决数据建模、报表和报告在系统开发中遇到的问题; 4、协助项目经理进行项目交付或协助商务开展售前支持或POC工作。 任职要求 1、本科及以上学历,计算机、统计学、应用数学等相关专业; 2、3年以上相关工作经验,有金融、电力行业数据分析经验优先; 3、熟悉Hadoop平台,2年以上Hive、Sqoop开发经验,有数据管理、数据建模经验优先; 4、熟悉Mysql、DB2、Oracle等数据库及SQL开发、SQL优化、存储过程; 5、熟悉Linux开发环境和shell脚本; 6、优秀的业务理解能力、逻辑性和沟通能力,能跨部门沟通协作。
  • 15k-30k·14薪 经验3-5年 / 本科
    金融 软件开发 / 不需要融资 / 2000人以上
    职责描述: 1、负责公司大数据平台的运维保障工作,保障平台的正常运行和相应数据服务的稳定高效; 2、对接数据开发侧团队,主动优化和完善服务巡检、监控工具、脚本等,减少人工操作提高运维效率;负责数据平台的故障处置、推动性能优化。如平台产品技术问题,提交给平台产品技术组进行后台处理,并及时反馈. 3、负责数据平台二线运维支撑保障,响应运维/服务台一线请求:处置生产事件,跟踪问题处理; 4、定期组织团队人员开展大数据平台的技术知识积累和移交; 5、负责设计日常运维相关的自动化工具或系统,并完成相应需求收集和需求管理 ; 任职要求: 1. 具有1年以上金融行业数据类项目运维经验,熟悉保险业务操作与管理。具有大数据平台相关技术进行数据仓库、数据中台开发、维护、优化等项目经验的人员,或长期在类似的运维项目上承担运维工作优先; 2. 具备较强的数据开发分析能力,熟练掌握SQL等技能,熟练掌握大数据平台、UNIX、LUNIX和中间件的技能。有java或Python开发基础优先; 3. 具备较强的数据分析,问题分析,逻辑思维能力,团队协作能力,有良好的沟通能力和责任感,能够承担工作压力,独立分析和解决问题者优先; 4. 强烈的自驱力和责任感,面对复杂业务问题,可以从业务和技术多角度推进,最终达成目标。
  • 15k-25k·13薪 经验5-10年 / 本科
    移动互联网,数据服务 / 未融资 / 50-150人
    岗位描述: 1、参与搭建公司的离线、实时数据仓库 2、参与批处理、流处理etl作业开发 3、对接业务需求,生产数据报表、看板、指标、画像等 岗位要求: 1、大学本科学历以上 2、有五年以上数据开发经验 3、熟练掌握spark或flink开发能力,有3年以上的开发经验 4、熟悉和掌握实时数仓的搭建,有实践经验。例如clickhouse、druid等 4、熟悉和掌握数据仓库建模,有实践经验 5、熟练使用hadoop平台,包括不限于:hdfs、flume、hive、hbase等
  • 电商平台,IT技术服务|咨询 / 上市公司 / 500-2000人
    工作职责: 1. 负责数据中台的相关功能维护及相应功能的迭代开发; 2. 深入了解业务,配合数据产品来完成实时、离线ETL逻辑处理; 3. 根据实际业务场景,输出相应的数据处理方案并参与实现。 任职资格: 1. 本科及以上学历,计算机、数学、统计学及相关专业,有5年左右开发经验; 2. 熟悉hadoop生态圈,熟练使用Flink、kafka、spark、hive、Hbase、Scala等进行数据开发; 3. 熟练进行数据建模,有参与大数据处理,算法实施等工作,如推荐、聚类等; 4. 了解DW基本概念,熟悉数据体系流程; 5. 有电商、广告推荐等业务经验加分(有项目管理经验加分)。
  • 18k-30k·16薪 经验3-5年 / 本科
    通讯电子 / 不需要融资 / 2000人以上
    1、**本科及以上学历,3年及以上相关工作经验。 2、熟悉flink/spark/hadoop/hbase/hive等分布式计算技术,熟悉其运行机制和体系结构。 3、以下语言至少熟悉一门:Python、C、C#、C++、JAVA、PHP、GO、JS、Objective-C。 4、三年以上大型数据仓库架构和建模经验,熟悉大型互联网企业仓库架构解决方案者优先。
  • 旅游|出行 / 上市公司 / 2000人以上
    工作职责: 1. 负责大数据消息服务如 Kafka 集群优化,运维、部署、管理; 1. 参与大数据基础服务如 Hadoop 、Spark 等集群运维、部署、管理与优化; 2. 负责大数据平台服务器的维护与管理,保证各集群服务器正常运行; 职位要求: 1. 熟悉 Java、Scala、Go 等一门主流语言,熟悉并发和网络编程,有良好的数据结构和算法功底; 2. 熟悉消息系统的原理和关键技术,熟悉 Kafka/Pulsar/RocketMQ 等消息产品的原理和实现,有开源社区贡献者优先; 3. 有分布式存储的使用和研发经验者优先; 4. 对云原生相关技术有一定的了解; 5. 了解大数据相关技术,如Hadoop,Spark,Hive,Flink等,有开发或者运维经验者优先; 6. 熟悉Linux常用命令; 7. 有技术热情和较强的学习能力,以及良好的沟通能力、抗压能力和团队协作能力;
  • 20k-40k 经验3-5年 / 本科
    电商,游戏 / 未融资 / 少于15人
    岗位职责: 1、数据平台的搭建、调优和维护,保障数据平台服务的稳定性与可用性; 2、离线/实时数据计算、数据治理、自助分析报表和查询引擎等大数据组件的功能设计、开发和持续优化 3、负责数据仓库、BI等数据应用平台的建设、设计、开发及优化; 4、跟进并调研数据平台的技术发展趋势,及时引入相关技术,共同构建科学高效的数据平台 任职要求: 1、计算机、数学相关专业,本科及以上学历, 3年以上大数据平台相关经验; 2、熟练Java,使用Spring,Mybatis等主流框架,有较好的Web(vue)开发技术;有企业级大数据系统软件集成开发经验者优先 3、熟悉Hadoop、Spark、Flink、Kafka等框架或组件的使用; 4、熟悉Hadoop生态系统和数仓理论,在离线计算、实时计算、数据治理、数据服务等方面有丰富的开发经验 5、熟悉redis、mongodb、memcache等主流nosql的使用;熟悉mysql等主流数据库的使用 6、有高度的工作责任心,学习能力强,善于沟通,勤于思考,具备较强的团队合作能力。
展开