• 20k-40k 经验5-10年 / 本科
    移动互联网,企业服务 / 不需要融资 / 500-2000人
    1、负责公司大数据平台总体架构顶层设计;2、负责数据治理体系的规划和建设,提升数据质量,加速分析效率,建立数据信心;3、负责业务分析和数据应用体系的规划和建设,驱动业务的增长;4、负责数据开发、分析、挖掘人才梯队的建设;5、结合业界大数据最佳实践持续优化大数据架构。岗位要求;1、计算机、数学、统计相关专业***本科及以上学历,5年以上大数据工作经验,3年以上大数据架构经验;2、对高可用的分布式架构运行机制有深入了解,有丰富的离线及实时架构搭建经验;3、熟练掌握编程语言Scala、Java,熟练掌握至少一种脚本语言python、shell;4、精通大数据生态系统Spark、Flink、Hadoop、hive、Kafka、Yarn等的架构、底层原理和技术细节,并有丰富开发、调优、维护经验;5、了解ElasticSearch、Spark、Kafka等技术工作原理,熟悉Storm、Spark、Impala等分布式计算平台的应用;6、熟练使用ETL工具进行数据抽取,清洗,转换,关联等操作;7、对数据敏感,能从数据中发现问题、解决问题;具备敏锐的洞察力,清晰缜密的结构化思维,以及独立分析的能力;8、较强的人际关系能力、有团队精神,较强的执行与推动能力,有一定抗压力。
  • 35k-70k 经验3-5年 / 本科
    内容资讯,短视频 / D轮及以上 / 2000人以上
    职位职责: 1、 负责相关业务大数据项目整体架构规划; 2、 负责指导工程师进行技术验证与实现,关键技术问题的攻关,解决项目开发过程中的技术难题; 3、 负责项目对外技术沟通,具有较强的沟通,表达和文案能力; 4、 根据公司项目和业务发展特点,负责研究相关大数据前沿技术。 职位要求: 1、 熟练使用Hadoop、Hive、spark,flink等大数据框架,熟悉SQL、Java、Python等编程语言; 2、 有PB级大数据处理实战经验,熟悉整个大数据的完整处理流程,优秀的问题解决能力; 3、 善于沟通,对业务敏感,能快速理解业务背景,具备优秀的技术与业务结合能力; 4、 6年以上数据仓库或大数据开发,丰富的实时或者离线数据体系建设经验。
  • 35k-60k·14薪 经验5-10年 / 本科
    移动互联网,企业服务 / 不需要融资 / 500-2000人
    岗位职责: 1.负责客户需求的沟通与分析工作,为客户提供大数据的架构和技术解决方案; 2.负表业务场景分析,问题定位和数据挖掘等工作,为提供客户提供大数据的解决方案; 3.负责大数据平台,数据仓库,大数据中台、存储计算引擎等相关产品设计和规划落地。 岗位要求: 1、**本科以上学历,8年以上工作经验,主导过大数据平台产品的设计与开发工作,至少同类2年以上经验; 2、熟练掌握YARN、Hive、HBase、Kafka、Flink 、Spark、lceberg等大数据引擎和平台的常用使用方法(至少精通三个以上的大数据常用工具和框架) 3、对数据仓库,存储计算引擎有深入的理解,孰悉不同存储类型,计算引擎特征,以及所能解决的适应场景; 4、深度参与或主导过大数据平台、数据治理、数据中台等产品建设者优先; 5、具备较强的需求分析和技术规划能力,高度的抽案设计能力,思路清晰,善于思考,能独立分析和解央问题,具备良好的团队合作精神; 6、对新技术敏感,具备一定的技术预见和前瞻性,对不同的产品有自己的见解。
  • 25k-50k 经验5-10年 / 本科
    移动互联网 / 不需要融资 / 150-500人
    职责和任务: 1.架构设计: 设计和评估大数据架构,确保满足业务需求,包括数据采集、存储、处理和分析。 2.技术选型: 选择和评估大数据技术栈,包括但不限于Hadoop、Spark、Flink、Kafka等,确保系统的可维护性和性能。 3.数据治理: 制定和实施数据治理策略,确保数据质量、一致性和安全性。 4.性能优化: 分析和优化大数据处理流程,提高系统的性能和效率。 5.团队协作: 与数据工程师、数据科学家和其他相关团队密切合作,共同推动大数据项目的成功实施。 6.监控和维护: 建立监控机制,定期检查系统健康状况,并采取措施解决潜在问题。 7.新技术研究: 关注大数据领域的最新技术趋势,评估其在公司业务中的应用价值。 8.培训与指导: 培训团队成员,分享大数据领域的最佳实践,并提供技术指导。 资格要求: 1.本科及以上学历,计算机科学、信息技术或相关领域优先。 2.至少8年以上的大数据架构设计和实施经验。 3.深入理解Hadoop生态系统,包括HDFS、MapReduce、Hive等。 4.精通大数据处理框架,如Spark、Flink等。 5.熟悉实时数据处理和流处理技术,如Kafka。 6.具备良好的团队合作和沟通能力,能够与多学科团队协作。 7.出色的问题解决能力和创新思维。 8.有良好的领导力和项目管理经验。 9.具备数据治理和安全性的实践经验。 10.英语书写流利。
  • 25k-35k·14薪 经验5-10年 / 本科
    IT技术服务|咨询 / 上市公司 / 2000人以上
    职位描述: 1. 从事工业数据的采集、传输、分析、集成等技术研究及开发应用; 2. 负责但不限于生产制造管理主题领域的指标体系、数据模型和治理逻辑设计,从业务应用的视角,构建数据驱动的运营管理平台方案; 3. 作为大数据专家角色,充分与内外部合作,负责项目数据类的方案架构设计和技术规划并确保最终落地, 4. 牵头项目关键架构设计和组织技术难点攻关; 5. 参与工业数据标准制订,并且推动团队应用标准; 任职要求 1. 计算机、软件工程及相关专业,本科及以上学历,至少3年以上大数据项目相关工作经验; 2. 掌握Hadoop、HBase、Kafka、Hive、Flink、Spark、datav等组件中至少2项的工作原理,熟悉Hadoop生态系统; 3. 精通Java,Python中的一种或多种语言,熟练掌握海量数据分析的相关模型、算法,有制造行业大数据分析模型经验者优先; 4. 熟悉数据库开发,精通面向对象设计、设计模式,熟练MySQL、Redis等数据库; 5. 有指标系统和数据可视化系统开发经验优先; 7. 具备开发项目管理经验。
  • 17k-25k 经验3-5年 / 本科
    居住服务 / 不需要融资 / 500-2000人
    **工作职责:** 1、制定公司长中短期数据发展规划、数据分类分级等;负责建立数据治理与数据资产管理体系,并制定可落地的实施路径; 2、负责数据仓库、数据集市、报表平台等相关数据平台的规划、设计和开发管理,为研发团队提供低成本的大数据分析能力; 3、负责制定数据架构规范,数据基础架构和数据服务体系的设计,不断提升系统的稳定性和效率,为公司的业务提供大数据底层平台的支持和保证;搭建、维护实时计算的大数据平台,提供统一的实时分析服务; 4、研究未来数据模型和计算框架的创新与落地,参与制定并实践团队的技术发展路线。 **任职要求:** 1、本科及以上学历,计算机相关专业背景; 2、具备3年以上数据平台建设经验,在数据项目中担任过技术负责人,具备至少一个完整大数据平台、用户画像平台或BI系统搭建经验; 3、熟悉Java/Scala/Python中至少一门开发语言,熟悉SQL和常用数据库; 4、熟悉Elasticsearch、Hive、HBase、Spark、Storm、Flink、Impala、Druid、Kylin等其中一项或多项技术,熟悉数据仓库原理,有实时数仓和离线数仓设计与开发经验。 5、优秀的项目管理能力、团队管理能力,良好的沟通表达能力和分析、解决问题能力 6、优先考虑:主导或参与公司数据平台从零到一的搭建;用户画像或A/B测试平台搭建经验;租赁或地产相关行业经验;
  • 短视频 / 上市公司 / 2000人以上
    职位描述 1、参与快手数据平台新一代数据分析引擎的建设,支撑超大规模业务数据量,提供统一化极致性能的解决方案; 2、接受大数据平台系统设计与实现复杂度的挑战,分析和发现系统的优化点,负责推动系统的合理性、可靠性、可用性的提升; 3、和开源社区保持交流,从社区引入对公司业务场景有帮助的特性与系统,或将内部研发的功能贡献到社区。 任职要求 1、计算机或相关专业本科及以上学历; 2、熟悉主流的大数据分析引擎之一,比如 ClickHouse、Doris、Starrocks等,精读过源代码者尤佳,有开源系统二次开发经验或者所开发代码被开源社区接受者尤佳; 3、优秀的设计与编码能力,工程质量自我要求高,针对业务需求与问题,可快速设计与实现解决方案; 4、思维活跃,具备较强的问题分析与解决能力,强烈的责任心,对工作有激情,良好的沟通能力。
  • 20k-40k 经验不限 / 不限
    金融 / 不需要融资 / 2000人以上
    工作职责: 1. 主导武汉数据平台的架构设计和工作方向,分解及跟踪团队工作任务; 2. 理解公司业务逻辑和战略目标,根据业务需求制定数据和业务解决方案并推动落地;帮助公司业务优化流程、提高效率、降低成本或者创造新的商业价值; 3. 理解数据中台架构设计与管理思路,结合具体业务场景进行技术架构设计、数据平台新技术预研、数据仓库的建设,数据标准的建设等; 4. 负责设计和开发高效稳定的大数据处理系统,包括数据采集、存储、计算及实时流处理等; 5. 研究前沿大数据技术和框架,结合业务场景引入新技术,提升整体数据处理能力; 6. 参与大数据平台架构的设计与优化,解决数据传输、处理过程中的性能瓶颈; 任职资格: 1. 本科以上学历,硕士优先,有3年以上大数据相关开发经验; 2. 精通阿里数据中台或hadoop大数据平台架构设计与管理,有MC/HOLO/Flink/Spark/Hive/HBase中至少一种组件的实际开发经验,有Java和Python开发能力; 3. 熟悉至少一种关系型数据库(如:ORACLE、MYSQL、DB2等),精通SQL,有较好的SQL性能调优经验; 4. 掌握Java、Python、Shell,Scala等脚本语言至少一种; 5. 熟悉Linux操作系统和分布式系统原理,有大规模集群运维管理经验者优先; 6. 对数据和业务敏感,有良好的逻辑和沟通能力; 7. 需要具备优化和搭建大数据处理系统能力,数据仓库相关经验优先; 8. 对数据结构、算法设计有深入理解和实践经验,具有良好的问题定位和解决能力; 9. 具备较强的学习能力和团队协作精神、创新精神,善于在压力下工作,有责任心;
  • 45k-70k·14薪 经验5-10年 / 本科
    金融 / 上市公司 / 500-2000人
    岗位职责: 1. 负责大数据体系全栈技术架构优化,组件调优,并根据业务需求持续优化平台性能、稳定性和可靠性。 2.把握大数据相关技术的演进发展趋势,负责新技术专项课题研究,大数据产品相关全栈技术的架构设计、技术选型等。 3. 负责大数据应用设计和研发,解决实时和离线计算流程中性能、功能等多方面的挑战,打造高性能、高可用、可扩展的系统,支撑多项目多场景的通用接入; 岗位要求: 1、 ***本科及以上学历,计算机相关专业; 2、 精通大数据及数据仓库原理,5年以上大数据平台研发经验或架构经验; 3、掌握Hadoop生态圈的主流技术及产品,精通Flink/Spark/HDFS/HBase/Hive/ES/Kafka/ClickHouse等大数据组件的原理和开发调优; 4、 精通Java/Scala开发语言,熟悉Redis/MongoDB/MySql/Neo4j数据库开发优先; 5、 有开源框架贡献记录或者源码阅读经验者优先; 6. 对最新的大数据相关技术趋势有敏锐的洞察力,具备与时俱进的学习研究能力。对湖仓一体、大数据云原生、储算分离、数据编织、知识计算、分布式协同计算、高性能跨源查询等方面有一定的了解和研究基础。 7、 有很强责任心、团队精神和持续研究学习的能力,能够接受工作挑战。
  • 25k-35k·14薪 经验5-10年 / 本科
    IT技术服务|咨询 / 上市公司 / 2000人以上
    职位描述: 1. 从事工业数据的采集、传输、分析、集成等技术研究及开发应用; 2. 负责但不限于生产制造管理主题领域的指标体系、数据模型和治理逻辑设计,从业务应用的视角,构建数据驱动的运营管理平台方案; 3. 作为大数据专家角色,充分与内外部合作,负责项目数据类的方案架构设计和技术规划并确保最终落地, 4. 牵头项目关键架构设计和组织技术难点攻关; 5. 参与工业数据标准制订,并且推动团队应用标准; 任职要求 1. 计算机、软件工程及相关专业,本科及以上学历,至少3年以上大数据项目相关工作经验; 2. 掌握Hadoop、HBase、Kafka、Hive、Flink、Spark、datav等组件中至少2项的工作原理,熟悉Hadoop生态系统; 3. 精通Java,Python中的一种或多种语言,熟练掌握海量数据分析的相关模型、算法,有制造行业大数据分析模型经验者优先; 4. 熟悉数据库开发,精通面向对象设计、设计模式,熟练MySQL、Redis等数据库; 5. 有指标系统和数据可视化系统开发经验优先; 7. 具备开发项目管理经验。
  • 短视频 / 上市公司 / 2000人以上
    职位描述 1、为快手百亿级广告变现平台提供通用的基础设施、研发框架、运维工具等; 2、保障广告系统的可用性及稳定性; 3、参与设计与实现百TB级别容量的通用存储平台,包括单机过百万的高性能存储引擎、可扩展的数据存储服务、元数据管理服务等; 4、业界前沿架构与技术的探索与落地。 任职要求 1、至少精通一门主流服务端开发语言,如:C++、Java、Golang;熟悉一门脚本语言,Shell、Python等; 2、有分布式系统开发经验,包括分布式存储服务,计算平台,高并发实时服务等;了解分布式系统理论; 3、较强的问题分析与解决能力,能够归纳抽象问题并能给出系统的解决方案; 4、具有良好的团队合作意识和沟通能力,责任心强。 加分项: 1、有主流存储引擎、数据处理框架(Rocksdb、MySQL、HBase、Flink、Storm等)使用或开发经验; 2、有基于Docker、Kubernetes的容器化运维经验; 3、开源社区活跃贡献者。
  • 20k-35k·13薪 经验5-10年 / 本科
    软件服务|咨询,IT技术服务|咨询 / 上市公司 / 2000人以上
    工作职责: 1 . 基于公司能力为客户提供数字化转型咨询,负责业务、应用、数据和技术架构规划,帮助客户高效运用公司的产品和服务提升业务; 2.总结和沉淀对客户的最佳实践,形成可复制的解决方案,赋能前线销售和交付团队,帮助提升公司的技术竞争力; 3. 与销售、研发交付等团队紧密协作,共同推进标准产品与解决方案的销售,包括需求分析、方案设计、对客交流、商务合同签约等; 4. 对已经转化为交付的项目进行技术管理,对交付人员进行技术指导,确保项目的满意交付; 5. 管理客户的期望和公司的商业目标,确保交付的方案的可交付性和经济性。 任职资格: 1.3年以上运营商或者其它垂直行业的数字化转型的解决方案或架构设计从业经历; 2.对运营商行业和至少一个垂直行业的数字化方向的解决方案的行业知识、业务知识、业务架构、应用架构有整体深刻理解,能够在细分领域独立完成客户调研、需求分析、业务设计、架构设计、并能在技术团队支持下,完成业务架构的落地方案设计; 3.对数据中台技术、大数据技术、AI技术,以及数据治理的方案比较熟悉; 4.熟悉一个或多个垂直行业的现状(如电力、交通、政务等)重点包括基本面、政策、行业趋势和一些业务过程的细节,能够提供典型的业务场景,并能以令人信服的说明如何用数字化转型方法驱动所处行业业务的发展; 5. 有过一个或者多个成功案例,并在案例中作为方案专家利用数字化转型能力帮助客户获得了显著价值; 7. 具有娴熟的沟通技巧,执行力强,具有优秀的团队合作精神、敬业精神; 8. 熟悉数字化顶层设计方法论,有良好的文档撰写、讲解能力。
  • 20k-35k 经验3-5年 / 本科
    移动互联网,金融 / 上市公司 / 2000人以上
    岗位职责: 1、负责Hadoop、Hive、Hbase、Spark等大数据平台的规划、部署、监控、优化; 2、负责大数据平台的运营管理、方案评审、组件优化; 3、负责大数据平台的异常与故障处理,应急响应,保障平台持续稳定运行; 4、持续跟踪业界技术发展动态,并结合业务发展需要,研究引入新兴技术。 任职要求: 1、熟悉Hadoop大数据生态圈,熟悉Hive、Hbase、Yarn、Spark、kafka等组件的工作原理,并且有实际部署运维经验; 2、深入理解Linux系统,熟悉运维体系架构; 3、熟悉shell脚本及Python编程; 4、具备良好的团队协作意识与主动意识。 优先考虑: 有自动化运维平台构建经验或Hadoop组件源码阅读与分析能力者。
  • 内容资讯,短视频 / D轮及以上 / 2000人以上
    职位职责: 1、负责字节跳动基础架构下一代云平台的设计与开发工作,包括但不限于:网关/权限、交易支付、计量计费、预算配额等核心模块系统; 2、负责基础架构和火山引擎间的多云适配层与多云调度层建设,致力于让内部业务在保持字节技术生态体验的基础上,无缝使用和迁移到火山标准产品; 3、深刻掌握字节基础架构技术体系,结合业务痛点与演进方向,从架构视角在稳定性、成本、架构决策和定制系统层面,赋能集团业务服务体验与架构演进。 职位要求: 1、本科及以上学历,计算机相关专业优先; 2、熟练掌握Go/Python/Java/C/C++等1至2种语言,有良好的编程习惯及逻辑思维; 3、具备扎实的计算机基础知识,包括但不限于计算机网络、操作系统、设计模式、数据结构和算法; 4、具备云平台相关模块研发经验优先,包括但不限于网关/权限、交易支付、计量计费、预算配额; 5、熟悉常见分布式系统原理与实现优先,包括但不限于调度系统、存储、缓存、消息队列、大数据; 6、具有较强的独立发现问题、解决问题的能力,具有高度的技术热情和责任感; 7、具有良好的沟通、团队协作能力、推动和落地能力。
  • 25k-50k 经验3-5年 / 本科
    企业服务 / 未融资 / 15-50人
    岗位职责 1、设计、开发和维护企业级大数据平台和解决方案,包括数据采集、数据存储、数据处理和数据分析等。 2、使用Flink等流式计算引擎,实现实时数据处理和流式分析,提供实时的业务洞察和决策支持。 3、针对OLAP需求,设计和实现数据立方体、多维数据模型和数据聚合查询,以支持复杂的联机分析处理。 4、编写高效且可扩展的大数据处理和分析代码,提高数据处理和分析的效率和质量。 5、与数据科学团队合作,开发和实现数据处理和分析的需求和解决方案。 6、进行数据模型设计和数据架构优化,提高数据存储和计算的性能和可扩展性。 7、负责数据质量和数据安全的管理和监控,确保数据的合规性和机密性。 8、研究和探索新的大数据技术和解决方案,以不断提高大数据处理和分析的效率和质量。 9、建立和维护技术文档和标准,确保大数据开发的规范和一致性。 任职要求 1、本科及以上学历,计算机科学、软件工程或相关领域。 2、3年以上大数据开发经验,熟悉大数据技术栈和工具,如Hadoop、Spark、Kafka、Hive等。 3、熟悉流式计算引擎Flink,具备在实时数据处理和流式分析方面的经验。 4、了解OLAP(联机分析处理)的概念和技术,具备数据立方体和多维数据模型的设计和开发经验。 5、熟练掌握编程语言,如Java、Python或Scala,具备良好的编码和调试能力。 6、熟悉大数据处理和分析的各种技术和工具,如数据流处理、批处理、数据仓库等。 7、具备良好的数据库和SQL技能,熟悉关系型数据库和NoSQL数据库。 8、具备良好的沟通和团队合作能力,能够与不同背景和专业的人合作,解决技术和业务问题。 9、具备较强的学习能力和自我驱动能力,热爱技术研究和创新。 10、有较好的英文阅读和写作能力,能够阅读和编写英文技术文档。 必备条件 1、在Flink和流式计算领域有深入的研究和实践经验。 2、在OLAP(联机分析处理)领域有相关项目经验。 3、有大数据架构设计和优化经验,能够提供有效的解决方案和建议。 4、具备数据挖掘和机器学习的基础知识和经验。