• 25k-32k 经验5-10年 / 本科
    金融 / 上市公司 / 2000人以上
    工作职责 1、负责企业级数据平台整体架构,包括计算引擎、存储引擎、数据开发平台等方向的技术体系规划、架构设计及方案落地,为业务产品和算法开发提供高效的数据系统支撑; 2、负责大数据服务体系的环境、流程、规范和配套工具系统建设,保证数据研发体系的高效性与生产服务体系的稳定性、高性能、高可用性和可扩展性; 3、负责实时&离线计算框架的创新与落地,包括但不限于以下领域:大规模数据实时化、数据模型组织方式业务化等方面,参与制定并实践团队的技术发展路线; 4、负责与业务团队协同规划大数据平台能力开发,为业务平台提供数据交换,数据服务,数据开发等能力,参与制定并实践团队的技术发展路线; 5、关注业界最新技术,深入理解业务特征,前瞻性的进行技术预研与引入,支持业务的高速发展;建立良好的公司内外的业界技术影响力;参与培养未来数据人才;有效辅导团队,提升数据研发能力。 任职要求 1、计算机相关专业本科以上学历优先;8年以上大数据系统开发、设计经验,5年以上架构设计经验,金融行业从业经验; 2、精通大数据全栈架构,精通一种或多种分布式计算、存储、调度框架或工具(Yarn/Hive/MapReduce/Spark/Flink等),通读过其中之一的源码,有分布式系统的开发经验; 3、具有扎实的编程功底,熟悉常用的算法和数据结构,精通Java/GO/Python其中一门编程语言,有较强的分布式计算基础和算法工程能力,并具备丰富的实战经验; 4、负责过PB级别大数据平台整个产品线的业务架构工作,负责过海量数据平台上高可用、高性能分布式系统的架构开发,组织过中等以上规模项目,有互联网大数据平台建设等技术背景者优先; 5、熟悉常见的互联网,大数据、云计算、人工智能等技术和知识,优秀的业务理解和分析能力,有关键技术攻关的决心和能力; 6、有良好的团队沟通和协作能力,良好的自驱力和学习能力;主动积极,富有热情,能主动积极的思考和推动数据价值的落地。
  • 20k-40k 经验不限 / 本科
    文娱丨内容 / D轮及以上 / 2000人以上
    职位职责: 1、负责字节跳动数据中心网络规划设计和方案制定; 2、负责字节跳动数据中心基础设施网络性能评估、容量规划、安全评估等,从网络架构侧提升业务稳定性和可用性; 3、负责跟踪数据中心网络前沿技术研究及其应用,调研并推动数据中心网络新技术落地,提升字节跳动在该领域的竞争力; 4、参与网络自动化体系建设,实现网络标准化、工具化、可视化、自动化。 职位要求: 1、精通常用网络知识和技能,如TCP/IP、BGP、VXLAN、EVPN、MPLS、SR-TE、RDMA等; 2、深刻理解业界主流数据中心网络架构,包括物理网络和虚拟网络,具备丰富的网络架构设计能力; 3、精通DCN、DCI网络架构,对网络流量调度和优化有深刻理解和认识; 4、具备一定的数据分析能力,有成本意识和产品意识; 5、可承受较大压力,有责任感、较强的沟通协调能力,具有团队合作精神; 6、有大型数据中心网络架构工作经验者优先。
  • 40k-60k 经验10年以上 / 本科
    数据服务|咨询 / B轮 / 500-2000人
    工作职责:1、负责大数据平台架构设计、技术选型、技术难题攻关、核心功能设计与实现、性能调优等工作,并沉淀大数据平台标准建设方案。2、参与大数据相关项目的需求沟通,根据需求及行业特点设计大数据解决方案、制定开发计划并跟进大数据的具体实施。3、负责大数据平台的基础技术规划,拟定开发规范、开发文档模板、开发流程图。4、具体的大数据开发相关工作,并做CODE review。※ 技术栈:Hadoop/HBase/Hive/Kudu/Spark/Flink任职资格:1、 计算机相关专业,本科及以上学历,4年以上的大数据相关经验,2年以上大数据架构设计经验或应用架构设计经验;2、 深入理解大数据产品和数据分析相关技术和实现方法,具有大数据中台项目经验;3、 熟练Hadoop、Spark、Flink等大数据计算框架,掌握其内部原理,运行机制,调优机制等。掌握常用消息中间件如Kafka、Pulsar等主流技术。4、 具有良好的编程和架构能力,熟悉Java等开发语言并有相关的项目开发经验。5、 熟悉主流的数据库,熟练使用Git、docker、Jenkins等工具。6、 熟练使用Linux操作系统,熟悉Shell脚本以及常用的管理命令;7、 对当前流行的大数据框架、分布式架构有深刻理解。8、 责任心强,自驱力强,思维严谨,有较强的学习创新能力,有团队协助精神。
  • 30k-40k 经验5-10年 / 本科
    软件服务|咨询 / D轮及以上 / 500-2000人
    职位描述: 1、负责数据中台架构设计、进行新技术可行性研究。 2、制定开发规范、评审开发质量。 3、负责基于数据中台产品进行数据建模、开发。 4、负责带领开发人员完成数据中台数据治理、数据资产盘点、指标和标签开发、数据质量管理、元数据管理。 5、对海量数据进行收集、存储、管理、分析、建模 6、对海量数据进行统计分析挖掘,不断提升系统系统运行效率 8、公司级指标库的建设与管理 职位要求: 1、5年以上java及大数据相关开发经验; 2、熟悉数据仓库原理,具备数据模型设计能力,能够熟练基于事实、维度的建模,掌握模型原理; 3、熟练掌握一个关系型数据的开发,如:Mysql/Oracle; 4、扎实的Java语言基础,可开发高效可利用的代码,了解虚拟机性能优化策略,熟练代码管理工具。 5、具有丰富的Spark开发经验 6、具备完整项目经验(OLAP),熟练掌握各种场景SQL处理和调优能力 7、突出的分析和归纳能力、优秀的沟通表达能力 8、对各类指标有较好的理解与抽象能力,善于挖掘指标的归因逻辑
  • 30k-45k 经验10年以上 / 本科
    信息安全 / 不需要融资 / 150-500人
    岗位职责: 1、负责公安轨迹大数据平台的系统分解、技术选型、架构搭建、规范制定; 2、通过模块化、服务化、平台化的建设,降低系统间依赖,提升系统稳定性、可扩展性; 3、编写设计方案、技术标准,解决项目中的关键架构问题; 4、主导技术难题攻关,持续提升系统在大数据、高并发请求下的性能可靠性; 5、关注相关领域的发展趋势和技术动态,持续改进和拓展产品与平台的探索和落地。 任职要求: 1、本科及以上学历,计算机相关专业,8年以上工作经验,其中3年以上系统架构工作经验; 2、有轨迹大数据应用经验优先,有知名成熟平台系统的架构设计经验优先; 3、拥有高可用性、高扩展性、分布式系统的架构项目经验,熟悉常用系统设计思想; 4、有丰富高并发、高吞吐、高稳定性系统架构设计与实现经验,对架构重构分析、分布改进有实战经验。
  • 85k-120k 经验5-10年 / 本科
    移动互联网 / C轮 / 500-2000人
    岗位职责 ○ 架构设计:负责大数据相关产品的系统设计、架构优化、数据模型抽象等工作,提供稳定高效的数据服务能力,支撑产品侧的敏捷迭代和业务侧的数据分析服务 ○ 数据治理:主导数据治理工作,包括数据接入(多数据源)、数据存储、数据清洗、质量分析、数据开发等治理链路 ○ 技术攻关:负责指导工程师进行技术验证与实现,核心技术问题的攻关,解决项目开发过程中的技术难题 ○ 问题处理:跨团队/部门协作,系统分析并解决各类大数据平台相关的运行或数据问题 ○ 技术研究:根据公司项目和业务发展特点,负责研究相关大数据前沿技术 岗位要求(需要有数据型产品的数据架构经验) ○ 本科学历及以上,计算机相关专业,7年以上工作经验,不少于5年的大数据领域架构设计工作经验 ○ 对大数据基础架构和平台、数仓建模、数据治理有深刻理解 ○ 精通Hadoop、Spark、Flink等框架,能够独立搭建离线、实时大数据平台 ○ 精通主流的数仓架构设计,熟悉Hbase、Hive、Doris、PostgreSQL等,理解HOLAP,可以进行海量数据模型的设计及开发; ○ 善于沟通,对业务敏感,能快速理解业务背景,具备优秀的技术与业务结合能力 优先考虑: ○ 有舆情监测平台产品工作经验 ○ 有大数据AI平台架构经验 ○ 独立或主导大数据方向的框架自研 ○ 有高水平学术论文者(主流期刊刊发表)
  • 30k-60k·15薪 经验5-10年 / 本科
    软件开发 / 不需要融资 / 150-500人
    岗位职责: 1.负责大数据平台架构设计、技术选型; 2.负责海量数据的处理分析的性能支撑; 3.负责实时处理系统的设计和开发工作; 4.对系统扩展、安全、性能等负责,解决开发,运行中出现的各种技术难题; 5.主导大数据平台技术架构规范、标准的制定,为应用设计、开发及部署提供架构指导原则。 岗位要求: 1.计算机或相关专业本科以上学历,7年以上大数据平台架构设计经验,2个以上大数据类项目开发经验; 2.精通常用大数据技术、数据处理架构,熟悉 Hadoop/Spark/Flink/Hive/Hbase、Greenplum、PostgreSQL、Clickhouse、Vertica等大数据技术至少一种,并能结合业务场景进行架构设计; 3.具有较强的编程能力,熟练使用java开发; 4.熟悉高可用、高并发、高性能的分布式系统的设计及应用,有丰富的线上调优经验。
  • 45k-55k·14薪 经验5-10年 / 本科
    移动互联网,企业服务 / 不需要融资 / 500-2000人
    岗位职责: 1、协助产品负责人制定大数据产品或系统的技术架构方案和实施路线,对整体软件方案、内部系统优化方案建议及决策,参与系统设计方案评审 2、子系统或模块的设计与开发,包括接口、业务逻辑定义、数据模型的设计与开发等 3、负责组织研发数据质量、数据分析整体方案,根据要求进行文档与代码的设计、编写、评审、维护工作 4、组织编写相关技术文档,协调和培训开发人员,辅助完成产品或系统开发 技能要求: 1、有5年以上IT行业技术研发类从业经验,独立系统设计、架构设计和研发经验 2、熟悉大数据系统技术架构及关键技术、软件研发过程,熟练掌握设计模式、开发语言、算法基础、数据结构等基本知识 3、熟悉领域设计理论,熟悉UML建模语言。 4、熟悉JAVA/Go/C++等开发语言及相关技术,熟悉各种数据分析框架架构原理。 5、熟练掌握Mysql、Oracle、Hdfs、Hive等主流数据库,较强的数据库及SQL能力,熟练使用Linux系统。 6、具有较强的技术风险把握能力和识别能力、应用系统架构及从技术角度分析业务的能力 7、沟通能力优秀,具备良好的逻辑思维,思路清晰,善于思考,能独立分析和解决问题,善于在强压下推进项目
  • 25k-50k·13薪 经验5-10年 / 本科
    软件服务|咨询,数据服务|咨询,信息检索 / 未融资 / 150-500人
    工作内容: 1、主导大数据团队的算法/数据框架搭建,并进行优化和落地; 2、负责设计并构建数据平台,落实底层数据平台、存储平台和分析平台的设计和搭建工作; 3、参与大数据平台架构设计、核心编写,解决项目开发过程中的重大技术问题; 4、负责数据平台运行性能、可用性、扩展性等监控与优化调控; 5、负责构建大数据服务体系,提供统一数据产品和工具体系; 6、负责指导数据平台研发成员工作,提升研发能力。 任职要求: 1、本科及以上学历,5年以上实际开发经验,具备3年以上大数据相关工作经验优先; 2、熟悉常用算法和数据结构,熟悉MongoDB、Hadoop/Hbase/Storm/Spark/TensorFlow/Hive等主流技术; 3、至少掌握一门语言(Scala/Java/python/php/R),熟悉一种算法库(MLib/Weka/R算法库等),有机器学习平台搭建经验; 4、熟悉数据挖掘相关算法,包括但不限于决策树、SVM、聚类、逻辑回归等; 5、有相关的的数据分析、挖掘、清洗和建模的经验,熟悉Spark,Hadoop,Hive,Storm者优先; 6、具有较强的数据挖掘、优化理论、机器学习的理论基础和项目实践,精通数据分析与各种算法模型; 7、了解大数据生态,对行业和技术的发展有自己的见解,具有分布式存储、计算平台的开发、调优和运维经验; 8、具备多个数据平台开发经验,熟悉Hadoop、Spark、Storm等平台; 9、熟悉常用分布式系统的体系架构、通信机制和优化方法,拥有大规模分布式系统建设经验。
  • 30k-45k·13薪 经验5-10年 / 本科
    生活服务,智能硬件 / 上市公司 / 2000人以上
    岗位职责: 1.负责大数据平台架构设计、技术选型; 2.负责海量数据的处理分析的性能支撑; 3.负责实时处理系统的设计和开发工作; 4.对系统扩展、安全、性能等负责,解决开发,运行中出现的各种技术难题; 5.主导大数据平台技术架构规范、标准的制定,为应用设计、开发及部署提供架构指导原则。 岗位要求: 1.计算机或相关专业本科以上学历,5年大数据平台架构设计经验,2个以上大数据类项目开发经验; 2.精通常用大数据技术、数据处理架构,熟悉 Hadoop/Spark/Flink/Hive/Hbase、Greenplum、PostgreSQL、Clickhouse、Vertica等大数据技术至少一种,并能结合业务场景进行架构设计; 3.具有较强的编程能力,至少熟练使用Python/Java其中的一种开发语言; 4.熟悉高可用、高并发、高性能的分布式系统的设计及应用,有丰富的线上调优经验。
  • 30k-50k·13薪 经验5-10年 / 本科
    IT技术服务|咨询 / 不需要融资 / 500-2000人
    工作职责 1.调研及分析政府行业城市大数据底座架构,并结合客户实际业务制定不同项目的数据架构方案; 2.基于政府客户数字化需求,联合解决方案同事,输出数据解决方案; 3.承担客户需求调研,推动并落地数据集成,数据治理,离线开发,实时开发,算法开发,BI分析的系统性工作; 4.负责数据生态公司及其数据产品的选型及分析工作,并拟定选型报告,对选型结果负责; 5.深入了解实际业务,与业务部门高效配合,通过数据分析、数据挖掘、机器学习等方法挖掘数据价值,不断完善数据预测、决策支撑等相关体系; 6、负责大数据平台开发的架构工作; 7、智慧城市及交通行业背景优先。 工作要求 1.算机、软件开发、统计学相关专业优先,具有5年以上数据相关工作经验; 2.丰富的大项目的经验,有丰富的跨团队、部门的项目资源整合能力,能够独立主导项目; 3.对大数据技术较深理解,熟悉多种开源技术框架,如:Hadoop、Spark、Flink、Elasticsearch、Kafka、DataX、Flume 等; 4.擅长业务抽象和领域数据建模,具备较丰富的海量数据采集、治理、分析等实战项目经验; 5.优秀的大数据分析和问题解决能力,能够攻克复杂的系统难题,有机器学习实践经验者优先; 6.精通Java和Python语言,常用的数据结构,了解最新的前端框架; 7.熟悉主流的云生态环境。
  • 45k-75k·16薪 经验5-10年 / 本科
    移动互联网,企业服务 / 不需要融资 / 500-2000人
    产品架构师 岗位职责: 1、协助产品负责人制定大数据产品或系统的技术架构方案和实施路线,对整体软件方案、内部系统优化方案建议及决策,参与系统设计方案评审 2、子系统或模块的设计与开发,包括接口、业务逻辑定义、数据模型的设计与开发等 3、负责组织研发数据质量、数据分析整体方案,根据要求进行文档与代码的设计、编写、评审、维护工作 4、组织编写相关技术文档,协调和培训开发人员,辅助完成产品或系统开发 技能要求: 1、有5年以上IT行业技术研发类从业经验,独立系统设计、架构设计和研发经验 2、熟悉大数据系统技术架构及关键技术、软件研发过程,熟练掌握设计模式、开发语言、算法基础、数据结构等基本知识 3、熟悉领域设计理论,熟悉UML建模语言。 4、熟悉JAVA/Go/C++等开发语言及相关技术,熟悉各种数据分析框架架构原理。 5、熟练掌握Mysql、Oracle、Hdfs、Hive等主流数据库,较强的数据库及SQL能力,熟练使用Linux系统。 6、具有较强的技术风险把握能力和识别能力、应用系统架构及从技术角度分析业务的能力 7、沟通能力优秀,具备良好的逻辑思维,思路清晰,善于思考,能独立分析和解决问题,善于在强压下推进项目
  • 28k-35k 经验5-10年 / 本科
    电商平台 / A轮 / 500-2000人
    大数据架构师 岗位职责 1、参与大数据产品规划,负责大数据综合解决方案设计,包括离线/实时计算、数据分析 2、负责大数据平台基础架构设计、性能优化、保证数据安全和系统稳定 3、根据业务需求,设计好数据仓库,数据模型,数据流程,包括元数据管理、ETL调度、数据集成等 4、负责设计数据管理与治理机制,包括元数据管理、数据质量检查、数据分级管理等系统的设计、开发及应用 5、研究大数据技术领域最新主流技术,引入新的技术组件,推广新的技术应用 6、负责对大数据开发人员、运维人员以及其他相关人员进行技术培训,并整理分享 任职要求 1、本科及以上学历,5年及以上大数据平台架构经验, 精通HDP, CDH, CDP 至少一种集群安装部署及架构 2、精通常用开源分布式系统,包括Hadoop/ Hive/ Spark/ Flink/ HBase / Impala/ Clickhouse/ Doris 4、熟悉MySQL、PostgreSQL、NoSQL等至少一种数据中心建设方案,可以进行产品的独立部署、高可用架构和性能优化 5、熟悉数据仓库原理,有实时数仓和离线数仓设计与开发经验 6、有日志采集、数据处理、数据仓库建模、实时计算、ETL 等经验 7、熟练使用 Linux 系统,有 Shell、Python 等脚本编程经验,熟悉算法数据结构 8、较强的学习能力和技术钻研能力、有自我驱动意识,对数据采集、数据治理、数据开发、数据分析、数据建模、算法等有深刻认识和实战经验。 9、具有良好的团队协作精神,思维清晰敏捷,逻辑分析能力强,有较强的责任心和事业心
  • 40k-70k 经验10年以上 / 本科
    其他 / 不需要融资 / 2000人以上
    1、负责公司大数据方向的数据处理架构和模型设计,结合公司实际业务情况进行技术选型; 2、带领团队完成ETL任务调度系统设计,业务数据ETL流程处理,并确保数据质量; 3、负责数据多维分析引擎性能优化,协助团队解决开发过程中的技术难题; 4、参与数据平台产品的整体评估、设计、架构及关键模块的研发; 5、制定数据开发、主数据、数据质量、数据服务等规范。 1.计算机、通信、数学相关专业毕业,大学本科以上学历,6年以上的工作经验; 2.熟悉Java,Scala、SQL等常用开发语言; 3.基于开源hadoop生态构建的大数据基础架构,包括但是不限于HDFS/YARN/Hive/Spark/Flink/HBase/ES/Presto等分布式系统 4.扎实的计算机基础及编程能力,熟悉常用算法和设计模式; 5.具有强烈的责任心以及团队合作精神,具有较强沟通能力,积极向上。
  • 25k-35k·13薪 经验5-10年 / 本科
    电商,其他 / 上市公司 / 2000人以上
    岗位职责: 1. 负责公司整体数据架构设计和规划,协调各方面资源推动落地实施 2. 针对各种业务增长和业务需求,制定实施技术方案,解决业务问题 3. 参与数据仓库和数据平台的架构规划、模型设计、平台设计,输出相关设计文档 4. 负责公司数据中台的设计和研发,制定数据架构规范,指导团队落地 5. 跟踪行业动态,引入新的技术组件,推广新技术应用 岗位要求: 1. 本科及以上学历,5年及以上大数据数仓和平台架构实际工作经验 2. 熟悉hadoop大数据生态和常用组件,例如:Hive\MR\sqoop\Spark\Flink\hudi\Iceberg 3. 对海量数据计算处理、性能调优、计算任务优化有深入研究,精通Hive Sql计算优化 4. 精通数据仓库模型设计方法,同时具备实际经验,对数据模型具有深刻见解 5. 跟踪、监控、维护及优化数据模型,确保数据模型被有效使用 6. 负责制定企业数据中台数据规范、管理规范、数据标准、技术管理流程等 7. 优先考虑:主导或参与数据中台,数据仓库,独立负责完成相关模块;熟悉python、java至少一种语言;