• 13k-20k 经验5-10年 / 本科
    IT技术服务|咨询,软件服务|咨询,网络通信 / 不需要融资 / 15-50人
    岗位职责: 1、能够独立完成系统大数据平台架构的设计与构建; 2、熟悉掌握至少一种大据平台的使用,能够独立完成大据分布式应用平台的搭建; 3、熟悉数据库建模理论; 4、深刻理解大数据处理(流计算、分布式计算、DFS、分布式存備、边计算等)相天技术和实现方法; 5、熟悉Hadoop,Hive Spark等大数据技木; 6、熟练使用 Python、Ri语言、SPSS等一种或多种语言或工具进行数据分析与处理; 7、熟练掌握MySQL、Oracle、Redis等一种或多种数据库的使用; 8、思清清晰、具备良好的沟通能力和理解能力以及较强的学习能力; 9、熟悉 Linux系统优先。
  • 25k-50k·13薪 经验5-10年 / 本科
    软件服务|咨询,数据服务|咨询,信息检索 / 未融资 / 150-500人
    工作内容: 1、主导大数据团队的算法/数据框架搭建,并进行优化和落地; 2、负责设计并构建数据平台,落实底层数据平台、存储平台和分析平台的设计和搭建工作; 3、参与大数据平台架构设计、核心编写,解决项目开发过程中的重大技术问题; 4、负责数据平台运行性能、可用性、扩展性等监控与优化调控; 5、负责构建大数据服务体系,提供统一数据产品和工具体系; 6、负责指导数据平台研发成员工作,提升研发能力。 任职要求: 1、本科及以上学历,5年以上实际开发经验,具备3年以上大数据相关工作经验优先; 2、熟悉常用算法和数据结构,熟悉MongoDB、Hadoop/Hbase/Storm/Spark/TensorFlow/Hive等主流技术; 3、至少掌握一门语言(Scala/Java/python/php/R),熟悉一种算法库(MLib/Weka/R算法库等),有机器学习平台搭建经验; 4、熟悉数据挖掘相关算法,包括但不限于决策树、SVM、聚类、逻辑回归等; 5、有相关的的数据分析、挖掘、清洗和建模的经验,熟悉Spark,Hadoop,Hive,Storm者优先; 6、具有较强的数据挖掘、优化理论、机器学习的理论基础和项目实践,精通数据分析与各种算法模型; 7、了解大数据生态,对行业和技术的发展有自己的见解,具有分布式存储、计算平台的开发、调优和运维经验; 8、具备多个数据平台开发经验,熟悉Hadoop、Spark、Storm等平台; 9、熟悉常用分布式系统的体系架构、通信机制和优化方法,拥有大规模分布式系统建设经验。
  • 35k-60k·13薪 经验10年以上 / 本科
    数据服务 / D轮及以上 / 150-500人
    1、精通java/scala等编程技术,熟悉常用算法,熟悉多线程;有分布式开发的实践经验; 2、有技术追求,coding能力强,有很强的问题解决能力; 3、有主流大数据计算引擎(包括但不限于Spark、Flink、Hive、Impala等)实际应用经验,对原理有比较深入的理解,有调度(或ETL)系统、引擎平台的产品化、二次开发的经验; 4、有大规模集群分布式数据库(hbase、kudu等),或者minio、ceph等分布式存储有应用或二次开发的实践经验的加分; 5、对数据处理(实时/离线)、数据仓库(数据湖)、数据分析等业务处理过程有深刻体会,对业界的发展趋势有独立见解的加分; 6、对 Azure Data Factory、Google Cloud DataFlow、Ali DataWorks等类似产品有经验的加分; 7、对k8s调度机制有深入实践,对 argo、kubeflow等引擎有实践经验的加分; 8、对金融领域的规则引擎、决策引擎、风控引擎等产品有开发、产品经验的加分; 岗位职责: 1、参数批处理/实时处理平台 data pipeline 、data flow、规则引擎等产品的产品设计、架构设计、核心开发等工作; 2、参与Spark、hive、Spark Streaming、flink、kafka、hbase、kudu、impala等组件的应用架构设计、专家支持等工作; 3、参与大数据离线/实时计算平台、数据中台、数据湖等平台系统的应用架构优化、性能改进、功能扩展、故障分析等工作; 4、参与其他任务;
  • 30k-45k 经验5-10年 / 本科
    数据服务,广告营销 / B轮 / 50-150人
    岗位职责: 参与软告大数据平台、数据分析系统的研发工作,涉及范围包括: 1. 参与超大规模实时计算、存储、查询、可视化解决方案的设计&开发; 2. 负责实时/离线数仓体系建设,关注数据质量、元数据管理、数据安全、数据挖掘,构建可扩展的数据仓库和分析解决方案; 3. 深入理解业务,围绕数据分析搭建完善的数据服务,如用户标签系统、特征平台、机器学习平台等,驱动业务的发展。 任职要求: 1. 6年以上数据仓库或大数据开发,丰富的实时或者离线数据体系建设经验,本科及以上学历; 2. 有超PB级别大数据处理实战经验,熟悉整个大数据的完整处理流程,优秀的问题解决能力; 3. 精通Java/Python/Scala等一门语言,精通SQL,熟悉Hadoop/Spark/Hive/Hbase/Flink等大数据研发工具; 4. 有MaxCompute,ClickHouse,Lindorm,OSS,QuickBI等使用经验优先; 5. 善于沟通,对业务敏感,能快速理解业务背景,具备优秀的技术与业务结合能力;
  • 25k-35k·15薪 经验5-10年 / 本科
    移动互联网,金融 / 不需要融资 / 150-500人
    Job Overview: 负责基于大数据的数据治理体系建设 利用大数据相关技术实现平台化业务数据中心,提供全面的数据服务以支持商业智能   Job Responsibilities and Duties: 负责数据相关技术解决方案设计和建设 制定数据相关管理制度和规范,并定期审查落实情况 构建大数据质量体系,持续提升数据质量 跟踪大数据相关领域最新的技术发展趋势,持续改进现有解决方案 结合人工智能等技术实现数据信息增值 协助落实数据信息安全相关工作  Job Qualifications: 5年以上大数据处理研发经验,精通Java/Python/Golang中至少一种编程语言 精通Hadoop、HDFS、Hbase、Hive、ElasticSearch、ClickHouse等技术 精通Flink、Storm、Spark等处理框架,有分布式数据处理经验 良好的数据分析和算法知识积累 勤勉尽责,良好的承压、沟通表达、自学和问题分析能力 金融行业从业者有先,熟悉区块链技术者优先 熟悉AWS云平台技术者优先
  • 20k-40k·18薪 经验5-10年 / 本科
    物联网 / 不需要融资 / 500-2000人
    工作职责: 1、负责大数据领域的产品、项目架构指导及评审; 2、负责大数据领域相关公共及底座能力架构设计、技术难题攻关、核心代码编写及开发指导; 3、参与大数据领域相关的技术标准规范制定及技术引进; 4、上级交办的其他事项。 岗位要求: 1、计算机相关专业,本科以上学历,8年以上开发经验,2年以上的大数据项目架构经验; 2、深入理解大数据产品和数据分析相关技术和实现方法; 3、熟练使用hadoop及hadoop生态圈中的常用组件,如Spark、Hive、HBase 等;理解MapReduce、HDFS、spark RDD/DataFrame原理; 4、熟悉Flink或者Spark Streaming等实时计算框架; 5、至少熟悉Java,Python,Scala一种或者多种语言,熟悉Oracle\MySQL,熟悉Linux及Shell; 6、熟悉数据挖掘、可视化分析,各种BI算法和产品等; 7、有机器学习或深度学习经验优先; 8、熟悉Spring Boot,有Spring Cloud等微服务相关项目开发经验优先; 9、具有良好的沟通协调能力和团队合作精神。
  • 25k-40k 经验3-5年 / 本科
    金融 / 上市公司 / 2000人以上
    职责描述: 1、负责大数据平台设计和落地,参与核心功能模块的代码编写,进行业务场景和平台实现; 2、熟悉主流的数据湖Lambda架构和Kappa架构; 3、负责保险行业海量业务数据的实时和批量接入,构建由数据接入到数据服务的可配置化平台; 4、与业务、产品、研发等其他团队合作,深入挖掘场景,设计建立性能优越的数据中台; 5、制定数据架构规范,进行代码规范写,指导团队落地,参与项目质量审核,提升团队开发质量和效率 任职要求: 1、计算机或信息技术相关专业,**及以上学历,有5年以上的大数据领域工作经验,对大数据体系有深入的理解; 2、有深厚的java或scala语言功底,对分布式、网络、高并发有自己的理解,熟悉微服务,工作流,调度系统,对大型Java项目有架构能力; 3、具有扎实的大数据系统构建经验,对Hadoop、Spark、HDFS、Hbase、Kafka、Flink、Hudi等分布式框架和中间件有深刻理解,有独立搭建运维hadoop平台经验者优先 4、优秀的协调沟通与团队协作能力,学习能力强,极强的责任心,能承受一定的工作压力,独立思考并能以产品的思维提出解决方案。
  • 30k-40k·14薪 经验5-10年 / 本科
    数据服务|咨询,人工智能服务,营销服务|咨询 / B轮 / 500-2000人
    职位描述: 1、负责公司大数据相关平台的设计及开发工作;制定数据架构规范,指导团队落地; 2、熟悉实时、离线计算相关的原理,主流技术及相关产品,负责根据业务需求选型并设计相应的系统产品; 3、熟悉数仓、时序、列式等主流数据库技术,应用场景、负责根据业务需求选型并设计相应的系统产品; 4、系统核心部分代码编写、指导和培训工程师、不断进行系统优化; 5、研究前沿技术,解决实际业务场景中问题; 6、负责项目组相关产品的研发。 任职资格: 1、本科及以上学历,有5年以上的工作经验,大数据相关产品设计及开发至少经验3年以上; 2、熟悉大数据开发框架及业界主流技术框架,如Hadoop、Spark、Hbase、Storm、Flink、SparkStreaming等; 3、熟悉JAVA、Scala、Python、JS中的至少一种,掌握常见的数据结构、算法; 4、熟悉数据库,数据仓库的原理及应用; 5、具有大数据实时、离线计算,数据交换的开发经验; 6、具备优秀的逻辑思维能力,善于解决问题和分析问题。
  • 30k-50k·13薪 经验5-10年 / 本科
    IT技术服务|咨询,人工智能服务,物联网 / 不需要融资 / 150-500人
    "岗位职责: 1. 负责平台应用数据仓库及数据集市的建设,通过数据+算法+工程化能力,处理和萃取数据,赋能业务与产品; 2. 参与平台大数据基础架构和技术体系的规划建设,包括数据治理、数据质量与稳定性保障体系; 3. 参与平台业务监控、订单履约数据看板等实时应用数据开发; 4. 与算法岗团队紧密配合,完成算法所需底层数据、特征的加工、管理。" "任职要求: 1.有至少2年以上大数据开发经验,熟悉Spark、Hadoop、hive等相关数据开发技术栈,有Blink等实时数据开发经验尤佳; 2. 有较为丰富的数据仓库及数据平台的架构经验,精通数据仓库建模及ETL设计开发; 3. 有较为系统的海量数据性能处理经验; 4. 具备一定的Java或Python语言开发能力,有能力开发高效的UDF,具备基础机器学习算法知识尤佳; 5. 良好的逻辑思维、语言表达能力、善于沟通,乐于为数据的良好、顺畅应用编写高可读性的文档。"
  • 40k-70k·14薪 经验5-10年 / 本科
    企业服务,人工智能 / A轮 / 50-150人
    职位要求: 1、精通java/scala等编程技术,熟悉常用算法,熟悉多线程;有分布式开发的实践经验。 2、有技术追求,coding能力强,有很强的问题解决能力; 3、有主流大数据计算引擎(包括但不限于Spark、Flink、Hive、Impala等)实际应用经验,对原理有比较深入的理解,有调度(或ETL)系统、引擎平台的产品化、二次开发的经验; 4、有大规模集群分布式数据库(hbase、kudu等)有应用或二次开发的实践经验的加分; 5、对数据处理(实时/离线)、数据仓库(数据湖)、数据分析等业务处理过程有深刻体会,对业界的发展趋势有独立见解的加分; 6、善于沟通,对业务敏感,能快速理解业务背景,具备优秀的技术与业务结合能力; 7、6年以上数据仓库或大数据开发,丰富的实时或者离线数据体系建设经验。 岗位职责: 1、 负责相关业务大数据项目整体架构规划; 2、 负责指导工程师进行技术验证与实现,关键技术问题的攻关,解决项目开发过程中的技术难题; 3、 负责项目对外技术沟通,具有较强的沟通,表达和文案能力; 4、 根据项目和业务发展特点,负责研究相关大数据前沿技术。
  • 35k-50k 经验5-10年 / 本科
    移动互联网 / 不需要融资 / 500-2000人
    职责描述: 1.带领大数据团队进行大数据平台的建设与生产运维; 2.基于公司和集团业务,进行工具产品选型,领导数据仓库、数据集市的架构设计; 3.目标导向,带领团队完成大数据技术方案,解决技术难题,; 4.支持商业智能(BI)与数据分析、数据挖掘以及商业价值实现的业务需求; 5.承担团队管理职责,进行业绩考核和人才培养; 6.同公司其他相关部门或其他公司的业务和技术对接人进行沟通和交流。 任职要求: 1.8-10年以上大数据工作经验,知名院校本科及以上学历; 2.熟练掌握Spark/Hadoop/Hive/Flink/Kafka等产品,有多种业务场景下的实践经验; 3.有金融业数据仓库建模、数据平台搭建和数据开发经验; 4.具有建设数仓,建设数据集市,建设自助分析平台,并将大数据分析应用到实际业务经历者优先; 5.对新技术有好奇心,善于主动学习,有较强的解决问题的能力。 公司简介
  • 30k-50k 经验5-10年 / 本科
    移动互联网,金融 / 不需要融资 / 150-500人
    岗位职责: 1.打造领先大数据平台,包括数据采集、实时数据流、数据仓库、调度系统、查询引擎等,降低数据的使用门槛,实现数据价值; 2.打造业界领先的采集、存储、计算等分布式系统,为海量数据和业务系统提供可靠的基础设施; 3.负责大数据平台数据治理功能的技术方向评估、技术选型、架构设计 4.负责全面了解公司业务,进行深层次的数据分析,为数据开发项目提供指导性的意见,从数据角度为公司产品开发、业务运营提供决策支持建议; 5.对全链路数据质量监测,进行实时监控,分析,最终提供低延时,高可用等指标; 6.对接数据平台上的各种业务方,满足不断发展的业务系统建设需求; 7.对接各类数据源系统,包括关系数据库,非关系型数据库,日志等系统。 职位要求: 1.计算机、数学相关专业本科及以上学历,5年以上开发经验; 2.扎实的Java开发功底,理解IO、多线程、集合、并发包,对JVM原理有较好的了解; 3.存储方向:对HDFS、Hive、Redis、MySQL、HBase、Kafka的一项或多项有经验者优先; 4.计算方向:对Spark、Storm、Flink、Hive、Druid的一项或多项有经验者优先,主导或参与过基于sparkstreaming或flink等流计算方案落地优先; 5.资源管理方向:对YARN、Mesos的一项或多项有经验者优先; 6.追求优秀的代码质量,高标准,强悍的编码和trouble-shooting能力,优秀的团队沟通与协作能力; 7.熟悉数据挖掘、机器学习的基本概念和流程,对数据敏感,理解数据应用的各个环节,能够与数据分析、数据科学家和应用开发同学无缝合作。
  • 28k-35k 经验5-10年 / 本科
    电商平台 / A轮 / 500-2000人
    大数据架构师 岗位职责 1、参与大数据产品规划,负责大数据综合解决方案设计,包括离线/实时计算、数据分析 2、负责大数据平台基础架构设计、性能优化、保证数据安全和系统稳定 3、根据业务需求,设计好数据仓库,数据模型,数据流程,包括元数据管理、ETL调度、数据集成等 4、负责设计数据管理与治理机制,包括元数据管理、数据质量检查、数据分级管理等系统的设计、开发及应用 5、研究大数据技术领域最新主流技术,引入新的技术组件,推广新的技术应用 6、负责对大数据开发人员、运维人员以及其他相关人员进行技术培训,并整理分享 任职要求 1、本科及以上学历,5年及以上大数据平台架构经验, 精通HDP, CDH, CDP 至少一种集群安装部署及架构 2、精通常用开源分布式系统,包括Hadoop/ Hive/ Spark/ Flink/ HBase / Impala/ Clickhouse/ Doris 4、熟悉MySQL、PostgreSQL、NoSQL等至少一种数据中心建设方案,可以进行产品的独立部署、高可用架构和性能优化 5、熟悉数据仓库原理,有实时数仓和离线数仓设计与开发经验 6、有日志采集、数据处理、数据仓库建模、实时计算、ETL 等经验 7、熟练使用 Linux 系统,有 Shell、Python 等脚本编程经验,熟悉算法数据结构 8、较强的学习能力和技术钻研能力、有自我驱动意识,对数据采集、数据治理、数据开发、数据分析、数据建模、算法等有深刻认识和实战经验。 9、具有良好的团队协作精神,思维清晰敏捷,逻辑分析能力强,有较强的责任心和事业心
  • 25k-35k 经验5-10年 / 本科
    科技金融,金融业 / 不需要融资 / 150-500人
    岗位职责: 1、领导负责大数据技术团队建设及管理,并根据业务需求,制定大数据(包括数据存储,数据模型,数据应用架构)的整体技术栈、业务应用框架和系统架构技术路线; 2、参与规划从数据源到数据应用的整体流程,并参与相关产品的决策; 3、负责规划大数据产品的架构设计,包含数据集成、数据存储、数据应用,并完成相关架构设计文档的撰写; 4、负责系统功能模块分解,接口设计,技术文档规范,统筹技术全局,具备随时为各模块工作补位能力; 5、跟踪、研究和应用大数据相关前沿技术,持续对大数据应用系统进行性能优化、功能改善以及稳定性提升; 6、通过参与大数据相关的业务线全过程,提供技术决策。 任职条件: 1、本科以上学历,计算机类专业; 2、具有至少5年及以上大数据应用架构设计和开发经验; 3、熟悉整个大数据的完整处理流程,包括数据的采集、清洗、预处理、存储、分析挖据、机器学习和数据可视化; 4、熟悉Scala、Python、Scala等一门以上脚本语言,以及Redis/MySQL和Linux平台; 5、精通Hadoop生态系统(如HDFS HBase MapReduce Hive等),熟悉ElasticSearch、STORM、SPARK、FLINK等工作原理,具有丰富项目经验,开源社区贡献者优先; 6、思路清晰,具备良好的沟通能力和理解能力,较强的学习能力以及快速解决问题的能力; 7、具有大型企业跨业务线技术管理岗位任职经验者优先。
  • 45k-70k·16薪 经验10年以上 / 本科
    数据服务|咨询 / B轮 / 150-500人
    职位描述: 参与公司大数据相关的产品研发工作, 涉及范围包括: 1. 大数据相关产品的系统设计、架构优化、技术迭代、提供稳定可扩展的产品功能; 2. 数据治理系统的技术架构优化,包括数据接入(多数据源)、数据清洗、质量分析、数据开发等治理链路, 包括 数据湖等存储层; 3. 通用数据查询分析系统的功能开发和性能优化,包括数据源、计算过程、元数据,缓存、索引、执行优化器 等; 4. 跨团队/部门协作,系统分析并解决各类大数据平台相关的运行或数据问题; 5.打造有行业竞争力的系统,能够支撑快速发展的数据业务。 任职要求: 1.计算机、电子、数学统计等相关专业本科及以上学历,10年以上工作经验,8年以上大数据领域工作经验; 2. 有大型分布式系统设计经验,负责过海量数据平台上高可用、高性能分布式系统的架构设计; 3. 精通Spark/Trino等数据计算产品的应用和扩展开发(包括数据源、优化器等), 熟悉这些产品的技术架构和性能优化; 4. 精通Scala/Java/Python语言在数据处理场景的开发,对大数据基础架构和平台底层原理有深度理解和丰富开发经验, 对复杂系统的性能优化和稳定性提升有一线实战经验,对开源社区有贡献者优先; 5. 熟悉大数据计算和存储相关生态圈 (如:
Delta Lake , Iceberg, KaW a, Cassandra, Calcite等); 6. 掌握Kubernetes下大数据组件部署和应用; 有Rust, Arrow相关数据模块开发经验者优先; 7. 有实时数据系统开发项目经验者优先; 8. 善于捕捉业务需求、架构设计存在的问题,并给出有效的解决措施和方法