• 40k-65k·15薪 经验5-10年 / 本科
    软件服务|咨询,数据服务|咨询,IT技术服务|咨询 / 未融资 / 150-500人
    1. 持续改进公司大数据平台架构,满足不断增长的业务需求; 2. 负责基于海量数据采集、存储、治理及服务方案的技术选型及架构设计; 3. 从整体技术架构角度协助并推动战略落地,开发大数据平台的核心代码; 4. 负责根据实际业务场景,实现对开源大数据组件的产品化工作; 5. 负责产品研发过程中的技术架构设计、数据处理逻辑等方面文档的沉淀与积累; 6. 参与研发团队的日常技术交流与分享,为其他同事提供技术指导与帮助; 7. 深入研究大数据前沿技术和产品,与业界先进技术保持同步。 任职要求: 1. 本科及以上学历,5年以上大数据开发经验; 2. 精通Hadoop生态圈的部分产品,包括但不限于Spark、Impala、Hive、Kudu、HBase,理解其内部原理和适用场景,了解核心源码及调优方法; 3. 能够根据实际业务需求,通过封装或二次开发实现对开源大数据组件的产品化; 4. 善于容量规划、架构设计和性能优化并有丰富实战经验; 5. 熟悉大数据应用和技术,在ETL开发和流程优化、数据集成、数据开发、数据分析等领域有实战经验; 6. 精通JavaEE,数据库,前端,SOA,微服务框架。比如SpringCloud,SpringBoot,Vue,iBatis,MySQLOracle等; 7. 有强烈的主人翁意识,能适应一定工作压力、并有较强沟通能力和理解能力; 8. 有大数据中台建设经验、数据治理经验或工业互联网大数据从业经验者优先。
  • 25k-40k 经验5-10年 / 本科
    科技金融,软件服务|咨询,营销服务|咨询 / 未融资 / 15-50人
    工作职责:  1、结合业务情况进行大数据平台的架构设计、技术选型、研发、优化、故障处理等工作。  2、负责数据服务平台的搭建,保障集群高效稳定运行,保障数据平台稳定高效。  3、参与数据分析平台的大数据架构、方案和核心代码研发,系统优化。  4、跨团队/部门协作,系统分析并解决各类大数据平台相关的运行或数据问题,为公司提供高质量的数据分析成果。  5、负责新技术的调研,协助团队解决开发过程中的技术难题;  任职资格:  1、计算机相关专业***本科以上学历,5年以上工作经验,3年大数据相关经验;  2、有大型分布式系统设计经验,负责过海量数据平台上高可用、高性能分式系统的架构设计。  3、基于Hadoop的大数据体系有深入认识,具备相关产品(Hadoop、Hive、HBase、Spark、Flink、Flume、Kafka、ES等)项目应用研发经验。  4、精通Java或Scala, 熟悉Python,热爱技术钻研探索,精读hadoop生态内开源组件源码者优先;  5、对开源社区有贡献者优先;
  • 30k-50k·16薪 经验5-10年 / 本科
    影视|动漫,内容社区 / D轮及以上 / 500-2000人
    工作职责:
 1.深入理解业务需求,对业务建模,设计大数据系统架构,满足业务需求;
 2. 维护和升级现有的大数据集群架构,根据业务需求规划集群和架构的扩展;
 3. 解决工作中遇到的技术难题,指导其他同事的开发工作。

 任职条件:
 1.计算机相关专业本科以上学历,编程基础扎实,有5年以上大数据开发经验;
 2.对Hadoop生态和体系架构有深入理解,精通一些常见开源工具源码者优先; 3.在用户行为日志采集、海量数据处理、数据建模、业务理解、大数据架构设计方面有丰富经验; 4.擅长挖掘和梳理需求,具有良好的逻辑性思维,能协调好各方需求; 5.能快速的学习新的开源框架和知识体系,并应用到我们的架构体系中; 6.自我驱动,热爱创业、创新文化氛围。
  • 25k-32k 经验5-10年 / 本科
    金融 / 上市公司 / 2000人以上
    工作职责 1、负责企业级数据平台整体架构,包括计算引擎、存储引擎、数据开发平台等方向的技术体系规划、架构设计及方案落地,为业务产品和算法开发提供高效的数据系统支撑; 2、负责大数据服务体系的环境、流程、规范和配套工具系统建设,保证数据研发体系的高效性与生产服务体系的稳定性、高性能、高可用性和可扩展性; 3、负责实时&离线计算框架的创新与落地,包括但不限于以下领域:大规模数据实时化、数据模型组织方式业务化等方面,参与制定并实践团队的技术发展路线; 4、负责与业务团队协同规划大数据平台能力开发,为业务平台提供数据交换,数据服务,数据开发等能力,参与制定并实践团队的技术发展路线; 5、关注业界最新技术,深入理解业务特征,前瞻性的进行技术预研与引入,支持业务的高速发展;建立良好的公司内外的业界技术影响力;参与培养未来数据人才;有效辅导团队,提升数据研发能力。 任职要求 1、计算机相关专业本科以上学历优先;8年以上大数据系统开发、设计经验,5年以上架构设计经验,金融行业从业经验; 2、精通大数据全栈架构,精通一种或多种分布式计算、存储、调度框架或工具(Yarn/Hive/MapReduce/Spark/Flink等),通读过其中之一的源码,有分布式系统的开发经验; 3、具有扎实的编程功底,熟悉常用的算法和数据结构,精通Java/GO/Python其中一门编程语言,有较强的分布式计算基础和算法工程能力,并具备丰富的实战经验; 4、负责过PB级别大数据平台整个产品线的业务架构工作,负责过海量数据平台上高可用、高性能分布式系统的架构开发,组织过中等以上规模项目,有互联网大数据平台建设等技术背景者优先; 5、熟悉常见的互联网,大数据、云计算、人工智能等技术和知识,优秀的业务理解和分析能力,有关键技术攻关的决心和能力; 6、有良好的团队沟通和协作能力,良好的自驱力和学习能力;主动积极,富有热情,能主动积极的思考和推动数据价值的落地。
  • 30k-60k 经验不限 / 本科
    文娱丨内容 / D轮及以上 / 2000人以上
    职位职责: 1、 作为架构师,负责短视频产品数据中心、数据本地化场景下的大数据架构,包括数据仓库的顶层设计、数据权限系统的设计等; 2、主导短视频产品的大数据技术攻坚工作,包括大规模分布式存储的数据删除、海量数据的自动化分类分级等新技术探索及工程攻坚工作,与兄弟团队一起攻坚行业技术难题; 3、深入理解业务,负责短视频产品的隐私与安全领域数据仓库的需求对接、架构设计,提升数据价值; 4、 负责构建围绕隐私保护、数据安全的数据治理治理体系、并推动相关治理工具的产品化落地; 职位要求: 1、计算机、数学相关专业本科及以上学历,五年以上大数据开发经验,有较强的数据抽象能力; 2、熟悉大数据生态环境,掌握Hadoop,Hive,Kafka,Spark,Flink等大数据技术栈; 3、精通数据仓库实施方法论、深入了解数据仓库体系,并支撑过实际业务场景; 4、善于沟通,主动性强,具备优秀的技术与业务结合能力,有较强的项目推进能力; 5、较好的英文沟通能力是加分项。
  • 15k-25k·13薪 经验5-10年 / 本科
    NCS
    IT技术服务|咨询,数据服务|咨询 / 不需要融资 / 500-2000人
    岗位介绍 1.参与金融钱包数据仓库的建设,负责ETL开发,数据加工等日常工作 ; 2.参与数据模型设计和落地,持续优化数据资产; 3.参与设计和部署数据服务工具持续优化迭代数据服务; 4.了解数据治理需求,根据数据需求进行数据综合治理,参与数据仓库管理工作。 职位描述: 1.具有四年及以上的数据开发,数仓运维管理等相关工作经验 ; 2.了解大数据行业发展,熟悉大数据技术生态,如ETL/Hadoop/Hive/Spark/OLAP/Flink,有Spark从业经验优先; 3.精通SQL,熟悉SQL性能优化,熟悉MySql等主流数据库 ; 4.有较强的业务理解能力,能基于复杂的业务场景和业务需求,建设合理的数据仓库模型,并持续优化 ; 5.了解数据仓库建设、数据治理等领域。
  • 15k-25k·13薪 经验5-10年 / 本科
    NCS
    IT技术服务|咨询,数据服务|咨询 / 不需要融资 / 500-2000人
    岗位职责: 1.参与产品需求分析、业务讨论、设计工作,评估需求的技术可行性和技术难点; 2.负责产品的技术框架选型,编写接口规范、编码规范等文档; 3.负责系统架构设计、搭建、数据库设计、核心功能代码的编写; 4.为开发人员提供快速有效的开发框架、服务、公用组件; 5.负责项目开发过程中的技术攻关,和运行中出现的技术问题; 6.负责对架构进行优化,持续改进性能、可扩展性、稳定性、安全性。 任职资格: 1.计算机或相关专业,本科或以上,工作细致、善于思考,精通JAVA,有知名公司工作经验优先; 2.负责规划云平台建设,包括云端架构、安全架构、集成架构等的方案设计; 3.具备扎实的Java基础,深入了解http原理、socket通讯,熟悉主流开源框架,精通SpringCloud、SOA、微服务; 4.熟悉互联网云平台架构、分布式、微服务架构,对大型分布式、高并发、高负载、高可用性系统设计有一定的了解; 5.负责设定业务边界,业务模块间的交互及API的定义、接口规范;以及核心功能的设计与编码工作; 6.对面向对象有深刻的理解、熟悉常用设计模式; 7.精通MSSQL、 MySQL、Redis、Mongodb、HBase等数据库设计、性能优化、存储优化; 8.掌握架构设计方法,独立负责过云平台系统架构设计者优先;有视频云平台工作经验者优先; 9. 有ES集群的问题诊断、性能优化经验者优先;精通消息中间件RabbitMQ、Kafka的设计、优化和适用场景者优先; 10. 熟悉Hadoop生态圈,有大数据平台框架经验者优先;有流式数据组件经验者优先(Flink,SparkStreaming); 11.有强烈的责任心、善于沟通、具有团队合作精神,善于编写技术文档;
  • 25k-35k·15薪 经验5-10年 / 本科
    移动互联网,金融 / 不需要融资 / 150-500人
    Job Overview: 负责基于大数据的数据治理体系建设 利用大数据相关技术实现平台化业务数据中心,提供全面的数据服务以支持商业智能   Job Responsibilities and Duties: 负责数据相关技术解决方案设计和建设 制定数据相关管理制度和规范,并定期审查落实情况 构建大数据质量体系,持续提升数据质量 跟踪大数据相关领域最新的技术发展趋势,持续改进现有解决方案 结合人工智能等技术实现数据信息增值 协助落实数据信息安全相关工作  Job Qualifications: 5年以上大数据处理研发经验,精通Java/Python/Golang中至少一种编程语言 精通Hadoop、HDFS、Hbase、Hive、ElasticSearch、ClickHouse等技术 精通Flink、Storm、Spark等处理框架,有分布式数据处理经验 良好的数据分析和算法知识积累 勤勉尽责,良好的承压、沟通表达、自学和问题分析能力 金融行业从业者有先,熟悉区块链技术者优先 熟悉AWS云平台技术者优先
  • 30k-60k 经验5-10年 / 本科
    金融业 / 不需要融资 / 50-150人
    公司团队介绍: 产品研发团队自成立以来一直秉承用户至上和安全至上的理念,产品不断更新迭代,技术稳中求新。 加入产研团队,你将和一群业内一流的技术伙伴一起,打磨高性能、高可靠、创新不断的全球Top5的平台,在这里,你的发展空间无限,未来可期。 我们正在全球招募更多优秀的志同道合的朋友加入我们,我们理想的候选人:积极主动,逻辑能力较好,有着良好的团队合作和沟通协调能力;具有一定专研精神,敢于挑战自我,勇于解决各种未知问题。 岗位描述: 1.负责大数据平台架构设计、技术选型。 2.负责海量数据的处理分析的性能支撑。 3.负责实时处理系统的设计和开发工作。 4.对系统扩展、安全、性能等负责,解决开发,运行中出现的各种技术难题。 5.主导大数据平台技术架构规范、标准的制定,为应用设计、开发及部署提供架构指导原则。 岗位要求: 1.计算机或相关专业本科以上学历,7-10年大数据平台架构设计经验,2个以上大数据类项目开发经验。 2.精通常用大数据技术、数据处理架构,熟悉 Hadoop/Spark/Flink/Hive/Hbase、Greenplum、PostgreSQL、Clickhouse、Vertica等大数据技术至少一种,并能结合业务场景进行架构设计。 3.具有较强的编程能力,熟练使用java开发。 4.熟悉高可用、高并发、高性能的分布式系统的设计及应用,有丰富的线上调优经验。
  • 35k-45k 经验5-10年 / 本科
    移动互联网 / 不需要融资 / 500-2000人
    工作职责 1、建设数字团队,全面管理数据团队,基于集团的大数据基础设施,建立满足业务要求的领域数据集市。 2、梳理数据需求,不断提升业务的数字化能力 3、全面管理数据团队,招聘,培养数字化人才,不断提升数字化能力 4、完善现有数据基础架构,提升数据效率 5、负责小恒各个专门领域的数据集市(风控,营销,获客,贷后等)的建设和维护 任职要求 1、本科及以上学历,具备实时数据/实时数仓开发相关工作经验,5年以上的互联网数仓建设经验 2、了解数仓理论知识,熟练Spark、Flink、Hive、ES等数仓工具的使用和调优 3、掌握JAVA、Python等任何一种编程语言,且具有实际解决复杂问题的经验和能力 4、具备数据库及SQL能力,熟悉MYSQL、POSTGRE等开源数据库,熟悉PRESTO等常见异构查询工具 5、有较强的逻辑分析能力,对数据敏感,对大数据生态技术有强烈热情,愿意尝试新技术领域 6、重视系统设计和开发规范;重视系统运维,能运用工具和流程做好数据质量验证、数据治理和线上运维 7、具备项目管理知识,具备良好的沟通协调能力、较强团队合作精神,工作责任心强,愿意接受挑战 8、管理5人以上数据团队的能力,擅长沟通,以身作则 9、有数据挖掘、机器学习基础技术优先
  • 35k-70k 经验3-5年 / 本科
    文娱丨内容 / D轮及以上 / 2000人以上
    职位职责: 1、 负责相关业务大数据项目整体架构规划; 2、 负责指导工程师进行技术验证与实现,关键技术问题的攻关,解决项目开发过程中的技术难题; 3、 负责项目对外技术沟通,具有较强的沟通,表达和文案能力; 4、 根据公司项目和业务发展特点,负责研究相关大数据前沿技术。 职位要求: 1、 熟练使用Hadoop、Hive、spark,flink等大数据框架,熟悉SQL、Java、Python等编程语言; 2、 有PB级大数据处理实战经验,熟悉整个大数据的完整处理流程,优秀的问题解决能力; 3、 善于沟通,对业务敏感,能快速理解业务背景,具备优秀的技术与业务结合能力; 4、 6年以上数据仓库或大数据开发,丰富的实时或者离线数据体系建设经验。
  • 30k-60k·15薪 经验5-10年 / 本科
    软件开发 / 不需要融资 / 150-500人
    岗位职责: 1.负责大数据平台架构设计、技术选型; 2.负责海量数据的处理分析的性能支撑; 3.负责实时处理系统的设计和开发工作; 4.对系统扩展、安全、性能等负责,解决开发,运行中出现的各种技术难题; 5.主导大数据平台技术架构规范、标准的制定,为应用设计、开发及部署提供架构指导原则。 岗位要求: 1.计算机或相关专业本科以上学历,7年以上大数据平台架构设计经验,2个以上大数据类项目开发经验; 2.精通常用大数据技术、数据处理架构,熟悉 Hadoop/Spark/Flink/Hive/Hbase、Greenplum、PostgreSQL、Clickhouse、Vertica等大数据技术至少一种,并能结合业务场景进行架构设计; 3.具有较强的编程能力,熟练使用java开发; 4.熟悉高可用、高并发、高性能的分布式系统的设计及应用,有丰富的线上调优经验。
  • 30k-45k·13薪 经验5-10年 / 本科
    生活服务,智能硬件 / 上市公司 / 2000人以上
    岗位职责: 1.负责大数据平台架构设计、技术选型; 2.负责海量数据的处理分析的性能支撑; 3.负责实时处理系统的设计和开发工作; 4.对系统扩展、安全、性能等负责,解决开发,运行中出现的各种技术难题; 5.主导大数据平台技术架构规范、标准的制定,为应用设计、开发及部署提供架构指导原则。 岗位要求: 1.计算机或相关专业本科以上学历,5年大数据平台架构设计经验,2个以上大数据类项目开发经验; 2.精通常用大数据技术、数据处理架构,熟悉 Hadoop/Spark/Flink/Hive/Hbase、Greenplum、PostgreSQL、Clickhouse、Vertica等大数据技术至少一种,并能结合业务场景进行架构设计; 3.具有较强的编程能力,至少熟练使用Python/Java其中的一种开发语言; 4.熟悉高可用、高并发、高性能的分布式系统的设计及应用,有丰富的线上调优经验。
  • 85k-120k 经验5-10年 / 本科
    移动互联网 / C轮 / 500-2000人
    岗位职责 ○ 架构设计:负责大数据相关产品的系统设计、架构优化、数据模型抽象等工作,提供稳定高效的数据服务能力,支撑产品侧的敏捷迭代和业务侧的数据分析服务 ○ 数据治理:主导数据治理工作,包括数据接入(多数据源)、数据存储、数据清洗、质量分析、数据开发等治理链路 ○ 技术攻关:负责指导工程师进行技术验证与实现,核心技术问题的攻关,解决项目开发过程中的技术难题 ○ 问题处理:跨团队/部门协作,系统分析并解决各类大数据平台相关的运行或数据问题 ○ 技术研究:根据公司项目和业务发展特点,负责研究相关大数据前沿技术 岗位要求(需要有数据型产品的数据架构经验) ○ 本科学历及以上,计算机相关专业,7年以上工作经验,不少于5年的大数据领域架构设计工作经验 ○ 对大数据基础架构和平台、数仓建模、数据治理有深刻理解 ○ 精通Hadoop、Spark、Flink等框架,能够独立搭建离线、实时大数据平台 ○ 精通主流的数仓架构设计,熟悉Hbase、Hive、Doris、PostgreSQL等,理解HOLAP,可以进行海量数据模型的设计及开发; ○ 善于沟通,对业务敏感,能快速理解业务背景,具备优秀的技术与业务结合能力 优先考虑: ○ 有舆情监测平台产品工作经验 ○ 有大数据AI平台架构经验 ○ 独立或主导大数据方向的框架自研 ○ 有高水平学术论文者(主流期刊刊发表)
  • 20k-30k 经验3-5年 / 本科
    IT技术服务|咨询 / 上市公司 / 500-2000人
    岗位职责 - 负责设计和构建大数据平台的各类组件,包括但不限于数据采集,计算,对外服务及治理平台的设计和开发搭建,降低数据的使用门槛,实现数据的最大价值; - 基于开源解决方案,构建完整的数据开发、治理框架,以满足实时、近实时以及批量计算的需求。 - 持续升级和解决自主建设和开源产品中的问题, 包含基于开源项目源码的新功能开发和集成。 - 探索和实践新技术和现有平台的集成。 -Be responsible for the design and construction of various components of the big data platform, including but not limited to the design, development and construction of data collection, calculation, external service and governance platform, so as to reduce the threshold of data use and realize the maximum value of data; -Based on open source solutions, build a complete data development and governance framework to meet the needs of real-time, near real-time and batch computing. -Continuously upgrade and solve problems in open source products, including bug repair in spark, hive, HDFS and presto, and development and integration of new functions based on source code. -Explore and practice the integration of new technologies and existing platforms. 技能和要求 - 计算机相关专业,本科及以上学历。4年以上大数据相关工作经验。 - 精通Java,基础扎实 ,对于多线程、网络、IO方面有实际的应用经验,了解Java 内存模型,垃圾回收机制,对于Java的内存监控、调优、线上Debug有丰富经验。 - 熟悉基于Springboot的微服务应用开发。 - 精通一种或多种大数据相关组件技术,包括但不限于 Hadoop、Spark、Flink、Presto、调度系统、元数据管理系统等,理解其内部原理和适用场景,了解核心源码及调优方法。 - 有大数据中台建设经验、数据治理经验者优先。 - 熟悉Yarn、Kubernetes等调度和资源管理系统,参与过大型集群的搭建或维护优先; - 熟悉Azure 云服务的优先 -Bachelor degree or above in computer related major. At least 4 years working experience in big data. -Be proficient in one or more big data related component technologies, including but not limited to Hadoop, spark, elk, presto, scheduling system, metadata management system, etc., understand their internal principles and application scenarios, and understand the core source code and tuning methods. -Proficient in Java, solid foundation, practical application experience in multithreading, network and IO, understanding Java Memory Model and garbage collection mechanism, and rich experience in JAVA memory monitoring, tuning and online debugging. -Hands on Experience on Springboot -Familiar with spark kernel, optimized spark kernel components, or participated in the development of quasi real-time data processing system; -Experience in big data platform construction is preferred. -Familiar with scheduling and resource management systems such as yarn and K8S, and having participated in the construction or maintenance of large clusters is preferred; -Familiar with Azure Data Cloud is preferred