-
职位职责: 1.基于抖音全域数据,构建电商业务场景的数据仓库体系; 2.负责数仓模型设计、ETL开发,海量数据下的性能调优,以及复杂业务场景下的需求交付; 3.构建围绕安全、质量、效率、成本等方向的数据治理和运维能力建设,并推动相关工具的产品化落地; 4.参与画像标签体系建设,包括但不限于画像标签的生产、管理以及应用等; 5.深入业务,理解并合理抽象业务需求,沉淀高质量体系化的数据资产,为业务赋能。 职位要求: 1. 计算机或相关专业本科及以上学历,3年以上工作经验; 2. 具有丰富的数据开发经验,对数据处理、数据建模、数据分析等有深刻认识和实战经验,熟悉Kimball维度建模方法论; 3. 熟悉大数据的常用技术栈(hadoop,hive,spark,flink,hbase等),具备PB级体量的强实战经验; 4. 精通SQL,具备海量数据下的性能调优能力,熟练掌握Java或Python; 5. 有数据治理经验,对数据质量的重要性有深刻认识; 6. 业务理解力强,对数据、新技术敏感,对云计算、大数据技术充满热情; 7. 积极乐观、诚信、有责任心;具备强烈的进取心、求知欲及团队合作精神;精益求精,具备持续迭代优化的素质。
-
职责: 1. 参与数据仓库的长期架构规划与数据开发,建设大数据平台 2. 负责数据平台相关数据管理工作,如研发规范、质量规范、保障规范的制定与推动实施落地 3. 负责来自业务团队数据需求的研发支撑和数据模型开发 4. 对数据ETL任务进行性能调优及性能瓶颈分析 5. 学习新技术,提高整个平台的计算能力和效率 任职要求: 1. 计算机相关专业,***本科及以上学历,数仓领域3年以上工作经验 2. 熟悉数据建模、ETL设计与应用、报表开发等,并有实际模型设计及ETL开发经验 3. 熟悉数据仓库领域知识和管理技能,包括但不局限于:元数据管理、数据质量、性能调优等 4. 熟悉linux系统,熟练掌握python语言 5. 熟悉mysql和oracle数据库,最好了解HADOOP相关的大数据技术:HDFS, MAPREDUCE, HIVE,SPARK 6. 有数据治理经验优先 7. 良好的沟通能力、组织协调能力、应变能力, 极强的责任心、学习能力。
-
职位职责: 1、 负责电商、生活服务、直播、抖音等业务的离线与实时数据仓库的构建; 2、负责数据模型的设计,ETL实施,ETL性能优化,ETL数据监控以及相关技术问题的解决; 3、负责指标体系建设与维护; 4、深入业务,理解并合理抽象业务需求,发挥数据价值,与业务团队紧密合作; 5、参与大数据应用规划,为数据产品、挖掘团队提供应用指导; 6、参与数据治理工作,提升数据易用性及数据质量。 职位要求: 1、熟悉数据仓库实施方法论、深入了解数据仓库体系,并支撑过实际业务场景; 2、熟练使用Hadoop及Hive,熟悉SQL、Java、Python等编程语言; 3、善于沟通,对业务敏感,能快速理解业务背景,具备优秀的技术与业务结合能力。
-
岗位职责: 1. 负责数据仓库的设计和开发,指标体系建设 2. 负责基于Hive,Spark技术的海量数据的处理、分析、统计工作 3. 负责数据仓库ETL流程的优化及解决ETL相关技术问题 4. 理解并合理抽象业务需求,发挥数据价值,与业务团队紧密合作 任职要求: 1. 计算机、数学、统计学等相关专业本科及以上学历,3年以上相关经历 2. 精通SQL,熟悉主流大数据处理技术,包括Hive、Spark、MapReduce等,有TB以上级数据处理经验,熟悉源码者优先 3. 熟悉数据仓库各类建模理论,以及数据仓库数据层级关系,有处理性能调优等相关经验 4. 熟悉Shell/Python/Java等一门及以上语言 5. 对数据敏感,有一定的数据分析能力,对业务有自己的理解
-
职位描述 1、建设PB级数据仓库,参与或负责数据仓库设计、建模、研发,对外提供数据支持; 2、负责大数据平台的数据应用开发,包括数据资产治理、数据质量管理等; 3、参与数据平台相关数据开发和管理工作,如研发规范、质量规范、保障规范的制定与推动实施落地; 4、支持业务团队的数据建设工作; 职位要求 **985本科以上学历 1、精通数据仓库实施方法论、深入了解数据仓库体系,并支撑过实际业务场景; 2、有基于MPP数据库构建大数据平台/数据仓库/数据集市/BI的规划、设计与实施经验; 3、具备较强的SQL编码能力,熟悉sql,python,hive,spark,flink,kafka中的至少两项; 4、对数据敏感,认真细致,善于从数据中发现疑点; 5、具有数理统计、数据挖掘和算法基础及金融经历的优先考虑; 6、具有数据治理经验的优先考虑; 7、善于沟通,具备优秀的技术与业务结合能力。
-
岗位职责: 1.离线及实时数据仓库开发及维护,支持线上数据方案对接及开发落地; 2.参与智能营销体系(用户画像、司机画像、双侧匹配及维护策略)建设的数据技术方案输出及落地; 3.对接合作三方的数据输出及维护; 4.与业务、技术沟通数据传输方案及数据落地建议; 5.大数据规范化管理方案持续迭代; 6.数据治理方案持续迭代及落地; 任职要求: 1.大学本科及以上学历,计算机相关专业优先,有3年以上大数据开发相关经验; 2.掌握hadoop/hive/flink/spark原理,且有相关工作经验; 3.熟练掌握hive sql,有python/Java编程经验; 4.熟练掌握数据仓库建设(实时及离线)的基本原理,有实施及维护的工作经历; 5.对业务有一定的认知,有参与智能营销项目、用户画像项目的相关经历优先,有产品思维优先; 6.有阿里云数据开发平台及holo开发经验者优先; 7.具备良好的沟通能力、业务理解及业务数据流转理解能力。
-
岗位责任: 1.打造业界领先的PB级OLAP商业引擎,并支撑滴灌通交易所、投融资产品线; 2.负责以Hadoop、Spark、Flink 为代表的开源大数据引擎的数据开发; 3.负责滴灌通内部数据仓库设计及开发; 4.预研隐私计算、联邦学习新技术,推动适合的技术落地驱动满足业务发展。 任职要求: 1.计算机、软件工程等相关专业,本科及以上学历,985/211优先; 2.具有金融证券行业从业经验,特别在量化投研领域做过数据研发的优先; 3.精通Python,具有1-3年及以上Linux环境下PySpark开发经验; 4.熟悉Hadoop/Spark/Flink/Hive等大数据组件,对数据处理、数据建模、数据分析等有深刻认识和实战经验,具备大型数据平台建设者优先; 5.精通SQL,熟悉常用的关系型数据库、非关系性数据库和数据仓库,具有SQL性能优化经验; 6.具有业务应用系统的开发实施经验,具有一定的应用系统分析与设计能力,有良好、规范的编程习惯和文档编写习惯; 7.具有很强的分析复杂问题和解决复杂问题的能力,有强烈的责任心和使命感,良好的沟通表达能力和团队协作。
-
工作职责: 1、负责数据仓库、数据集市的数据模型设计,支持上层数据分析和数据应用; 2、构建统一的数据规范、数据管理与数据治理机制,确保集团数据一致性,整个数据链路合理,数据计算高效; 3、参与内容数据体系的建设,包括但不限于数据统计、分析及建模,实现数据赋能业务的目标。 任职资格: 1、熟悉大数据处理相关产品架构和技术(如Hadoop/Hive/Spark/Kafka/flink/impala/presto/clickhouse等),具备离线和实时的数据能力; 2、熟悉数据仓库理论与技术,对ETL及BI有概念并具有丰富的实际操作经验,熟悉ETL开发流程; 3、熟悉BI项目,具有数据仓库、BI系统开发经验者优先; 4、对mysql、Oracle有丰富经验,有较强的数据库脚本编程能力,有较强的存储过程编写能力; 5、熟练操作linux系统,熟悉shell脚本或python; 6、有较强的逻辑思维能力,善于分析、归纳、快速定位并解决问题; 7、本科以上学历、5年以上工作经验。
-
职位描述1、数仓例行计算,保证数据产出。能对在例行的任务提出可实行的优化建议。2、维护数仓之上产品,BI/DMP/数据分析平台/元数据等正常运行,并参与数据中台的搭建职位要求1、精通分布式文件系统hdfs常用命令以及底层原理。2、yarn,datax,sqoop,hbase 等hadoop生态常用工具3、精通数仓常用计算引擎,hive/spark/kylin/impala 至少两种以上。4、精通常用数据库3种以上。mysql/redis/hbase/es5、对数仓之上的衍生产品(例:BI,DMP,数据分析平台,监控平台,调度平台等)有丰富经验,有过大厂经验最好。6、熟悉linux常用命令,熟悉至少一种脚本语言。shell/python7、熟悉实时计算引擎,sparkstreaming/flink。8、对自己使用过的组件看过源码者优先考虑。
-
岗位职责: 1.负责数据仓库建设中的需求梳理、数据建模、etl开发等工作。 2.负责数仓管理系统包括:元数据、主数据建设、权限管理,数据血缘关系管理等; 3.有强烈的业务感觉,与客户进行需求沟通,能够输出相应的数仓建模文档; 4.竞品研究与对比,把握行业动态 任职要求: 1.本科及以上学历,985/211理工类尤佳; 2.有大型数仓从0-1建设经历;至少有两个数仓项目是从需求阶段开始参与,一直到项目顺利上线; 3.有知识图谱,图决策系统产品设计经验尤佳; 4.有扎实的数仓建模和数据集市建模理论知识,了解流行的数据模型; 5.良好的业务分析和洞察能力,有丰富的业务数据分析经验,较强的数据、平台、技术理解能力; 6.有良好的职业素养、文档编写能力、办公软件操作习惯; 重要加分项: 了解数仓项目实施各个环节的具体工作内容与规范,包括开发规范、维度建模、指标规范、具备成功的项目案例;
-
岗位职责: 1.参与大数据平台数据仓库规划、架构及研发,包括离线、实时的数据模型规划,建设PB级的数据集市和数据平台; 2.数据仓库模型的ETL实施,ETL性能优化、技术攻关等; 3.参与平台数据治理相关工作,负责数据质量、数据一致性及稳定性保障等建设; 4.参与平台标签体系、数据产品与应用的数据研发,发掘数据价值,以数据驱动业务不断发展。 任职要求: 1. 本科及以上学历,计算机、软件工程、数据分析或相关专业出身, 5年以上数仓开发经验,极强的问题解决能力; 2. 精通数据仓库理论体系,对分层设计、维度建模等有深刻的认识和实战经验,熟悉不同建模方法的优劣; 3. .积极主动贴近业务,有良好的沟通协调能力,数据敏感度高,能够快速理解业务模型及数据模型;熟练掌握SQL/HQL/Spark SQL开发及优化技能,快速ETL实施能力,对SLA有较深刻的认识及强烈的责任心; 4. 熟悉大数据生态技术栈,具备较丰富的Hadoop,Hive,Spark,Flink等大数据工具应用和开发经验,对MR/SPARK有源码级经验是加分项; 5. 有互联网工作经验优先; 6. 有数据中台建设经验优先; 7. 有数据分析能力优先; 8. 勤奋,学习能力强,有强烈的自我驱动力。
-
职位描述 1、结合业务用数场景,对快手数仓架构深度分析,给出架构优化方案并负责牵头落地; 2、快速理解数据现状和业务场景,从数仓架构、数据易用性、资源成本、时效等视角出发给出数仓治理优化方案,并负责核心开发落地; 3、基于HUDI等技术,结合数仓现状,联动数据引擎团队推进数据湖的应用落地。 任职要求 1、计算机相关专业本科以上学历,五年以上互联网数据仓库、数据开发工作经验; 2、精通数据仓库架构及原理,具备大型数据仓库架构设计、模型设计和处理性能调优等相关经验; 3、具备丰富的数仓治理优化经验,具备大型项目管理能力; 4、对离线SQL、hive、spark及性能调优或实时计算开发和调优至少一方面精通; 5、熟悉Hadoop, Hive, Spark, Flink, Kafka等大数据框架原理及应用; 6、逻辑思维清晰严谨,善于交流,有优秀的团队合作精神和协调推进能力,有与多方密切配合的经验和意识; 7、具有扎实的计算机科学功底,扎实的编程基础和数据结构算法基础,较强的编程能力和问题解决能力。
-
公司团队介绍: 产品研发团队自成立以来一直秉承用户至上和安全至上的理念,产品不断更新迭代,技术稳中求新。 加入产研团队,你将和一群业内一流的技术伙伴一起,打磨高性能、高可靠、创新不断的全球Top5的平台,在这里,你的发展空间无限,未来可期。 我们正在全球招募更多优秀的志同道合的朋友加入我们,我们理想的候选人:积极主动,逻辑能力较好,有着良好的团队合作和沟通协调能力;具有一定专研精神,敢于挑战自我,勇于解决各种未知问题。 岗位描述: 1、根据业务需求,负责系统的技术设计、架构优化等设计工作。 2、参与公司核心业务系统架构设计和开发工作。 岗位要求: 1、本科以上,计算机专业背景佳。 2、具备hadoop/spark/flink/hive语言架构技能。 3、有开发经验,可对集群进行性能调优。 4、数据具千万及以上用户,总处理数据规模大于100T,单日处理数据量有亿级别。 5、具有金融类公司,或股票、基金工作经验佳。 6、有带领10-20人团队经验,並且可獨立參與技術细节优先考量。
-
● 建设快驴数据仓库,开发优化数据模型,支持业务方的数据需求; ● 梳理业务系统和操作流程,提高数据生产质量; ● 建设数据服务,支持业务系统的数据需求; ● 数据治理、保证数据准确性、一致性; ● 数据分析与挖掘,发现数据中的价值; ● 指导团队新同学。 岗位基本要求: ● 3年以上数据开发经验,精通SQL、了解数据仓库建模理论; ● 熟悉大数据生态技术,如Hadoop/Hive/Spark等,了解大数据下的性能优化; ● 对数据敏感,有较强数据分析和解决问题能力; ● 积极沟通,工作主动,愿意尝试新的技术、业务领域。 加分项: ● 有多主题域数据建模经验; ● 熟悉统计原理,有数据挖掘经验; ● 有团队管理经验; ● 了解数据治理和多维数据分析; ● 有供应链、财务方向的数据建模经验。
-
岗位职责 1、基于互联网行业特点构建企业级数据仓库架构,建设PB级共享数据平台 2、负责数据平台相关数据研发及管理工作,参与制定EDW相关规范并推动实施落地 3、对海量数据处理的需求进行评估及方案设计实现 4、其他数仓及风险管理数据相关工作 岗位要求: 1、具备3年以上数据仓库开发及管理经验,3年以上互联网/电商行业经验 2、精通数据仓库建设方法论,有大型数据仓库建设项目经验(PB级以上) 3、熟悉HADOOP、HIVE、HBASE、SPARK、FLUME等工作原理,精通HiveSQL,有较丰富的HiveSQL性能调优经验 4、熟练使用Shell、Python、Perl等脚本语言中的至少一种 5、工作认真负责,具备良好的沟通协作及问题解决能力 6、有金融业务知识和机器学习模型项目经验、处理大量互联网复杂业务关系经验者优先