• 短视频 / 上市公司 / 2000人以上
    职位描述 1、为快手百亿级广告变现平台提供通用的基础设施、研发框架、运维工具等; 2、保障广告系统的可用性及稳定性; 3、参与设计与实现百TB级别容量的通用存储平台,包括单机过百万的高性能存储引擎、可扩展的数据存储服务、元数据管理服务等; 4、业界前沿架构与技术的探索与落地。 任职要求 1、至少精通一门主流服务端开发语言,如:C++、Java、Golang;熟悉一门脚本语言,Shell、Python等; 2、有分布式系统开发经验,包括分布式存储服务,计算平台,高并发实时服务等;了解分布式系统理论; 3、较强的问题分析与解决能力,能够归纳抽象问题并能给出系统的解决方案; 4、具有良好的团队合作意识和沟通能力,责任心强。 加分项: 1、有主流存储引擎、数据处理框架(Rocksdb、MySQL、HBase、Flink、Storm等)使用或开发经验; 2、有基于Docker、Kubernetes的容器化运维经验; 3、开源社区活跃贡献者。
  • 内容资讯,短视频 / D轮及以上 / 2000人以上
    职位职责: 1、负责字节跳动各业务直播数据的汇聚与接入; 2、负责直播数据平台数据链路建设和数据开发规范建设; 3、建设数据质量体系,形成完整的数据监控和数据校验机制; 4、负责直播相关数据需求的开发,能独立设计方案、把控需求、拆解细化并实施。 职位要求: 1、熟练运用Python、Java、Scala、Go等至少一门语言,对数据结构和算法设计有较为深刻的理解; 2、熟悉MySQL/postgresql/MariaDB等至少一类数据库,熟悉常见的NoSQL存储; 3、熟悉Hive数据仓库设计,了解数据仓库模型及思想、维度建模思想; 4、丰富的大数据技术经验,熟练掌控至少2种大数据技术,包括不限于Hadoop、HBase、Spark、Kafka、Storm、Flink等; 5、具有良好服务意识与数据sence,团队意识和协作精神; 6、较强的内外沟通能力,有数仓开发经验者优先。
  • 内容资讯,短视频 / D轮及以上 / 2000人以上
    职位职责: 1、负责字节跳动所有产品线UG方向的数据流和相关数据服务; 2、面向超大规模数据问题,每天处理千亿增量的用户数据; 3、负责流式数据的实时传递,清洗,转换,计算,并对外提供查询服务; 4、参与数据治理工作,提升数据易用性及数据质量; 5、理解并合理抽象业务需求,发挥数据价值,与业务团队紧密合作。 职位要求: 1、熟悉Linux操作系统及开发环境; 2、扎实的计算机软件基础知识:数据结构,操作系统等; 3、熟悉 C/C++、Java、Python 等任意一门编程语言; 4、对数据敏感,认真细致,善于从数据中发现疑点; 具备以下条件者优先: 1、研究过开源项目; 2、参加过 ACM 或者其他类型的软件开发大赛; 3、熟悉大数据处理工具/框架中的一项或多项,包括但不限于Hadoop, Mapreduce, Hive, Storm, Spark, Druid, kafka, hbase,ES等。
  • 金融 / 未融资 / 2000人以上
    工作职责 1、负责微粒贷等线上金融信贷产品全流程风险模型开发。基于互联网、金融行业相关数据,通过聚集性发现、回归分析、集成学习、复杂网络、深度学习等算法技术,挖掘群体行为特征及信用风险评估; 2、擅长高维度、非结构化、网络结构等复杂数据的挖掘和建模,能够基于互联网大数据,挖掘客户360度特征,对客户身份识别、社区发现设计有效算法,将成果应用在信用评价、欺诈侦测、异常行为识别等场景; 3、负责数据挖掘前沿技术的探索和调研,通过实验、创新等方式引入到风控模型建设中,改进创新方法以解决非常规化问题。 任职要求 1、计算机(机器学习、人工智能等方向)、数学、统计或相关专业硕士及以上学历; 2、数据数据挖掘、概率统计、机器学习、自然语言处理、模式识别或信息检索等专业领域知识,并对其中擅长领域理解透彻; 3、三年以上机器学习和算法实施相关工作经验,具有较强的数据理解能力、数据分析能力、业务感知能力,熟悉社会网络分析方法,有推荐系统、社团发现、大规模数据挖掘项目实施经验优先; 4、熟练使用Python/SAS/R等数据挖掘工具,有数据可视化经验者及开源数据挖掘工具实战经验者优先; 5、熟悉Hadoop/Spark/Storm/Hive等至少一种分布式计算技术,具有海量数据处理经验; 6、积极创新、有开拓精神、乐于面对挑战、有较强的执行能力,具有高度的责任心和良好的团队合作精神。
  • 15k-25k·13薪 经验3-5年 / 本科
    软件服务|咨询,IT技术服务|咨询 / 上市公司 / 2000人以上
    任职要求: 1、精通Unix/Linux操作系统下Java或Scala开发,有良好的编码习惯,有扎实的计算机理论基础; 2、熟练掌握大数据处理技术栈,有丰富的Hadoop/Spark/SparkStreaming/Storm/Flink的实际项目使用经验; 3、熟练掌握HDFS/HBase/Hive/S3等分布式大数据存储技术。 岗位职责: 1、4年以上大数据项目经验;具有实际的代码编写经验; 2、有电信大数据平台经验者优先; 3、热衷于追求技术完美与创新。
  • 20k-40k·14薪 经验1-3年 / 本科
    移动互联网,广告营销 / 上市公司 / 2000人以上
    工作职责: 1.ctr server、标签系统、用户画像、内容推荐等相关方向的研发工作; 2.海量用户服务架构、大规模数据平台、算法平台等相关开发和建设。 任职资格: 1.**本科及以上学历,计算机/数学相关专业,1-3年推荐相关方向研发经验; 2.熟悉java或者c++,java语言优先,熟悉linux开发环境,较好的编程功底; 3.熟悉大数据和分布式系统相关技术栈,包括HDFS/YARN/HIVE/HBASE/SPARK/STORM/KAFKA/REDIS等; 4.对数据敏感,较强的动手实践能力、代码工程经验,逻辑思维强。 加分项: 1.了解nlp、特征工程、推荐系统、策略优化等; 2.较强的个人自驱力、团队协作能力、优秀的领导力; 3.有大规模推荐系统架构设计和开发经验,知名互联网工作经历。
  • 25k-45k 经验不限 / 本科
    社交 / 上市公司 / 2000人以上
    岗位职责: 1、负责私域电商业务的离线和实时数据仓库建设,搭建和完善各业务模块的数据指标和报表体系; 2、负责私域电商业务相关的数据分析工作,配合数据产品经理,进行产品和运营核心策略的分析建模; 并协助搭建用户画像体系; 3、跨团队沟通和协作,确保项目顺利推进。 岗位要求: 1、2年及以上大数据项目架构/开发/调优经验,具有电商行业数据平台数据架构和开发工作经验优先; 2、熟悉数据治理、数据质量管理体系,有实际业务落地经验优先; 3、熟悉常见的算法和数据结构,熟练设计数据模型、ETL设计、Cube多维建模、OLAP开发等; 4、熟练使用大数据处理框架(Hadoop/Hive/Spark/Kylin)相关技术; 5、熟悉流式计算引擎,对相关框架(Kafka/Storm/SparkStreaming/Flink)熟悉了解,有实际应用经验优先; 6、熟悉Linux/Unix系统,精通至少一门编程语言PHP/Python/Java等;熟悉TDW优先; 7、沟通主动,有较强的工作激情和抗压能力,能组织协同团队开发
  • 25k-40k·13薪 经验3-5年 / 本科
    软件服务|咨询,人工智能服务 / 不需要融资 / 150-500人
    工作职责: 1、负责云端仿真业务核心模块的微服务体系研发、性能调优。 2、负责仿真业务大数据处理平台的研发、部署及维护。 3、负责在特定业务场景下进行技术选型。 4、负责业务研发过程中的技术攻关、对一些技术难题提出解决方案。 任职要求: 1、本科及以上计算机及相关专业;3年及以上工作经验。具有强烈的责任心、使命感、协作精神。 2、精通Java,熟悉Spring等相关技术栈。 3、精通数据库原理及相关性能调优技术,熟悉mybatis框架,熟悉postgresql、mysql等主流数据库。 4、精通常用微服务开发框架。 5、对实时、批处理大数据平台、数据中台等高并发及高可用分布式系统有相关研发或使用经验。 6、精通不同业务场景下的存储和计算技术选型,如高速缓存、分布式存储、实时计算等。 7、具有较强的学习能力、严谨的逻辑思维能力、工程实现能力,良好的编码规范。能够灵活高效地解决研发过程中的技术问题。 加分项: 1、互联网背景,微服务架构、大数据平台、数据中台等研发或使用经验。 2、拥有但不限于下述分布式技术框架的二次开发、部署或使用经验:SpringCloud、Dubbo、Flink、Storm、Spark、ES、Redis、HBase、MongoDB。 3、C++、Python语言相关经验。 4、K8S、Docker相关技术经验。
  • 30k-40k·16薪 经验5-10年 / 本科
    旅游 / 不需要融资 / 2000人以上
    岗位职责: 1. 研究攻防框架威胁监控和防御方案,研究新型攻防对抗手法,并与算法和研发伙伴落地并调优策略; 2. 对入侵和木马、泄露等威胁事件做响应跟踪,复盘改进和攻防对抗演练等; 3. 与工程研发伙伴一起改善和提升大数据安全分析平台、防御及检测产品落地;职位要求: 1. 3年以上安全攻防、技术开发、研究领域经验; 2. 熟悉网络安全攻防技术和工具以及各种常见攻防对抗及检测方法; 3. 处理过较大规模数据的经验,熟练掌握数据分析相关的技能; 4. 在攻防技术相关的事件响应上有较多经验积累,如溯源分析、技术对抗等工作; 5. 喜欢解决有挑战性难题,有Owner意识;加分项: 1 有红蓝方对抗实战经验; 2 熟练掌握flink/spark/storm等框架;3 有hw经验;
  • 15k-25k·13薪 经验3-5年 / 本科
    软件服务|咨询,IT技术服务|咨询 / 上市公司 / 2000人以上
    任职要求: 1、精通Unix/Linux操作系统下Java或Scala开发,有良好的编码习惯,有扎实的计算机理论基础; 2、熟练掌握大数据处理技术栈,有丰富的Hadoop/Spark/SparkStreaming/Storm/Flink的实际项目使用经验; 3、熟练掌握HDFS/HBase/Hive/S3等分布式大数据存储技术。 岗位职责: 1、4年以上大数据项目经验;具有实际的代码编写经验; 2、有电信大数据平台经验者优先; 3、热衷于追求技术完美与创新。
  • 短视频 / 上市公司 / 2000人以上
    职位描述 1、负责数据中台-商业化各个业务线数据仓库建设,构建商业化垂直数据集市; 2、定义并开发业务核心指标数据,负责垂直业务数据建模,如用户画像; 3、根据具体问题,设计并实现合适的可视化展示,构建数据持续观测平台; 4、参与数据平台的搭建,优化数据处理流程具体工作; 5、数据收集,反作弊数据仓库,用户数据仓库,UGC数据仓库,审核数据仓库的研发; 6、A/B测试实时ETL研发,转化漏斗分析平台研发。 任职要求 1、有Hive,Kafka,Spark,Storm,Hbase,Flink等两种以上两年以上使用经验; 2、熟悉数据仓库建设方法和ETL相关技术,对于数据的设计有自己的思考,具备优秀的数学思维和建模思维; 3、熟练使用SQL,对类SQL有过优化经验,对数据倾斜有深度的理解。了解特征工程常用方法; 4、具备扎实的编程功底,很强的学习、分析和解决问题能力,良好的团队意识和协作精神,有较强的内外沟通能力。
  • 20k-40k 经验5-10年 / 本科
    移动互联网,企业服务 / 不需要融资 / 500-2000人
    1、负责公司大数据平台总体架构顶层设计;2、负责数据治理体系的规划和建设,提升数据质量,加速分析效率,建立数据信心;3、负责业务分析和数据应用体系的规划和建设,驱动业务的增长;4、负责数据开发、分析、挖掘人才梯队的建设;5、结合业界大数据最佳实践持续优化大数据架构。岗位要求;1、计算机、数学、统计相关专业***本科及以上学历,5年以上大数据工作经验,3年以上大数据架构经验;2、对高可用的分布式架构运行机制有深入了解,有丰富的离线及实时架构搭建经验;3、熟练掌握编程语言Scala、Java,熟练掌握至少一种脚本语言python、shell;4、精通大数据生态系统Spark、Flink、Hadoop、hive、Kafka、Yarn等的架构、底层原理和技术细节,并有丰富开发、调优、维护经验;5、了解ElasticSearch、Spark、Kafka等技术工作原理,熟悉Storm、Spark、Impala等分布式计算平台的应用;6、熟练使用ETL工具进行数据抽取,清洗,转换,关联等操作;7、对数据敏感,能从数据中发现问题、解决问题;具备敏锐的洞察力,清晰缜密的结构化思维,以及独立分析的能力;8、较强的人际关系能力、有团队精神,较强的执行与推动能力,有一定抗压力。
  • 25k-50k·13薪 经验3-5年 / 本科
    电商 / 上市公司 / 2000人以上
    岗位职责: 1. 负责数据库的管控平面的功能开发、平台运维和稳定性保障,为数据库的管控平面负责; 2. 参与包括RDS数据库的智能化管控平台研发及管理,包括数据库生产/释放、变配、账户管理、高可用、容灾、备份、审计、优化等一整套数据库生命周期管控及服务相关系统的研发工作; 3. 参与从用户侧到到后端资源侧,数据链路,控制链路,性能日志采集,审计,检索,分析等一整套分布式系统的研发,提供全球领先的数据库服务; 4. 利用云原生,基于K8S、Docker、云上ECS/神龙、云盘、VPC等云原生技术与数据库技术结合,给用户提供优质体验、高性价比、安全可靠、易用、高性能的云数据库服务。 5. 通过产品化、智能化方式管控阿里云和阿里巴巴经济体的大规模分布式实例集群,并支撑集团业务需求,为双十一等大促场景提供稳定,顺滑的体验。 能力要求: 1. 至少熟悉Java/Python/Go语言的一种或多种,理解该语言涉及的基础框架,对于使用过的框架能够了解其原理和机制; 2. 熟悉linux内核基本原理,常用工具和命令,较好的诊断调优技能; 3. 熟练掌握多线程等高并发系统编程和优化技能;熟悉分布式系统的设计和应用,熟悉分布式、缓存、消息等机制;能对分布式常用技术进行合理应用,解决问题; 4. 快速学习能力,较强的团队沟通和协作能力,较强的自我驱动能力; 5. 【加分】熟悉Kubernetes/OpenStack/CloudFoundry等开源云平台,熟悉Docker容器技术,熟悉Hadoop/Spark/Storm等数据分析平台,具有丰富经验或者深入研究过源码的优先; 6. 【加分】熟悉MySQL/SQLServer/PG等关系型数据库,熟悉RDS等开源数据库、队列产品,并了解其原理或有运维经验的优先; 7. 【加分】有大规模互联网产品研发经验,有云厂商IaaS或者PaaS产品开发或管控经验的优先; 8. 【加分】通过阿里云数据库ACA或ACP认证者优先考虑。
  • 18k-30k·14薪 经验5-10年 / 本科
    科技金融,人工智能服务 / 不需要融资 / 150-500人
    1、负责数据仓库的模型规划设计工作 2、负责数据仓库ETL规则设计、数据映射工作 3、负责数据仓库建设需求调研、业务沟通 4、负责业务模型抽象和数据模型的设计开发 任职要求 1、计算机相关专业本科及以上学历 2、五年以上数据仓库建模经验 3、熟悉ETL、数据仓库开发及相关技术,熟悉hive等主流数据库技术,精通SQL开发与优化 4、熟练掌握维度建模理论,有能力分析业务数据,完成数据仓库模型设计 5、有实时数据处理开发经验(如flink/sparkstreaming/storm)优先 6、精通hadoop/yarn/hive等大数据体系,深入了解起背后的实现原理,并能够调优,超大规模数据项目,有百万级TPS数据处理经验尤佳 7、具备一定的JAVA、Python语言的开发能力,具备机器学习算法能力尤佳 8、良好的沟通能力和协调能力
  • 15k-25k 经验3-5年 / 本科
    科技金融 / 不需要融资 / 2000人以上
    岗位职责: 1、负责大数据设备部署、hadoop、MPPDB等常见商用平台的搭建、应用以及运维; 2、负责海量数据下精准营销平台流计算、实时计算的设计开发; 3、负责海量数据下可视化模块开发,依据业务需求和方案开发可视化品; 4、负责海量用户行为分析和预测,以及专家模型、分布式算法模型在精准营销方面的实现和应用等。 任职条件: 1、大学本科及以上学历,计算机、金融科技、应用数学、人工智能等相关专业,具有3年以上大数据相关工作经验; 2、精通至少一种编程语言,Java、Scala、Python; 3、熟悉hadoop、mppdb、hive、hbase、zookeeper、hue等中的多个,或者有相关工作经验优先; 4、熟悉spark streaming、storm、flink、redis、es中的多个,或者有相关工作经验优先; 5、熟悉spark mllib/GraphX、图计算、mahout中的多个,或者有相关工作经验优先; 6、具备数据挖掘、数据分析、机器学习知识背景,拥有反欺诈系统、推荐系统、精准营销、信息检索等方面的工作经验优先。