• 内容资讯,短视频 / D轮及以上 / 2000人以上
    职位职责: 飞书企业应用专注于泛财务领域。我们致力于建设基于大数据,搭建智能化、业财一体的财务中台,为互联网生态业务提供合规可控、效能卓越、业务洞察强的平台化能力,让经营者看清现状、预见未来。以技术中台的形式支撑财务税务,提供一站式产品能力,包括应收应付、发票、计税、付款,以及海量数据的清算、核算、报表、风控、分析。 欢迎对技术有孜孜追求的你,加入我们,一起探索和研究互联网时代的企业应用产品! 1、负责财务数据全链路质量保障和治理,包括但不限于数据同步、数据加工(离线+实时)、数据资产化(指标、标签等)、数据业务支撑(财报、管报、应用服务数据等); 2、负责数据类产品的质量保障方案设计及执行落地; 3、通过数据资产审计、制定准入准出机制、设计及执行数据校验核对、资产巡检、变更防控、仿真预演、监控应急等方式保障数据资产及数据产品的质量; 4、通过测试流程标准、方法和技术创新、自动化工具化等方式提升业务数据资产质量、数据产品质量、研测效率; 5、不断探究和建设一流的大数据领域技术风险保障体系和技术风险保障平台。 职位要求: 1、数据或数据产品相关的开发或测试4年以上经验,对数据仓库、数据挖掘、数据平台、数据引擎领域知识有较好储备; 2、熟练掌握一门或多门编程语言,如Java、SQL、Python、go等;有测试框架或质量平台开发经验、大型项目开发编码经验者优先; 3、熟悉数据仓库模型设计、ETL开发,维度建模设计方法,具备海量数据处理经验者优先;具备数据研发平台、数据服务等数据产品开发测试经验者优先;具备分布式数据存储与计算平台应用开发经验,熟悉Hadoop生态相关技术者优先; 4、具备大型项目的整体质量保障经验者优先;具备性能、异常、稳定性、用例自动生成等专业测试领域经验者优先; 5、具备较强的逻辑思维能力,谈判能力和冲突管理能力;良好的沟通能力和团队协作能力;快速适应变化、结果导向、追求上进。
  • 内容资讯,短视频 / D轮及以上 / 2000人以上
    职位职责: 1、负责字节跳动所有产品线UG方向的数据流和相关数据服务; 2、面向超大规模数据问题,每天处理千亿增量的用户数据; 3、负责流式数据的实时传递,清洗,转换,计算,并对外提供查询服务; 4、参与数据治理工作,提升数据易用性及数据质量; 5、理解并合理抽象业务需求,发挥数据价值,与业务团队紧密合作。 职位要求: 1、熟悉Linux操作系统及开发环境; 2、扎实的计算机软件基础知识:数据结构,操作系统等; 3、熟悉 C/C++、Java、Python 等任意一门编程语言; 4、对数据敏感,认真细致,善于从数据中发现疑点; 具备以下条件者优先: 1、研究过开源项目; 2、参加过 ACM 或者其他类型的软件开发大赛; 3、熟悉大数据处理工具/框架中的一项或多项,包括但不限于Hadoop, Mapreduce, Hive, Storm, Spark, Druid, kafka, hbase,ES等。
  • 17k-29k·20薪 经验5-10年 / 不限
    汽车丨出行 / 未融资 / 2000人以上
    岗位职责: 1.负责红旗车型项目车端数据埋点设计/开发、云端数据解析、数据管理体系建设 2.负责红旗车联网企业级数据中台的平台架构设计与建设,在平台内的数据的接入、解析、存储、服务、应用 3.负责红旗车型研发各领域内的数据分析、挖掘工作,为产品的设计、迭代提供数据支撑 4.负责红旗各车型车载DMS/OMS产品的自主算法开发、算法集成、产品测试 5.负责车载语音前端降噪、语音识别、自然语言处理、语音合成等算法设计、开发、测试集成 6.主导AI大数据研究与业务开发、技术选型、风险把控、关键节点评审 7.促进团队技术进步与创新,参与公司技术研发体系的搭建 任职要求: 1.学历要求:**大学本科及以上学历,英语CET-4及以上 2.工作经验:具有6年及以上车联网/大数据/算法开发领域工作经验,特别优秀者可适当放宽 3.其他: ① 计算机、数学类、信息技术类、模式识别、车辆工程等相关专业优先 ② 至少具备其中2项技术栈: 1) 掌握C++,Python、SQL等编程语言,熟悉Linux开发环境 2) 熟悉Tensorflow或Pytorch至少一个深度学习框架 3) 熟悉Hadoop、Hive、Spark、Flink、Kafka等大数据技术使用经验 4) 熟悉MQTT、HTTP、Websocket等物联网协议,具备车载嵌入式开发经验优先 ③ 良好的团队合作精神和沟通能力,善于学习新知识,主动性强,有责任心 ④ 有相关汽车领域工作经验者优先
  • 15k-30k·14薪 经验3-5年 / 本科
    软件服务|咨询,IT技术服务|咨询 / 上市公司 / 2000人以上
    1、参与大数据项目的需求分析、系统架构设计、并完成需求设计相应文档的编写; 2、深入理解数据业务,负责业务模型抽象、数据模型的设计开发,特征提取、分析和挖掘工作; 3、参与数据仓库建设,负责数据仓库模型设计,开发高质量可扩展的底层数据仓库体系; 4、负责运营商、金融、交通、智慧公园等大数据中台数仓项目和数据治理类项目建设。 职位要求: 1、本科及以上学历,计算机或者数学等相关专业,具备2年以上大数据和数据仓库相关工作经验。 2、熟练掌握大数据开发工具的使用(hdfs、hive、hbase、spark、flink、kafka等) 3、熟悉SQL开发,复杂SQL优化,熟练使用mysql、oracle、hive等。 4、熟悉java/scala、python开发语言。 5、具有良好的沟通、理解及表达能力,具有良好的抗压能力,可接受出差。 7、具有大数据系统架构能力、或有团队管理经验的优先考虑。
  • 20k-30k·13薪 经验5-10年 / 本科
    软件服务|咨询,IT技术服务|咨询 / 上市公司 / 2000人以上
    岗位职责: 1、负责数据的批处理、流处理,数据湖、数据仓库的设计、开发,各业务分析主题的数据模型设计,指标整理,维度建模和业务分析专题建模; 2、负责数据挖掘专题的需求分析、业务场景建模、实验模拟、制定分析挖掘目标,数据挖掘模型的设计、开发,数据模型的研究、设计、实现、优化,结果分析及验证,挖掘结果展现,知识提取和整理; 3、负责将研究成果与数据分析系统应用专题整合,在业务领域推广应用、并与客户沟通。 任职资格: 1、大学本科以上学历,五年以上工作经验,具备一个以上数据挖掘相关项目经验,有项目管理经验优先; 2、有数据挖掘项目的开发经验,具有独立完成建模、调试、优化和展现汇报的能力;有电信行业数据仓库系统开发经验者优先; 3、熟练掌握 spark、flink、clickhouse、presto 等常见大数据开发技术; 4、熟悉一种数据展现工具;熟练掌握ETL工具或能够编写程序进行数据操作; 5、有耐心,有钻研精神,严谨,细致;具有良好的团队合作精神,善于沟通;有强烈的责任心,积极主动; 6、有过运营商从业经验者优先; 7、有云平台、营销平台、推荐系统、BI等产品的从业经验者优先 。
  • 20k-40k 经验5-10年 / 本科
    移动互联网,企业服务 / 不需要融资 / 500-2000人
    1、负责公司大数据平台总体架构顶层设计;2、负责数据治理体系的规划和建设,提升数据质量,加速分析效率,建立数据信心;3、负责业务分析和数据应用体系的规划和建设,驱动业务的增长;4、负责数据开发、分析、挖掘人才梯队的建设;5、结合业界大数据最佳实践持续优化大数据架构。岗位要求;1、计算机、数学、统计相关专业***本科及以上学历,5年以上大数据工作经验,3年以上大数据架构经验;2、对高可用的分布式架构运行机制有深入了解,有丰富的离线及实时架构搭建经验;3、熟练掌握编程语言Scala、Java,熟练掌握至少一种脚本语言python、shell;4、精通大数据生态系统Spark、Flink、Hadoop、hive、Kafka、Yarn等的架构、底层原理和技术细节,并有丰富开发、调优、维护经验;5、了解ElasticSearch、Spark、Kafka等技术工作原理,熟悉Storm、Spark、Impala等分布式计算平台的应用;6、熟练使用ETL工具进行数据抽取,清洗,转换,关联等操作;7、对数据敏感,能从数据中发现问题、解决问题;具备敏锐的洞察力,清晰缜密的结构化思维,以及独立分析的能力;8、较强的人际关系能力、有团队精神,较强的执行与推动能力,有一定抗压力。
  • 30k-50k·16薪 经验5-10年 / 本科
    移动互联网,企业服务 / 不需要融资 / 500-2000人
    1. 负责复杂业务场景下数据体系构建,赋能业务数字化运营,保障数据的质量和数据生产的稳定性; 2. 负责基于大数据技术平台基础上的数据仓库建设,包括数据模型设计、离线/实时计算、性能优化以及相关技术问题的解决; 3. 负责数据质量、稳定性、数据资产管理等数据治理工作,构建全链路数据质量监控治理体系; 4. 参与数据产品的需求沟通、架构设计、数据开发以及系统优化。 任职要求: 1. 扎实的代码编程能力,具备良好的数据结构基础,熟悉常见设计模式,熟练使用Java/Scala/Python等至少一种语言; 2. 熟练掌握Hadoop生态,包括但不限于Hive/Spark/Flink等一种或几种大数据计算框架; 3. 熟悉数仓原理和实施,有实时数仓、离线数仓设计与开发经验; 4. 熟悉SpringCloud,SpringBoot等常用的开源框架优先 5. 熟悉OLAP平台建设或有过经验、熟悉业务指标设计且熟练掌握OLAP的维度建模设计方法优先 6. 熟悉常见数据挖掘、用户画像、搜索推荐、知识图谱、自然语言理解等相关算法及模型优先
  • 企业服务 / 未融资 / 15-50人
    岗位职责 1、设计、开发和维护企业级大数据平台和解决方案,包括数据采集、数据存储、数据处理和数据分析等。 2、使用Flink等流式计算引擎,实现实时数据处理和流式分析,提供实时的业务洞察和决策支持。 3、针对OLAP需求,设计和实现数据立方体、多维数据模型和数据聚合查询,以支持复杂的联机分析处理。 4、编写高效且可扩展的大数据处理和分析代码,提高数据处理和分析的效率和质量。 5、与数据科学团队合作,开发和实现数据处理和分析的需求和解决方案。 6、进行数据模型设计和数据架构优化,提高数据存储和计算的性能和可扩展性。 7、负责数据质量和数据安全的管理和监控,确保数据的合规性和机密性。 8、研究和探索新的大数据技术和解决方案,以不断提高大数据处理和分析的效率和质量。 9、建立和维护技术文档和标准,确保大数据开发的规范和一致性。 任职要求 1、本科及以上学历,计算机科学、软件工程或相关领域。 2、3年以上大数据开发经验,熟悉大数据技术栈和工具,如Hadoop、Spark、Kafka、Hive等。 3、熟悉流式计算引擎Flink,具备在实时数据处理和流式分析方面的经验。 4、了解OLAP(联机分析处理)的概念和技术,具备数据立方体和多维数据模型的设计和开发经验。 5、熟练掌握编程语言,如Java、Python或Scala,具备良好的编码和调试能力。 6、熟悉大数据处理和分析的各种技术和工具,如数据流处理、批处理、数据仓库等。 7、具备良好的数据库和SQL技能,熟悉关系型数据库和NoSQL数据库。 8、具备良好的沟通和团队合作能力,能够与不同背景和专业的人合作,解决技术和业务问题。 9、具备较强的学习能力和自我驱动能力,热爱技术研究和创新。 10、有较好的英文阅读和写作能力,能够阅读和编写英文技术文档。 必备条件 1、在Flink和流式计算领域有深入的研究和实践经验。 2、在OLAP(联机分析处理)领域有相关项目经验。 3、有大数据架构设计和优化经验,能够提供有效的解决方案和建议。 4、具备数据挖掘和机器学习的基础知识和经验。
  • 20k-40k·16薪 经验3-5年 / 本科
    消费生活 / D轮及以上 / 500-2000人
    工作职责: 1、负责模型样本&特征平台开发,为广告算法模型提供高效稳定的学习能力 2、负责广告索引传输系统优化和迭代,优化提高系统吞吐、降低延迟、提升迭代效率 3、支持大规模广告数据的流式/批量处理 任职资格: 1、计算机相关专业,本科以上学历,两年以上工作经验; 2、扎实的计算机专业基础知识,精通数据结构/算法设计; 3、熟练使用Hadoop、Spark、Hive、Flink等大数据处理框架。有海量数据开发经验者优先。 4、有计算广告、推荐系统、信息检索项目背景经验优先 5、具备较强的团队合作精神和沟通能力,能够与不同领域的人员进行有效的沟通和协作
  • 30k-45k·14薪 经验5-10年 / 本科
    移动互联网,广告营销 / 上市公司 / 2000人以上
    工作职责: 负责搜狐视频商业化的数据平台建设工作,包括: 1.负责数据平台、数据治理系统设计与搭建; 2.负责数据仓库建设、ETL开发、工作流任务优化以及解决相关技术问题; 3.负责行为日志、推荐策略和商业广告数据业务需求对接、数据分析与任务开发。 职位要求: 1.**本科及以上学历,计算机或相关专业优先;3年以上大数据开发、数据分析与处理经验,熟悉互联网产品运营和商业业务; 2.精通Scala/Java语言开发,熟悉Shell、Python等脚本开发,熟悉Linux系统; 3.熟悉大数据生态,精通Hadoop、Kafka、Spark、Flink技术,完成离线或实时大数据仓库设计与开发; 4.掌握数据建模理论,精通SQL开发与性能调优,熟练使用Hive、Doris等数据库组件; 5.有大型数据平台实际建设经验,在数据采集、数据开发、数据分析、数据建模等方面有深刻认识和实践经验; 6.有复杂业务系统的抽象设计能力,能独立对接业务需求和解决业务与技术问题; 7.具有良好的逻辑思维、表达和沟通能力,具备良好的团队合作精神,有较强的承压能力和工作责任心。
  • 18k-36k 经验5-10年 / 本科
    人工智能服务 / B轮 / 150-500人
    工作职责: 1. 负责数据采集爬虫项目的开发维护、性能优化等, 2. 以架构思维,确保数据采集架构的扩展性、稳定性 3. 规划数据采集爬虫的技术路线,研究和破解相关平台的反爬措施,保证数据获取的速度和稳定性。 任职条件: 1. 熟练掌握各种爬虫技能,丰富的Java/Python数据采集开发经验,编程基础扎实; 2. 熟悉常见分布式系统架构和设计,熟悉分布式、缓存、消息等机制;能对分布式常用技术进行合理应用,解决问题; 3. 熟悉反爬机制,有安卓逆向 / ios逆向经验的优先
  • 25k-35k·14薪 经验5-10年 / 本科
    IT技术服务|咨询 / 上市公司 / 2000人以上
    职位描述: 1. 从事工业数据的采集、传输、分析、集成等技术研究及开发应用; 2. 负责但不限于生产制造管理主题领域的指标体系、数据模型和治理逻辑设计,从业务应用的视角,构建数据驱动的运营管理平台方案; 3. 作为大数据专家角色,充分与内外部合作,负责项目数据类的方案架构设计和技术规划并确保最终落地, 4. 牵头项目关键架构设计和组织技术难点攻关; 5. 参与工业数据标准制订,并且推动团队应用标准; 任职要求 1. 计算机、软件工程及相关专业,本科及以上学历,至少3年以上大数据项目相关工作经验; 2. 掌握Hadoop、HBase、Kafka、Hive、Flink、Spark、datav等组件中至少2项的工作原理,熟悉Hadoop生态系统; 3. 精通Java,Python中的一种或多种语言,熟练掌握海量数据分析的相关模型、算法,有制造行业大数据分析模型经验者优先; 4. 熟悉数据库开发,精通面向对象设计、设计模式,熟练MySQL、Redis等数据库; 5. 有指标系统和数据可视化系统开发经验优先; 7. 具备开发项目管理经验。
  • 25k-50k 经验3-5年 / 本科
    企业服务 / 未融资 / 15-50人
    岗位职责 1、设计、开发和维护企业级大数据平台和解决方案,包括数据采集、数据存储、数据处理和数据分析等。 2、使用Flink等流式计算引擎,实现实时数据处理和流式分析,提供实时的业务洞察和决策支持。 3、针对OLAP需求,设计和实现数据立方体、多维数据模型和数据聚合查询,以支持复杂的联机分析处理。 4、编写高效且可扩展的大数据处理和分析代码,提高数据处理和分析的效率和质量。 5、与数据科学团队合作,开发和实现数据处理和分析的需求和解决方案。 6、进行数据模型设计和数据架构优化,提高数据存储和计算的性能和可扩展性。 7、负责数据质量和数据安全的管理和监控,确保数据的合规性和机密性。 8、研究和探索新的大数据技术和解决方案,以不断提高大数据处理和分析的效率和质量。 9、建立和维护技术文档和标准,确保大数据开发的规范和一致性。 任职要求 1、本科及以上学历,计算机科学、软件工程或相关领域。 2、3年以上大数据开发经验,熟悉大数据技术栈和工具,如Hadoop、Spark、Kafka、Hive等。 3、熟悉流式计算引擎Flink,具备在实时数据处理和流式分析方面的经验。 4、了解OLAP(联机分析处理)的概念和技术,具备数据立方体和多维数据模型的设计和开发经验。 5、熟练掌握编程语言,如Java、Python或Scala,具备良好的编码和调试能力。 6、熟悉大数据处理和分析的各种技术和工具,如数据流处理、批处理、数据仓库等。 7、具备良好的数据库和SQL技能,熟悉关系型数据库和NoSQL数据库。 8、具备良好的沟通和团队合作能力,能够与不同背景和专业的人合作,解决技术和业务问题。 9、具备较强的学习能力和自我驱动能力,热爱技术研究和创新。 10、有较好的英文阅读和写作能力,能够阅读和编写英文技术文档。 必备条件 1、在Flink和流式计算领域有深入的研究和实践经验。 2、在OLAP(联机分析处理)领域有相关项目经验。 3、有大数据架构设计和优化经验,能够提供有效的解决方案和建议。 4、具备数据挖掘和机器学习的基础知识和经验。
  • 12k-15k 经验不限 / 不限
    电商平台 / A轮 / 500-2000人
    工作职责: 1.负责爬虫服务架构设计、研发、爬虫效率的优化,完成数据采集、解析处理、入库及备份等数据日常工作; 2.负责爬虫核心技术研究、开发工作,对反爬虫屏蔽具有相应的应对策略; 任职资格: 1. 本科及以上学历,有2年及以上Python爬虫开发相关经验,理工科优先; 2. 有电商/供应链相关工作经验优先; 3. 熟练掌握python,熟悉mongoDB、redis等数据库,熟练使用linux操作系统; 4. 熟悉正则表达式、xpath等解析工具,了解前端html,css,js等相关知识。 5. 具备一定的js逆向基础。掌握常用爬虫框架(如 requests, scrapy等),有处理反爬的经验; 6. 具有良好的团队协作精神,思维活跃、逻辑严谨。
  • 25k-50k 经验5-10年 / 本科
    移动互联网 / 不需要融资 / 150-500人
    职责和任务: 1.架构设计: 设计和评估大数据架构,确保满足业务需求,包括数据采集、存储、处理和分析。 2.技术选型: 选择和评估大数据技术栈,包括但不限于Hadoop、Spark、Flink、Kafka等,确保系统的可维护性和性能。 3.数据治理: 制定和实施数据治理策略,确保数据质量、一致性和安全性。 4.性能优化: 分析和优化大数据处理流程,提高系统的性能和效率。 5.团队协作: 与数据工程师、数据科学家和其他相关团队密切合作,共同推动大数据项目的成功实施。 6.监控和维护: 建立监控机制,定期检查系统健康状况,并采取措施解决潜在问题。 7.新技术研究: 关注大数据领域的最新技术趋势,评估其在公司业务中的应用价值。 8.培训与指导: 培训团队成员,分享大数据领域的最佳实践,并提供技术指导。 资格要求: 1.本科及以上学历,计算机科学、信息技术或相关领域优先。 2.至少8年以上的大数据架构设计和实施经验。 3.深入理解Hadoop生态系统,包括HDFS、MapReduce、Hive等。 4.精通大数据处理框架,如Spark、Flink等。 5.熟悉实时数据处理和流处理技术,如Kafka。 6.具备良好的团队合作和沟通能力,能够与多学科团队协作。 7.出色的问题解决能力和创新思维。 8.有良好的领导力和项目管理经验。 9.具备数据治理和安全性的实践经验。 10.英语书写流利。