职位职责： 1、负责字节跳动所有产品线UG方向的数据流和相关数据服务； 2、面向超大规模数据问题，每天处理千亿增量的用户数据； 3、负责流式数据的实时传递，清洗，转换，计算，并对外提供查询服务； 4、参与数据治理工作，提升数据易用性及数据质量； 5、理解并合理抽象业务需求，发挥数据价值，与业务团队紧密合作。 职位要求： 1、熟悉Linux操作系统及开发环境； 2、扎实的计算机软件基础知识：数据结构，操作系统等; 3、熟悉 C/C++、Java、Python 等任意一门编程语言； 4、对数据敏感，认真细致，善于从数据中发现疑点； 具备以下条件者优先： 1、研究过开源项目； 2、参加过 ACM 或者其他类型的软件开发大赛； 3、熟悉大数据处理工具/框架中的一项或多项，包括但不限于Hadoop, Mapreduce, Hive, Storm, Spark, Druid, kafka, hbase，ES等。

岗位职责 ： 1、数据仓库和数据处理‌：负责大数据平台的数据仓库、数据治理和数据模型的设计与开发工作。进行日常数据报表开发，理解业务需求，发挥数据价值‌。 2‌、数据服务开发‌：负责离线和实时数据服务的设计、开发、性能调优和效果优化。构建和维护数据管道，处理ETL过程，确保数据质量和准确性‌。 3、技术研究和应用‌：参与相关项目的数据需求的实现，设计和编码工作。参与开发过程中相关技术的研究和验证‌。 ‌4、平台运维和质量管理‌：负责大数据平台的数据及相关的应用开发、调优及维护。完成日常数据质量的监控，参与大数据平台的日常运维工作‌。 5、针对数据一致性、准确性、及时性，制定数据管理与治理机制，提升数据易用性、可用性及稳定性； 任职要求 ： 1、本科及以上学历，计算机相关专业，3-5年以上数据开发经验； 2、具备至少一个完整的大数据平台和BI系统实施经验，熟知平台建设各环节工作，包括数据采集、数据落地、仓库建设、数据平台搭建、数据应用产品开发 3、熟悉基于推荐系统的数据仓库建设方法论,有数仓模型设计及ETL开发经验；有数据仓库分层架构设定经验者优先; 4、熟悉Hadoop生态相关技术,如Hive、HDFS、Impala、Spark、Presto、Flink、Hudi、Elasticsearch、HBase、Druid、Kylin等,有基于分布式数据存储与计算平台应用开发经验,有较为系统的海量数据性能处理经验； 5、熟悉java、scala、python等语言，熟悉微服务，分布式架构，熟悉springcloud,springboot等技术开发； 6、熟悉数据仓库原理，有离线数仓、实时计算、数据挖掘、ETL、用户画像、数据可视化等设计与开发经验； 7、熟悉MySQL、PostgreSQL、NoSQL等数据库中至少一种数据中心建设方案，可以进行产品的独立部署、高可用架构和性能优化，熟悉开源社区解决方案； 8、熟悉阿里云大数据组件E-MapReduce、Dataworks、MaxCompute和国际AWS的EMR相关数据产品等，市场常见BI产品（superset、FineBI、神策数据）等相关组件者优先； 9、较强的学习能力和技术钻研能力、有自我驱动意识，对数据采集、数据治理、数据开发、数据分析、数据建模、算法等有深刻认识和实战经验。 期待您的加入哟，我们为您准备丰厚福利待遇： 【法定福利】：公司按国家规定购买五险一金+商业保险（员工本人及子女商业保险）+带薪年假； 【节日关怀】：节日福利礼品，以及节日礼金； 【公司福利】： 机场及高铁的贵宾服务（龙腾卡权益）+年度员工健康体检+平安360服务（在线问诊、VIP挂号及重疾紧急入院服务）+年度2次免费洁牙服务 公司提供咖啡、零食、下午茶 员工活动、旅游及团建，不定期举办聚餐、唱K、电竞赛、篮球赛、拓展、旅游、生日Party等 【学习与培训】：助力职业发展与提升，内外训双引擎发力助你高速发展 【晋升机会】：公司设立良好的晋升机制和广阔的发展空间。

岗位职责: 1.负责CDH大数据平台的安装和部署； 2.负责CDH大数据平台各组件的性能优化； 3.负责CDH大数据平台各组件的运行维护和状态监控； 4.负责新技术调研，并能在团队内进行推广应用。 任职资格: 1.理解大数据计算原理，精通Hadoop/Spark体系，了解大数据平台运营基本思路； 2.熟悉HDFS、HBASE、KUDU、SPARK、HIVE等hadoop核心组件，具有两年以上hadoop/Spark技术的运维经验； 3.理解MapReduce计算框架的思想，熟悉分布式计算模型； 4.至少精通一种大数据开发语言，如JAVA、scala等； 5.至少熟练使用一种脚本语言，如Shell、Python等； 6.热爱技术，工作认真、严谨，有团队精神。

岗位职责： 1.负责公司业务系统数据库的性能维护、安全性管理； 2.负责公司数据可靠性维护、数据备份和数据容灾； 3.对开发项目提供数据库技术支持； 4.负责数据库运维自动化脚本编写。 任职要求： 1.计算机、软件相关专业本科及以上学历； 2.3-5年相关工作经验； 3.较强的沟通学习能力，对技术有热情，有能力直接跟踪和学习最新的技术和知识； 4.有python或者shell编程能力； 5.有oracle、mysql、mongodb、hadoop至少一种运维能力。

职责描述： 1、负责公司大数据平台的运维保障工作，保障平台的正常运行和相应数据服务的稳定高效； 2、对接数据开发侧团队，主动优化和完善服务巡检、监控工具、脚本等，减少人工操作提高运维效率；负责数据平台的故障处置、推动性能优化。如平台产品技术问题，提交给平台产品技术组进行后台处理，并及时反馈. 3、负责数据平台二线运维支撑保障，响应运维/服务台一线请求：处置生产事件，跟踪问题处理； 4、定期组织团队人员开展大数据平台的技术知识积累和移交； 5、负责设计日常运维相关的自动化工具或系统，并完成相应需求收集和需求管理 ； 任职要求： 1. 具有1年以上金融行业数据类项目运维经验，熟悉保险业务操作与管理。具有大数据平台相关技术进行数据仓库、数据中台开发、维护、优化等项目经验的人员，或长期在类似的运维项目上承担运维工作优先； 2. 具备较强的数据开发分析能力，熟练掌握SQL等技能，熟练掌握大数据平台、UNIX、LUNIX和中间件的技能。有java或Python开发基础优先； 3. 具备较强的数据分析，问题分析，逻辑思维能力，团队协作能力，有良好的沟通能力和责任感，能够承担工作压力，独立分析和解决问题者优先； 4. 强烈的自驱力和责任感，面对复杂业务问题，可以从业务和技术多角度推进，最终达成目标。

工作职责 1. 负责大数据分析需求设计和开发，承担数据抽取、清洗、实时统计及离线数据处理等程序开发； 2. 开发数据统计系统，完成项目数据统计与分析任务，为业务运营提供数据支持服务； 3. 根据项目需求预研并引入新的大数据分析技术 任职要求 1、本科及以上学历，计算机、数学相关专业，5年以上相关工作经验； 2、精通Java或者scala、基础扎实，有良好的编码习惯； 3、精通主流的大数据开源框架（如Hadoop/Spark/Flink等），并有丰富的应用开发经验； 4、熟练使用kafka/elasticsearch/redis/mongodb/Hbase/druid/kylin等大数据组件； 5、熟练使用主流关系型数据库（如Oracle/Mysql/PostgresQL）， 熟练掌握SQL语言； 6. 热爱开发，有较强的学习能力和快速解决问题的能力，具备较强的责任心和良好的沟通能力

工作职责: 1、负责集团基于大数据技术的数据平台开发、数仓建设、数据治理、数据统计分析等开发工作； 2、负责数据挖掘领域的分析研究，包括数据挖掘算法的分析研究，特定场景的数据挖掘模型的需求分析、建模及实验模拟工作； 3、研究前沿技术，了解项目需求，制定解决方案，解决实际应用场景中的业务问题，优化离线/实时大数据计算任务的性能。 任职资格: 1、本科及以上学历，计算机、软件技术、数据挖掘、统计学、应用数据等相关专业； 2、至少3年以上大数据开发/数据存储/数据平台/分析挖掘相关经验； 3、熟悉Linux操作系统，掌握Shell/Python/Perl至少一种脚本语言； 4、理解主流大数据处理架构和相关技术，会使用Hadoop、Spark等平台，Hive 、Impala 、Azkaban 、Kafka、Sqoop、 Flume、Zookeeper相关组件和开源系统; 5、熟悉SQL语言，包括MySQL、Oracle等关系型数据库；Redis 、MongoDB、HBase等NOSQL 数据库；了解数据仓库技术，能够使用常用的ETL工具； 6、熟悉Lucene、ElasticSearch等 检索技术; 7、具有优秀的口头和书面表达能力，思维活跃、关注和了解技术发展的最新动态，踏实肯干、有责任心，能适应高强度工作，沟通协作能力较好、学习能力强。

我司在招聘大数据工程师的同时也在招聘Java工程师 技能要求： Linux，网络安全，数据库开发 岗位职责： 1. 构建基于网络信息安全的大数据平台，支持数据采集、处理、分析、监控和可视化全过程。 2. 解决数据规模增长带来的技术、异地存储检索和复杂的业务问题。 3. 参与项目的需求分析和设计工作，并完成相关技术文档的编写。 4. 协助项目负责人解决项目中的技术难题； 任职要求： 1. 本科及以上学历，计算机相关专业，5年以上开发经验，2年及以上大数据从业经验。 2. 熟悉分布式编程，精通JAVA语言程序设计，具有良好的架构规划能力。 3. 熟悉Hadoop/Hive/Spark/Storm/Flink/Kafka/等技术，具备实际项目设计及开发经验。 4. 精通SQL，熟悉Mysql/Oracle处理机制及应用场景；熟悉NOSQL，如Redis、Hbase、MongoDB等 5. 有Druid、Clickhouse 或Kylin使用及性能优化经验者优先。 6. linux操作系统操作熟练，有能力进行复杂脚本（shell/PYTHON等）编程。 7. 工作态度端正，对技术充满热情具有钻研精神，有良好的问题分析和追踪能力，团队合作意识较好。 具有以下条件者优先考虑： 1）有Kubernetes/docker/Etcd 等容器技术使用者。 2）有网络信息安全从业经验者。

岗位职责： 1.支持Hadoop集群底座的运维故障分析、解决、性能优化；大数据集相关组件主要包括：Yarn、HDFS、ZooKeeper、Storm、Kafka、Hbase、Hive、Spark、Kerberos、Spark、Flink、Flume、MySQL等组件运维； 2.开发数据采集、清洗、分析、挖掘及可视化功能，需熟悉ES、milvus、pgsql等。 3.熟悉国产数据库，包括doris等； 4.配合开展HDFS存储、Hive元数据治理优化，建立并完善存储治理方案； 5.配合开展Hive、Spark作业优化，对业务侧提出优化建议。如：作业小文件问题、数据倾斜治理方案等； 6.提出集群优化建设方案，配合建设和优化大规模分布式集群的自动化运维、监控等工具和管理平台。 任职要求： 1.本科及以上学历，通信/计算机等相关专业，具有良好的学习能力、沟通能力、团队合作能力及一定的抗压能力； 2.熟悉Hadoop、Hive、Hbase、Spark等开源项目，理解组件架构及原理； 3.对大数据运维开发有浓厚兴趣，熟悉Apache Hadoop部署、性能调优； 4.能阅读/理解Hadoop等相关开源组件源码； 5.对HQL、SparkSQL等有较深入的研究，能解决实际业务性能问题； 6.熟练掌握LDAP、Kerberos等安全认证体系； 7.熟练掌握Linux命令与工具进行问题定位，熟悉常规的互联网技术架构； 8.具备一定的Java开发能力； 9.有信控平台开发经验者优先录取。

工作职责: 1、负责客户现场大数据平台和大数据项目问题处理和技术支持。 2、深入理解产品架构，对平台环境异常定位、问题排查、性能调优等 3、独立完成测试环境搭建，问题复现及维护等工作。 任职资格: 1、至少1年大数据运维经验，了解分布式平台运行的原理，并有实际部署维护经验。 2、精通基于Linux系统的常用服务(如tomcat、nginx、mariadb、prometheus)配置运维，对CPU、MEM、IO、NET四大子系统内核参数以及程序性能优化有实战经验者优先。 3、至少熟悉shell/python一种或多种语言，能独立编写运维脚本。 4、熟悉mariadb等数据库以及优化，熟练使用sql语句。 5、熟悉开源项目（如elasticsearch、clickhouse、flink、kafka）的部署升级、扩容缩容、性能和管理优化、问题排查等，对新技术有较强的预研学习能力。 6、逻辑清晰，具备一定的程序异常排查、问题定位等应急处理能力 。 7、有较强的沟通能力，良好的职业责任心和团队合作意识

【岗位职责】  1、负责公司大数据产品的测试工作，把好质量关 2、负责根据需求利用xmind等工具进行测试方案的指定，编写测试用例 3、熟悉使用各类测试工具高效执行测试用例，并提交测试报告 4、善于发现并定位问题、协助研发人员解决问题，能从测试角度提供优化建议  【岗位要求】  1、计算机相关专业毕业，本科及以上学历，2年以上大数据测试经验 2、熟悉阿里云平台，至少一种分布式计算/存储系统的基本操作和原理 3、熟练使用常见的数据库，较强的sql基础 4、熟练使用excel进行数据分类汇总 5、有大数据产品测试经验；有基于大数据平台的数据仓库产品测试经验更加 6、有解决问题、钻研新技术的兴趣和能力，善于交流和表达，有良好的团队合作意识、抗压能力，能接受临时突发性的工作安排

岗位职责： 1. 负责大数据体系全栈技术架构优化，组件调优，并根据业务需求持续优化平台性能、稳定性和可靠性。 2.把握大数据相关技术的演进发展趋势，负责新技术专项课题研究，大数据产品相关全栈技术的架构设计、技术选型等。 3. 负责大数据应用设计和研发，解决实时和离线计算流程中性能、功能等多方面的挑战，打造高性能、高可用、可扩展的系统，支撑多项目多场景的通用接入； 岗位要求： 1、 ***本科及以上学历，计算机相关专业； 2、 精通大数据及数据仓库原理，5年以上大数据平台研发经验或架构经验； 3、掌握Hadoop生态圈的主流技术及产品，精通Flink/Spark/HDFS/HBase/Hive/ES/Kafka/ClickHouse等大数据组件的原理和开发调优； 4、 精通Java/Scala开发语言，熟悉Redis/MongoDB/MySql/Neo4j数据库开发优先； 5、 有开源框架贡献记录或者源码阅读经验者优先； 6. 对最新的大数据相关技术趋势有敏锐的洞察力，具备与时俱进的学习研究能力。对湖仓一体、大数据云原生、储算分离、数据编织、知识计算、分布式协同计算、高性能跨源查询等方面有一定的了解和研究基础。 7、 有很强责任心、团队精神和持续研究学习的能力，能够接受工作挑战。

工作职责： 1）、数据ETL工作； 2）、参与数据产品设计工作：数据分析挖掘：与医疗业务专家配合，承担数据仓库构建、模型构建、数据标签、知识库、画像分析等相关数据产品等设计工作； 3）、数据挖掘分析工作； 4）、数据产品研发工作。 任职要求： 1）、具有深厚的统计学、数据挖掘等相关知识，熟悉数据仓库和数据挖掘的相关技术，精通建模方法并有过独立的建模实践； 2）、熟悉软件产品研发流程：精通SAS，R，SPSS等统计分析软件，具有海量数据挖掘、分析相关项目实施经验，参加过完整的数据挖掘项目并有成功案例； 3）、精通Kettle、pentaho等工具的使用或开发； 4）、熟悉Python、TIDB、关系型数据库、大数据Hadoop生态编程及数据库操作者优先录用。

岗位职责： 1. 负责数据平台架构设计、相关应用型数据产品的规划与研制； 2. 建设数据指标体系和分析模型，实现数据价值； 3. 负责与业务及开发团队协同规划数据采集、加工、应用、治理全过程，推动客户业务场景应用建设； 4. 负责整合与集成其他内部技术人员、外协技术人员开发的软件功能模块； 5. 参与撰写需求分析说明书、概要设计、详细设计等相关技术文档，参与或主导软件质量相关的工作。 任职要求： 1. 本科及以上学历，数学、计算机、统计相关专业； 2. 理解云化、数据仓库，熟悉海量数据的处理，良好的数据建模能力； 3. 熟悉主流大数据和数据库管理系统技术（如Oracle/PostgreSQL/MySql、HDFS/HBase/Hive/MapReduce/Spark/Storm/Redis / Memcached/ MongoDB以及Kafka、Zookeeper、Flume、Hadoop、Flink、Yarn等技术）的工作原理及应用； 4. 了解主流体系架构各组件的优缺点，熟悉与架构设计相关的数据存储、性能调优等相关领域知识，有直接的产品设计与开发、部署、调优的经验； 5. 了解kafka、hive、hadoop等大数据集群高可靠、高效和经济运维技术，了解系统监控、容灾、自动化、智能化运维体系； 6. 能够完成大型数据平台设计，丰富的OLAP系统经验，精通数仓架构及实施过程；深刻理解数据治理及落地方法论，有实战经验优先； 7. 精通至少一门编程语言，如C++、Java、Python等，了解设计模式，熟悉UML和ER设计方法，具有良好的设计习惯和代码架构规范，具有良好的沟通能力、协作和执行能力； 8. 熟悉数据挖掘、机器学习算法、数据可视化者优先考虑； 9. 熟悉业界常用的数据采集、集成、数据存储、计算、数据模型、数据分析的技术方案，能够基于Flink引擎开发构建流式和批式⼀体化的数据融合处理产品，可以负责Flink各类处理算⼦的设计与开发。具有数据分析或数据挖掘相关经验者优先； 10. 熟悉数据治理相关流程，包括数据接入、数据处理、数据治理、数据组织、数据服务等； 11. 具备数据治理的知识与体系方案，包含政策、组织、角色、流程、规范等，以及规划相应的支撑方案。了解业界的数据管理方法论； 12. 工作积极主动，责任心强，抗压能力强，有较强的学习能力，善于交流，有良好的团队合作精神、沟通协调能力和工作推进能力，有与业务、产品、开发等多方密切配合的经验和意识； 13. 具备很好的业务敏感度，能够深入业务，实施数据驱动业务发展。

岗位职责： 1.负责大数据平台集群的运维工作（Hadoop/Hbase/Hive/Flink/Yarn/Spark/Presto/kafka等),确保高可用； 2.负责大数据相关集群的监控/保健/扩容/升级和调优； 3.负责大数据平台相关系统的维护； 4.负责Mysql/oracle数据库的维护； 5.负责应用程序的维护。 任职要求： 1.***学信网本科及以上学历，计算机相关专业，有2年以上的大数据运维经验。 2.熟悉Hadoop/Hbase/Spark/kafka/Presto/Flume等大数据相关组件，并由实际部署维护经验。 3.熟悉Linux操作系统的配置/管理和优化，能够独立排查和解决操作系统层面的问题。 4.熟悉Mysql/oracle/sqlserver等关系性数据库。 5.熟练Shell/Python/Java等编程语言的一种，并有相关开发经验。 6.了解Nginx/Redis/K8s原理，并灵活应用。 7.熟悉网络基本架构和基本的操作。 福利待遇： 五险一金 做五休二 早九晚六（弹性工作时间） 下午茶 带薪年假 年度体检 定期团建 享受临港新片区落户和购房政策 工作地址：上海临港新片区创晶科技中心（介意地址者勿投）