职位职责： 1、参与字节跳动搜索业务离线和实时数据仓库建设工作； 2、参与数据ETL流程的优化并解决海量数据ETL相关技术问题； 3、参与复杂数据链路依赖和多元数据内容生态下的数据治理工作； 4、背靠字节跳动强大的中台架构和产品体系，在业务快速落地数据解决方案。 职位要求： 1、精通数据仓库实施方法论、深入了解数据仓库体系，并支撑过实际业务场景； 2、具备较强的编码能力，熟悉sql，python，hive，spark，kafka，flink中的多项，有TB以上大数据处理经验； 3、对数据敏感，认真细致，善于从数据中发现疑点； 4、善于沟通，具备优秀的技术与业务结合能力。

职位职责： 1、负责字节跳动所有产品线UG方向的数据流和相关数据服务； 2、面向超大规模数据问题，每天处理千亿增量的用户数据； 3、负责流式数据的实时传递，清洗，转换，计算，并对外提供查询服务； 4、参与数据治理工作，提升数据易用性及数据质量； 5、理解并合理抽象业务需求，发挥数据价值，与业务团队紧密合作。 职位要求： 1、熟悉Linux操作系统及开发环境； 2、扎实的计算机软件基础知识：数据结构，操作系统等; 3、熟悉 C/C++、Java、Python 等任意一门编程语言； 4、对数据敏感，认真细致，善于从数据中发现疑点； 具备以下条件者优先： 1、研究过开源项目； 2、参加过 ACM 或者其他类型的软件开发大赛； 3、熟悉大数据处理工具/框架中的一项或多项，包括但不限于Hadoop, Mapreduce, Hive, Storm, Spark, Druid, kafka, hbase，ES等。

岗位职责: 1.负责CDH大数据平台的安装和部署； 2.负责CDH大数据平台各组件的性能优化； 3.负责CDH大数据平台各组件的运行维护和状态监控； 4.负责新技术调研，并能在团队内进行推广应用。 任职资格: 1.理解大数据计算原理，精通Hadoop/Spark体系，了解大数据平台运营基本思路； 2.熟悉HDFS、HBASE、KUDU、SPARK、HIVE等hadoop核心组件，具有两年以上hadoop/Spark技术的运维经验； 3.理解MapReduce计算框架的思想，熟悉分布式计算模型； 4.至少精通一种大数据开发语言，如JAVA、scala等； 5.至少熟练使用一种脚本语言，如Shell、Python等； 6.热爱技术，工作认真、严谨，有团队精神。

岗位职责 ： 1、数据仓库和数据处理‌：负责大数据平台的数据仓库、数据治理和数据模型的设计与开发工作。进行日常数据报表开发，理解业务需求，发挥数据价值‌。 2‌、数据服务开发‌：负责离线和实时数据服务的设计、开发、性能调优和效果优化。构建和维护数据管道，处理ETL过程，确保数据质量和准确性‌。 3、技术研究和应用‌：参与相关项目的数据需求的实现，设计和编码工作。参与开发过程中相关技术的研究和验证‌。 ‌4、平台运维和质量管理‌：负责大数据平台的数据及相关的应用开发、调优及维护。完成日常数据质量的监控，参与大数据平台的日常运维工作‌。 5、针对数据一致性、准确性、及时性，制定数据管理与治理机制，提升数据易用性、可用性及稳定性； 任职要求 ： 1、本科及以上学历，计算机相关专业，3-5年以上数据开发经验； 2、具备至少一个完整的大数据平台和BI系统实施经验，熟知平台建设各环节工作，包括数据采集、数据落地、仓库建设、数据平台搭建、数据应用产品开发 3、熟悉基于推荐系统的数据仓库建设方法论,有数仓模型设计及ETL开发经验；有数据仓库分层架构设定经验者优先; 4、熟悉Hadoop生态相关技术,如Hive、HDFS、Impala、Spark、Presto、Flink、Hudi、Elasticsearch、HBase、Druid、Kylin等,有基于分布式数据存储与计算平台应用开发经验,有较为系统的海量数据性能处理经验； 5、熟悉java、scala、python等语言，熟悉微服务，分布式架构，熟悉springcloud,springboot等技术开发； 6、熟悉数据仓库原理，有离线数仓、实时计算、数据挖掘、ETL、用户画像、数据可视化等设计与开发经验； 7、熟悉MySQL、PostgreSQL、NoSQL等数据库中至少一种数据中心建设方案，可以进行产品的独立部署、高可用架构和性能优化，熟悉开源社区解决方案； 8、熟悉阿里云大数据组件E-MapReduce、Dataworks、MaxCompute和国际AWS的EMR相关数据产品等，市场常见BI产品（superset、FineBI、神策数据）等相关组件者优先； 9、较强的学习能力和技术钻研能力、有自我驱动意识，对数据采集、数据治理、数据开发、数据分析、数据建模、算法等有深刻认识和实战经验。 期待您的加入哟，我们为您准备丰厚福利待遇： 【法定福利】：公司按国家规定购买五险一金+商业保险（员工本人及子女商业保险）+带薪年假； 【节日关怀】：节日福利礼品，以及节日礼金； 【公司福利】： 机场及高铁的贵宾服务（龙腾卡权益）+年度员工健康体检+平安360服务（在线问诊、VIP挂号及重疾紧急入院服务）+年度2次免费洁牙服务 公司提供咖啡、零食、下午茶 员工活动、旅游及团建，不定期举办聚餐、唱K、电竞赛、篮球赛、拓展、旅游、生日Party等 【学习与培训】：助力职业发展与提升，内外训双引擎发力助你高速发展 【晋升机会】：公司设立良好的晋升机制和广阔的发展空间。

工作职责: 1、充分理解业务需求及痛点，利用数据挖掘、数据分析、机器学习等技术挖掘业务价值，解决业务需求； 2、负责风控、定价等板块具体的数据挖掘项目，包括但不限于数据加工、数据分析、特征工程、构建模型等工作，并就对应项目阶段性成果进行汇报与分享，为业务发展提供支持； 3、参与构建用户全生命周期营销管理，构建以用户运营为核心的高质量的标签体系； 4、与业务团队构建良好的合作关系，积极沟通交流，推动合作项目成功。 任职资格: 1、3年以上数据分析/数据挖掘/机器学习等相关领域经验；**本科或以上学历；熟悉保险业务优先考虑； 2、熟练使用Python/Scala/Java中一门或多门语言；熟悉Spark/Hadoop/Hive等大数据处理技术，有阿里大数据生态Maxcompute、Dataworks、PAI项目经验的优先考虑；熟练使用Sql进行数据处理； 3、熟悉机器学习基本理论、数据分析常用方法论等相关理论知识，了解概率论与统计学基础； 4、有多类数据挖掘项目的实施落地经验，全链路打通并工程化部署，且能不断优化，进而产生业务效果； 5、自我驱动，能主动深入了解业务，适应业务变化；有良好的个人表达和组织沟通能力，推进项目开展。

职责描述： 1、负责公司大数据平台的运维保障工作，保障平台的正常运行和相应数据服务的稳定高效； 2、对接数据开发侧团队，主动优化和完善服务巡检、监控工具、脚本等，减少人工操作提高运维效率；负责数据平台的故障处置、推动性能优化。如平台产品技术问题，提交给平台产品技术组进行后台处理，并及时反馈. 3、负责数据平台二线运维支撑保障，响应运维/服务台一线请求：处置生产事件，跟踪问题处理； 4、定期组织团队人员开展大数据平台的技术知识积累和移交； 5、负责设计日常运维相关的自动化工具或系统，并完成相应需求收集和需求管理 ； 任职要求： 1. 具有1年以上金融行业数据类项目运维经验，熟悉保险业务操作与管理。具有大数据平台相关技术进行数据仓库、数据中台开发、维护、优化等项目经验的人员，或长期在类似的运维项目上承担运维工作优先； 2. 具备较强的数据开发分析能力，熟练掌握SQL等技能，熟练掌握大数据平台、UNIX、LUNIX和中间件的技能。有java或Python开发基础优先； 3. 具备较强的数据分析，问题分析，逻辑思维能力，团队协作能力，有良好的沟通能力和责任感，能够承担工作压力，独立分析和解决问题者优先； 4. 强烈的自驱力和责任感，面对复杂业务问题，可以从业务和技术多角度推进，最终达成目标。

5年以上金融/保险行业数据开发或监管报送经验，熟悉EAST报送规范及实施流程，有监管集市、保单登记平台、客户风险报送等项目实施经验者优先。

工作职责 1. 负责大数据分析需求设计和开发，承担数据抽取、清洗、实时统计及离线数据处理等程序开发； 2. 开发数据统计系统，完成项目数据统计与分析任务，为业务运营提供数据支持服务； 3. 根据项目需求预研并引入新的大数据分析技术 任职要求 1、本科及以上学历，计算机、数学相关专业，5年以上相关工作经验； 2、精通Java或者scala、基础扎实，有良好的编码习惯； 3、精通主流的大数据开源框架（如Hadoop/Spark/Flink等），并有丰富的应用开发经验； 4、熟练使用kafka/elasticsearch/redis/mongodb/Hbase/druid/kylin等大数据组件； 5、熟练使用主流关系型数据库（如Oracle/Mysql/PostgresQL）， 熟练掌握SQL语言； 6. 热爱开发，有较强的学习能力和快速解决问题的能力，具备较强的责任心和良好的沟通能力

岗位职责： 1. 大数据后端应用平台研发 2. 系统性能调优与优化 3. 大数据平台架构设计 任职要求： 1. JAVA基础扎实，理解io、多线程、集合等基础框架，对JVM原理了解，有一定调优经验; 2. 3年及以上Java开发经验，能够熟练使用springmvc、spring、mybatis等主流的开源框架; 3. 熟悉高并发分布式系统的设计及应用，掌握MySQL等数据库中的一种或多种，熟练运用NoSQL、Cache、MQ等中间件技术，并了解主流中间件原理和机制; 4. 具有良好的编程习惯，注重利用合理的设计模式和模块化的组织方式对代码进行架构，善于学习，具备独立分析和解决问题的能力; 5、有系统架构设计优化经验； 6. 熟悉大数据组件，如hadoop,hbase,es 7. 良好的团队协同能力，熟悉敏捷开发流程;

工作职责: 1、负责集团基于大数据技术的数据平台开发、数仓建设、数据治理、数据统计分析等开发工作； 2、负责数据挖掘领域的分析研究，包括数据挖掘算法的分析研究，特定场景的数据挖掘模型的需求分析、建模及实验模拟工作； 3、研究前沿技术，了解项目需求，制定解决方案，解决实际应用场景中的业务问题，优化离线/实时大数据计算任务的性能。 任职资格: 1、本科及以上学历，计算机、软件技术、数据挖掘、统计学、应用数据等相关专业； 2、至少3年以上大数据开发/数据存储/数据平台/分析挖掘相关经验； 3、熟悉Linux操作系统，掌握Shell/Python/Perl至少一种脚本语言； 4、理解主流大数据处理架构和相关技术，会使用Hadoop、Spark等平台，Hive 、Impala 、Azkaban 、Kafka、Sqoop、 Flume、Zookeeper相关组件和开源系统; 5、熟悉SQL语言，包括MySQL、Oracle等关系型数据库；Redis 、MongoDB、HBase等NOSQL 数据库；了解数据仓库技术，能够使用常用的ETL工具； 6、熟悉Lucene、ElasticSearch等 检索技术; 7、具有优秀的口头和书面表达能力，思维活跃、关注和了解技术发展的最新动态，踏实肯干、有责任心，能适应高强度工作，沟通协作能力较好、学习能力强。

岗位职责： 1、围绕卡中心网络银行部经营重点，负责渠道获客、产品营销、产品推荐、广告推荐、搜索排序等主要经营场景的分析建模工作，支持客群细分、价值体系、线上客户运营等重点项目； 2、基于各种数据分析方法及机器学习算法，从全局视野主动挖掘和探索业务经营趋势，挖掘潜在问题点和优化点，推进专项决策落地； 3、结合网银经营分析需求，研究大数据领域前沿数据挖掘技术，并引入投入实际应用； 4、负责数据挖掘项目方案制定、项目实施落地及优化等。 任职资格： 1、计算机、数学及统计学等相关专业硕士及以上学历，有数据挖掘领域具备丰富的项目经验者优先； 2、熟悉常用算法（如分类、回归、聚类、关联规则等）及其原理，对机器学习、深度学习算法有深入了解； 3、丰富的算法（分类器，推荐系统，运筹优化等）应用场景项目经验，有管理经验者优先考虑； 4、熟练掌握SQL，至少掌握python,scala,java等一种以上常用数据挖掘编程语言； 5、较强的逻辑思维能力、数据敏感度，擅长利用数据发现问题及解决问题； 6、较强的沟通表达能力及良好的团队协助能力，能够承受压力。

我司在招聘大数据工程师的同时也在招聘Java工程师 技能要求： Linux，网络安全，数据库开发 岗位职责： 1. 构建基于网络信息安全的大数据平台，支持数据采集、处理、分析、监控和可视化全过程。 2. 解决数据规模增长带来的技术、异地存储检索和复杂的业务问题。 3. 参与项目的需求分析和设计工作，并完成相关技术文档的编写。 4. 协助项目负责人解决项目中的技术难题； 任职要求： 1. 本科及以上学历，计算机相关专业，5年以上开发经验，2年及以上大数据从业经验。 2. 熟悉分布式编程，精通JAVA语言程序设计，具有良好的架构规划能力。 3. 熟悉Hadoop/Hive/Spark/Storm/Flink/Kafka/等技术，具备实际项目设计及开发经验。 4. 精通SQL，熟悉Mysql/Oracle处理机制及应用场景；熟悉NOSQL，如Redis、Hbase、MongoDB等 5. 有Druid、Clickhouse 或Kylin使用及性能优化经验者优先。 6. linux操作系统操作熟练，有能力进行复杂脚本（shell/PYTHON等）编程。 7. 工作态度端正，对技术充满热情具有钻研精神，有良好的问题分析和追踪能力，团队合作意识较好。 具有以下条件者优先考虑： 1）有Kubernetes/docker/Etcd 等容器技术使用者。 2）有网络信息安全从业经验者。

岗位职责： 1.支持Hadoop集群底座的运维故障分析、解决、性能优化；大数据集相关组件主要包括：Yarn、HDFS、ZooKeeper、Storm、Kafka、Hbase、Hive、Spark、Kerberos、Spark、Flink、Flume、MySQL等组件运维； 2.开发数据采集、清洗、分析、挖掘及可视化功能，需熟悉ES、milvus、pgsql等。 3.熟悉国产数据库，包括doris等； 4.配合开展HDFS存储、Hive元数据治理优化，建立并完善存储治理方案； 5.配合开展Hive、Spark作业优化，对业务侧提出优化建议。如：作业小文件问题、数据倾斜治理方案等； 6.提出集群优化建设方案，配合建设和优化大规模分布式集群的自动化运维、监控等工具和管理平台。 任职要求： 1.本科及以上学历，通信/计算机等相关专业，具有良好的学习能力、沟通能力、团队合作能力及一定的抗压能力； 2.熟悉Hadoop、Hive、Hbase、Spark等开源项目，理解组件架构及原理； 3.对大数据运维开发有浓厚兴趣，熟悉Apache Hadoop部署、性能调优； 4.能阅读/理解Hadoop等相关开源组件源码； 5.对HQL、SparkSQL等有较深入的研究，能解决实际业务性能问题； 6.熟练掌握LDAP、Kerberos等安全认证体系； 7.熟练掌握Linux命令与工具进行问题定位，熟悉常规的互联网技术架构； 8.具备一定的Java开发能力； 9.有信控平台开发经验者优先录取。

Wind大数据主要涵盖大数据技术在金融行业的应用，对主流大数据业务和技术都有研究和应用，涉及的技术包括Hadoop/Spark/HBase/Hive/Sqoop/Kafka/Flink/ClickHouse等。目前我们已经搭建万得金融大数据中心,建设基于大数据技术的数据仓库,开发各种数据挖掘应用项目。我们欢迎对技术有高追求，具有工匠精神的人才加入。  1、负责研究各类大数据技术和产品，能够引入并实施，包括Hadoop、Flink生态圈的各种主流技术研究与应用等； 2、负责大数据集群管理和维护工作，不断提升系统的稳定性和效率，为公司的业务提供大数据底层平台的支持和保证； 3、设计并实现对BI分析、数据产品开发、算法开发的系统性支持； 4、研究未来数据模型和计算框架的创新与落地，包括但不限于以下领域：大规模数据实时计算、研发模式敏捷化、数据计算框架轻量化、数据模型组织方式业务化等方面，参与制定并实践团队的技术发展路线； 5、建立良好的公司内外的业界技术影响力；参与培养未来数据人才；有效辅导团队，提升数据研发能力。 职位要求： 1、本科及以上学历，数学、计算机、软件工程类、通信类、电子信息、自动化或相关专业，3年以上工作经验； 2、掌握Hadoop、Kafka、Hive、Flink、HBase、ClickHouse、Zookeeper、Oozie、CDH等技术的使用； 3、熟练掌握Java开发，熟悉SpringBoot、SpringCloud等开发框架，有JVM调优经验 4、有大数据和分布式系统开发背景； 5、对用户画像、用户标签、用户行为分析等技术熟悉且有实战经验； 6、有较强的业务分析能力和问题定位能力； 7、性格开朗，勇于挑战；良好的人际关系，对技术追求工匠精神。 有以下经验者优先： 1）熟悉CDH集群调度，有集群搭建部署及管理维护经验优先 2）有Flink实时流处理、实时数仓开发经验优先 3）Java技术功底扎实，对多线程、高并发有深入实战经验

一、职位描述 1、对指定的多个网站进行网页抓取、数据提取；负责网络数据抓取规划、清洗以及汇总的开发工作； 2、负责特殊网页采集任务的分析及采集方案设计； 3、参与爬虫架构设计和研发，满足产品中数据抓取的要求； 4、参与爬虫核心算法和策略优化研究； 5、抓取调度和策略优化，实时监控爬虫的进度和警报反馈； 6、爬虫核心系统, 数据平台的研发维护。 二、职位要求 1、 本科及以上学历，计算机相关专业；3年以上开发经验，2年以上Hadoop相关工作经验； 2、具有数据挖掘、信息检索、机器学习开发经验； 3、精通HTML语言，熟悉JS，Ajax，熟悉Lucene、Nutch、Heritrix、larbin、HtmlParse、Scrapy、Crawler4j、WebMagic、WebCollector等开源工具； 4、精通网页抓取原理及技术，从结构化的和非结构化的数据中获取信息； 5、熟练使用一门以上脚本语言(PHP/PYTHON/JAVA/Node.js/SQL/R语言 等)； 6、熟练Hadoop大数据平台的核心框架 (HDFS, Pig, Hive, Sqoop, oozie, Zookeeper, Spark, Storm, Kafka 等)； 7、精通网络编程，熟悉HTTP传输协议，能模拟浏览器操作爬虫； 8、有丰富Java /Python开发经验者优先；熟悉MySQL、Oracle及有集群数据库开发经验者优先。 9、具备web挖掘等搜索引擎相关知识，有从事网络爬虫、网页去重、网页信息抽取的经验。以解决技术难题为乐，对程序完美有偏执追求；具有团队精神，有想法，敢于挑战自我。