-
岗位职责: 1. 主要从事研究软件应用的安全解决方案和架构设计,推进落地;设计数据安全管控平台安全合规的技术架构与平台能力,针对安全违规场景设计检测与打击方案,构建可度量的业务信息系统风险模型; 2. 主要从事研究公/私有云(含容器云)的关键技术、安全解决方案和架构设计,推进落地;结合相关政策要求及业务需求,整合内外部工具能力实现安全风险的快速发现与处置; 3、主要从事研究安全一体化平台的解决方案和架构设计,推进落地; 4. 提供应用安全开发过程管理和关键技术研发等安全技术支持,协调推进跨团队项目,对安全事件进行跟踪分析及快速定位解决; 5. 通过培训/知识库建设/工具平台建设/流程优化等手段,帮助团队提升安全意识与能力; 岗位要求: 1、本科及以上学历,信息安全、计算机、网络相关专业优先,有5年以上网络或数据安全产品研发与运营安全管理经验优先; 2、熟悉网络安全、数据安全理念、方法与流程,对国内外数据安全前沿技术有充分的理解,具备内容安全/安全检测/安全合规/黑灰产检测对抗等方面经验; 3、熟悉数据生命周期安全管理,有企业级数据安全体系建设经验, 具备复杂项目的管理推动相关工作经验,自驱力强; 4、熟悉ISO27001、GDPR、等保2.0、DSMM等安全标准,具有落地经验; 5、较强的逻辑思维及数据分析能力,具备出色的需求分析及安全模型构建能力;深入了解数据安全管理平台(规则创建、关联等),对资产管理、数据安全能力、事件分析与定位、报表生成等有了解,有实战经验; 6、熟悉业界安全检测和响应技术,在误报降低优化,安全自动化运营等领域有相关经验; 7、熟悉ElasticSearch、flink、kafka、spark等相关技术栈并具有相关使用经验优先; 8、熟悉安全基础架构和平台,具有数据安全管理平台、SIEM、SOC、态势感知等架构设计经验者优先 9、有过PB级安全数据自动化分析或安全响应体系构建经验者优先 10、具有CISSP、CISP、CISA、CCIE、CCSP等相关认证优先录用,条件优秀者可适当放宽。
-
职位职责: 1、构建国际化短视频业务的大数据安全体系; 2、作为团队架构师/负责人,负责抽象短视频业务在安全与隐私场景下的数据需求,领导产品的设计、研发等。 职位要求: 1、7年以上工作经验,具备在一线互联网公司的大数据团队工作经验,有数据安全和隐私合规背景佳; 2、具备大型横向项目协作能力和成熟的团队管理能力; 3、熟悉企业级数据仓库和大数据组件,并精通其中的一项或多项,如Hive、Spark、Flink等; 4、英文工作能力是加分项。
-
产品架构师 岗位职责: 1、协助产品负责人制定大数据产品或系统的技术架构方案和实施路线,对整体软件方案、内部系统优化方案建议及决策,参与系统设计方案评审 2、子系统或模块的设计与开发,包括接口、业务逻辑定义、数据模型的设计与开发等 3、负责组织研发数据质量、数据分析整体方案,根据要求进行文档与代码的设计、编写、评审、维护工作 4、组织编写相关技术文档,协调和培训开发人员,辅助完成产品或系统开发 技能要求: 1、有5年以上IT行业技术研发类从业经验,独立系统设计、架构设计和研发经验 2、熟悉大数据系统技术架构及关键技术、软件研发过程,熟练掌握设计模式、开发语言、算法基础、数据结构等基本知识 3、熟悉领域设计理论,熟悉UML建模语言。 4、熟悉JAVA/Go/C++等开发语言及相关技术,熟悉各种数据分析框架架构原理。 5、熟练掌握Mysql、Oracle、Hdfs、Hive等主流数据库,较强的数据库及SQL能力,熟练使用Linux系统。 6、具有较强的技术风险把握能力和识别能力、应用系统架构及从技术角度分析业务的能力 7、沟通能力优秀,具备良好的逻辑思维,思路清晰,善于思考,能独立分析和解决问题,善于在强压下推进项目
-
职位职责: 1、 作为架构师,负责短视频产品数据中心、数据本地化场景下的大数据架构,包括数据仓库的顶层设计、数据权限系统的设计等; 2、主导短视频产品的大数据技术攻坚工作,包括大规模分布式存储的数据删除、海量数据的自动化分类分级等新技术探索及工程攻坚工作,与兄弟团队一起攻坚行业技术难题; 3、深入理解业务,负责短视频产品的隐私与安全领域数据仓库的需求对接、架构设计,提升数据价值; 4、 负责构建围绕隐私保护、数据安全的数据治理治理体系、并推动相关治理工具的产品化落地; 职位要求: 1、计算机、数学相关专业本科及以上学历,五年以上大数据开发经验,有较强的数据抽象能力; 2、熟悉大数据生态环境,掌握Hadoop,Hive,Kafka,Spark,Flink等大数据技术栈; 3、精通数据仓库实施方法论、深入了解数据仓库体系,并支撑过实际业务场景; 4、善于沟通,主动性强,具备优秀的技术与业务结合能力,有较强的项目推进能力; 5、较好的英文沟通能力是加分项。
-
职责描述 1. 负责公司大数据基础平台、海量数据分布式存储与计算平台、以及数仓平台底层架构设计与研发 2. 负责实时计算平台基础架构设计、部署、监控及优化升级 3. 充分理解公司各业务对大数据平台的基建需求,支撑公司数据中台体系建设 4. 深入研究行业内大数据技术发展动态,对既有平台提出更有解决方案并推动实施落地 任职要求 1. 计算机相关专业,本科及以上学历,熟练掌握Java、Scala、Python等语言 2. 精通hadoop、hive、spark、kafka、iceberg、hudi、dolphinscheduler等技术原理及其生态圈,有二次开发经验者优先 3. 熟悉大数据集群,有大规模数据集群稳定性保障及调优经验,较强的故障诊断能力,能快速定位与解决问题 4. 熟悉Java Web相关框架,如Spring Boot、MySQL等 5. 5年以上大数据平台开发经验,有数据集成、数据开发、即席查询、任务调度、计算引擎等开发经验优先 6. 具备良好的抗压能力与责任感
-
工作职责: 1、负责大数据领域的产品、项目架构指导及评审; 2、负责大数据领域相关公共及底座能力架构设计、技术难题攻关、核心代码编写及开发指导; 3、参与大数据领域相关的技术标准规范制定及技术引进; 4、上级交办的其他事项。 岗位要求: 1、计算机相关专业,本科以上学历,8年以上开发经验,2年以上的大数据项目架构经验; 2、深入理解大数据产品和数据分析相关技术和实现方法; 3、熟练使用hadoop及hadoop生态圈中的常用组件,如Spark、Hive、HBase 等;理解MapReduce、HDFS、spark RDD/DataFrame原理; 4、熟悉Flink或者Spark Streaming等实时计算框架; 5、至少熟悉Java,Python,Scala一种或者多种语言,熟悉Oracle\MySQL,熟悉Linux及Shell; 6、熟悉数据挖掘、可视化分析,各种BI算法和产品等; 7、有机器学习或深度学习经验优先; 8、熟悉Spring Boot,有Spring Cloud等微服务相关项目开发经验优先; 9、具有良好的沟通协调能力和团队合作精神。
-
岗位职责: 1、参与数据仓库需求分析、模型设计、代码开发、代码自测,并对代码质量负责; 2、负责数据质量问题的分析、跟进、解决,进行数据质量检测、校验和提升,优化数据仓库代码及设计,参与数据相关的前沿技术预研; 3、负责涉及多种数据源的开发工作,包括数据过滤、清洗和分析等; 4、参与大型分布式应用系统数据流和数据仓库的设计与实现。 技能要求: 1、具有本科及以上学历,5年以上数据服务工作经验,其中有3年或以上数据仓库开发经验,熟悉数据仓库模型设计,熟悉数据仓库建模方法论,具有3年及以上的ETL经验; 2、熟悉postgresql数据库、HD、高斯数据库部署和操作,熟悉SQL常用语法; 3、熟悉大数据编程技术,熟练掌握FLINK、KAFKA技术,掌握数据汇聚、主题库、专题库相关开发实施能力; 4、有数据治理经验者优先
-
岗位职责 1.负责公司大数据/数据中台类项目的整体架构设计与实现; 2.编写解决方案及技术文档; 3.技术方案选型、相关技术实现,分析并协助解决数据开发过程中的问题; 4.根据当前团队技术瓶颈、评估技术栈短板,开展相关技术预研及针对性培训; 5.开展创新探索工作,持续优化整体架构; 任职要求: 1.***本科及以上学历,计算机或相关专业, 2.5年以上大数据平台架构、设计等经验; 3.精通大数据生态及阿里、华为、星环等主流大数据平台; 4.精通数据仓库/业务建模/分析模型/数据挖掘等设计与实现; 5.精通Java等编程语言,具备2个以上大型分布式应用系统设计经验,有超大数据量,超高并发等场景处理经验 6.具备良好的语言沟通和自我驱动力,良好的逻辑思维以及问题分析能力; 具备较强的文档基础能力,善于总结。
-
工作职责 1、负责企业级数据平台整体架构,包括计算引擎、存储引擎、数据开发平台等方向的技术体系规划、架构设计及方案落地,为业务产品和算法开发提供高效的数据系统支撑; 2、负责大数据服务体系的环境、流程、规范和配套工具系统建设,保证数据研发体系的高效性与生产服务体系的稳定性、高性能、高可用性和可扩展性; 3、负责实时&离线计算框架的创新与落地,包括但不限于以下领域:大规模数据实时化、数据模型组织方式业务化等方面,参与制定并实践团队的技术发展路线; 4、负责与业务团队协同规划大数据平台能力开发,为业务平台提供数据交换,数据服务,数据开发等能力,参与制定并实践团队的技术发展路线; 5、关注业界最新技术,深入理解业务特征,前瞻性的进行技术预研与引入,支持业务的高速发展;建立良好的公司内外的业界技术影响力;参与培养未来数据人才;有效辅导团队,提升数据研发能力。 任职要求 1、计算机相关专业本科以上学历优先;8年以上大数据系统开发、设计经验,5年以上架构设计经验,金融行业从业经验; 2、精通大数据全栈架构,精通一种或多种分布式计算、存储、调度框架或工具(Yarn/Hive/MapReduce/Spark/Flink等),通读过其中之一的源码,有分布式系统的开发经验; 3、具有扎实的编程功底,熟悉常用的算法和数据结构,精通Java/GO/Python其中一门编程语言,有较强的分布式计算基础和算法工程能力,并具备丰富的实战经验; 4、负责过PB级别大数据平台整个产品线的业务架构工作,负责过海量数据平台上高可用、高性能分布式系统的架构开发,组织过中等以上规模项目,有互联网大数据平台建设等技术背景者优先; 5、熟悉常见的互联网,大数据、云计算、人工智能等技术和知识,优秀的业务理解和分析能力,有关键技术攻关的决心和能力; 6、有良好的团队沟通和协作能力,良好的自驱力和学习能力;主动积极,富有热情,能主动积极的思考和推动数据价值的落地。
-
1、建设数字团队,全面管理数据团队,基于集团的大数据基础设施,建立满足业务要求的领域数据集市。 2、梳理数据需求,对接个业务团队以及集团DAAS团对,完善数据支持 3、全面管理数字团队,招聘,培养数字化人才,不断提升集团数字化能力 4、完善现有数据基础架构,管理海外大数据平台 任职要求 1、本科及以上学历,具备实时数据/实时数仓开发相关工作经验,5年以上的互联网数仓建设经验 2、极强的落地实施能力,重视系统设计和开发规范;重视系统运维,能运用工具和流程做好数据质量验证、数据治理和线上运维 3、了解数仓理论知识,熟练Spark、Flink、Hive、ES等数仓工具的使用和调优,掌握JAVA、Python等任何一种编程语言,且具有实际解决复杂问题的能力 4、具备数据库及SQL能力,熟悉MYSQL、POSTGRE等开源数据库,熟悉PRESTO等常见异构查询工具 5、有较强的逻辑分析能力,对数据敏感,对大数据生态技术有强烈热情,愿意尝试新技术领域 6、具备项目管理知识,具备良好的沟通协调能力、较强团队合作精神,工作责任心强,愿意接受挑战,管理5人以上数据团队的能力 7、有数据挖掘、机器学习基础技术优先
-
岗位职责: 1. 把握大数据相关技术的演进发展趋势,负责新技术专项课题研究,大数据产品相关全栈技术的架构设计、 技术选型等。 2. 负责大数据相关数据集成、数据传输、数据存储、数据计算/分析/查询、数据治理、数据安全、隐私计 算等大数据基础设施平台和工具产品的核心代码研发,技术攻关。 3. 协助和支持企业大客户大数据平台架构的设计与搭建、数据分析的模型构建与实现,并指导企业进行数据管理。 4. 负责大型企业集团客户的跨中心,多集群协同计算、调度等复杂架构设计、规划引导和技术咨询工作, 引领客户的大数据技术演进与数字化转型发展。 5. 负责大数据中台体系全栈技术架构优化,代码评审,并根据业务需求持续优化平台性能、稳定性和可靠 性。 任职资格: 1. 计算机、软件工程、数学、信息工程等或相关专业,本科或以上学历,硕士与博士学历优先,有强烈的技术热情与工作责任感。 2. 8 年以上 IT 领域工作经验,6 年以上大数据技术栈开发经验(包括不限HDFS/Hive/Hbase/Spark/Flink/Kafka/Presto 等),具备大型集团型客户,并有跨中心多集群协同计算、 协同调度架构设计规划经验者优先。 3. 具有大数据生态开源的社区贡献或者熟悉大数据组件源码,开源社区 Committer 或 Contributor 优先考虑。 4. 精通元数据、数据质量、数据安全、数据目录和数据管理等数据治理相关标准和方法论,4 年以上大数 据治理专业领域的知识和实战经验。具备数据模型设计、建模和开发经验,熟悉数据流通共享、隐私计 算(多方安全计算)等新兴领域技术方案并具备实战经验。 5. 熟悉数据分析框架与模型算法,熟悉 Python 及 R 等编程语言,熟悉 Postgres、Oracle、MySQL、Hive 等主流数据库,熟悉 Clickhouse、kylin、GP 等多维分析查询引擎。 6. 对最新的大数据相关技术趋势有敏锐的洞察力,具备与时俱进的学习研究能力。对湖仓一体、大数据云 原生、储算分离、数据编织、东数西算、知识计算、分布式协同计算、高性能跨源查询等方面有一定的 了解和研究基础。 7. 具有系统性分析和解决问题的能力,能够理解复杂业务问题,并针对性给出技术方案。
-
岗位职责: 1. 把握大数据相关技术的演进发展趋势,负责新技术专项课题研究,大数据产品相关全栈技术的架构设计、 技术选型等。 2. 负责大数据相关数据集成、数据传输、数据存储、数据计算/分析/查询、数据治理、数据安全、隐私计 算等大数据基础设施平台和工具产品的核心代码研发,技术攻关。 3. 协助和支持企业大客户大数据平台架构的设计与搭建、数据分析的模型构建与实现,并指导企业进行数据管理。 4. 负责大型企业集团客户的跨中心,多集群协同计算、调度等复杂架构设计、规划引导和技术咨询工作, 引领客户的大数据技术演进与数字化转型发展。 5. 负责大数据中台体系全栈技术架构优化,代码评审,并根据业务需求持续优化平台性能、稳定性和可靠 性。 任职资格: 1. 计算机、软件工程、数学、信息工程等或相关专业,本科或以上学历,硕士与博士学历优先,有强烈的技术热情与工作责任感。 2. 8 年以上 IT 领域工作经验,6 年以上大数据技术栈开发经验(包括不限HDFS/Hive/Hbase/Spark/Flink/Kafka/Presto 等),具备大型集团型客户,并有跨中心多集群协同计算、 协同调度架构设计规划经验者优先。 3. 具有大数据生态开源的社区贡献或者熟悉大数据组件源码,开源社区 Committer 或 Contributor 优先考虑。 4. 精通元数据、数据质量、数据安全、数据目录和数据管理等数据治理相关标准和方法论,4 年以上大数 据治理专业领域的知识和实战经验。具备数据模型设计、建模和开发经验,熟悉数据流通共享、隐私计 算(多方安全计算)等新兴领域技术方案并具备实战经验。 5. 熟悉数据分析框架与模型算法,熟悉 Python 及 R 等编程语言,熟悉 Postgres、Oracle、MySQL、Hive 等主流数据库,熟悉 Clickhouse、kylin、GP 等多维分析查询引擎。 6. 对最新的大数据相关技术趋势有敏锐的洞察力,具备与时俱进的学习研究能力。对湖仓一体、大数据云 原生、储算分离、数据编织、东数西算、知识计算、分布式协同计算、高性能跨源查询等方面有一定的 了解和研究基础。 7. 具有系统性分析和解决问题的能力,能够理解复杂业务问题,并针对性给出技术方案。
-
岗位职责: 1. 负责大数据计算、机器学习等场景下,大规模分布式计算、高性能分布式在线实时服务等基础架构的研发建设; 2. 包括但不限于集群资源调度、离线和流式计算、分布式调度、在线预测服务等核心技术框架的研发、调优; 3. 服务公司的广告、个性化推荐以及saas服务等核心业务线。 任职要求: 1. 计算机或相关专业,基础扎实; 2. 对系统底层,包括网络、存储等有浓厚兴趣;对性能分析和调优有经验;对分布式系统、并行计算有浓厚兴趣; 3. 熟悉 Linux 开发环境,有良好的至少一门系统语言 (C/C++、Java、Golang、Rust 等) 开发调试经验; 4. 对开源分布式调度、计算框架,如 K8s、TensorFlow、Spark 等有了解,或者有兴趣深入研究; 5. 思维敏捷,有较强的钻研学习能力和自我驱动力,较好的沟通和团队合作能力。 加分项:熟悉云原生和开源社区优先
-
工作职责:1.负责数据中台的架构设计及优化,从系统角度规划平台结构,为客户提供一致的用户体验;2.保持高度行业敏感性,把握领域发展方向和动态,设计出高可用、高可靠、高可扩展性的平台架构;3.评估客户的定制化需求背后所关联的平台能力,对平台在业务各类场景适应性及扩展性方面提出设计思路,保证平台路线健康性和稳定性;4. 负责数据中台的技术可行性分析及技术选型、技术预研,参与可研、立项、研发实现等环节的技术架构和评审;5.提炼和抽象平台的公共能力,结合行业特点打造可复制且具有竞争力的数据中台解决方案,降低产品协同成本和新产品孵化门槛;6.负责数据治理和数据质量管理工作;7.关注行业市场和行业技术,调研并分析用户和市场需求,赋能业务团队;岗位要求:1.计算机相关专业,本科及以上学历;2.10年以上工作经验,不少于5年的云计算、大数据等领域解决方案和架构设计工作经验,具备技术前瞻性和广阔的领域视野;3.对中台架构、业务架构有足够的敏感度和深入的理解,具有成熟的ToB产品结构化思维、较好的功能抽象提炼、复用意识;4.熟练使用常见开源框架 例如Spring、SpringBoot、SpringCloud,MyBatis、Netty等,熟悉分布式架构;5.精通Hadoop,Hive,Kafka,Spark,Flink等大数据技术技术栈,对数据治理、数据质量、元数据管理、数据安全有深入理解和实践;6.具备目标管理和任务督导能力,良好结果导向型管理意识和丰富的实践经验,重视团队合作,能够协调各方资源跨团队推进项目落地;7.具备优秀的逻辑思维和创新能力,极强自我驱动力、执行力及结果交付能力。
-
岗位职责: 1、负责大数据平台的架构设计、核心代码开发等任务;根据项目要求编写相关技术文档。 2、负责大数据平台的架构评审,代码评审,上线评审;参与数据应用需求、设计、审核和评审。 3、负责核心模块研发,负责大数据平台的搭建,完成系统调试、集成与实施。 4、负责开发大数据开发,如大数据采集产品、调度平台、ETL产品、离线和实时计算平台、多维分析工具、数据模型的研发。 5、负责建立和维护大数据平台技术标准规范,指导开发人员编写代码。 6、跟踪业界前沿技术,应用到实际项目中。负责培训公司大数据开发工程师技能的培训。 任职要求: 1、**本科以上学历,计算机相关专业毕业,5年以上相关工作经验; 2、精通离线和实时数据处理流程,熟练掌握hive、impala/presto/druid、spark、es、clickhouse等其中或多个组件; 3、熟悉大数据技术生态圈,精通大数据技术架构,有大数据平台构建经验; 4、熟悉大数据数仓模型、可视化分析,各种BI算法和产品等; 5、熟练掌握基本的Linux操作系统和某种脚本语言编程(如Shell等); 6、有实际大规模数据(TPB级以上)处理经验优先,有互联网工作经验优先; 7、负责主导大数据ETL、调度系统的研发工作。 8、工作认真、负责、仔细,有良好的团队合作精神,良好的分析能力、沟通技巧。 【工作地址】广州市荔湾区龙溪大道410号(大参林集团总部园区) 【工作时间】8:30-12:00,13:30-18:00 周末双休 【公司福利】 周末双休、免费住宿、班车接送、免费停车位、员工食堂、五险一金、法定假日、带薪年假、进阶培训、年终奖、生日礼物、婚育假期及慰问金、员工内购折扣、员工旅游、接收党组织关系、代办落户广州等专项服务