-
岗位职责 : 1、数据仓库和数据处理:负责大数据平台的数据仓库、数据治理和数据模型的设计与开发工作。进行日常数据报表开发,理解业务需求,发挥数据价值。 2、数据服务开发:负责离线和实时数据服务的设计、开发、性能调优和效果优化。构建和维护数据管道,处理ETL过程,确保数据质量和准确性。 3、技术研究和应用:参与相关项目的数据需求的实现,设计和编码工作。参与开发过程中相关技术的研究和验证。 4、平台运维和质量管理:负责大数据平台的数据及相关的应用开发、调优及维护。完成日常数据质量的监控,参与大数据平台的日常运维工作。 5、针对数据一致性、准确性、及时性,制定数据管理与治理机制,提升数据易用性、可用性及稳定性; 任职要求 : 1、本科及以上学历,计算机相关专业,3-5年以上数据开发经验; 2、具备至少一个完整的大数据平台和BI系统实施经验,熟知平台建设各环节工作,包括数据采集、数据落地、仓库建设、数据平台搭建、数据应用产品开发 3、熟悉基于推荐系统的数据仓库建设方法论,有数仓模型设计及ETL开发经验;有数据仓库分层架构设定经验者优先; 4、熟悉Hadoop生态相关技术,如Hive、HDFS、Impala、Spark、Presto、Flink、Hudi、Elasticsearch、HBase、Druid、Kylin等,有基于分布式数据存储与计算平台应用开发经验,有较为系统的海量数据性能处理经验; 5、熟悉java、scala、python等语言,熟悉微服务,分布式架构,熟悉springcloud,springboot等技术开发; 6、熟悉数据仓库原理,有离线数仓、实时计算、数据挖掘、ETL、用户画像、数据可视化等设计与开发经验; 7、熟悉MySQL、PostgreSQL、NoSQL等数据库中至少一种数据中心建设方案,可以进行产品的独立部署、高可用架构和性能优化,熟悉开源社区解决方案; 8、熟悉阿里云大数据组件E-MapReduce、Dataworks、MaxCompute和国际AWS的EMR相关数据产品等,市场常见BI产品(superset、FineBI、神策数据)等相关组件者优先; 9、较强的学习能力和技术钻研能力、有自我驱动意识,对数据采集、数据治理、数据开发、数据分析、数据建模、算法等有深刻认识和实战经验。 期待您的加入哟,我们为您准备丰厚福利待遇: 【法定福利】:公司按国家规定购买五险一金+商业保险(员工本人及子女商业保险)+带薪年假; 【节日关怀】:节日福利礼品,以及节日礼金; 【公司福利】: 机场及高铁的贵宾服务(龙腾卡权益)+年度员工健康体检+平安360服务(在线问诊、VIP挂号及重疾紧急入院服务)+年度2次免费洁牙服务 公司提供咖啡、零食、下午茶 员工活动、旅游及团建,不定期举办聚餐、唱K、电竞赛、篮球赛、拓展、旅游、生日Party等 【学习与培训】:助力职业发展与提升,内外训双引擎发力助你高速发展 【晋升机会】:公司设立良好的晋升机制和广阔的发展空间。
-
【岗位职责】 1、负责基于hive、spark、flink技术的大数据平台需求分析、设计及开发工作; 2、负责基于datax、HQL、传统ETL 或基于spark、flink的大数据平台数据抽取、清洗、转换、加工等入仓的开发,优化大数据平台跑批作业; 3、负责使用Dolphinscheduler(海豚调度)批量配置跑批调度任务及调度优化工作; 4、负责使用flink采集并加工kafka、binlog等数据源。 【岗位要求】 1、能熟练使用大数据基础组件,不限于hdfs/kudu、hive、impala、yarn、Tez/spark、flink、hbase、sqoop、flume、datax、elasticsearch、kafka等,熟悉相关架构和原理,有一定的组件性能调优能力; 2、有CDH/CDP平台使用经验,熟悉基于Cloudera Manager的平台使用管理; 3、具有airflow/azkaban/xxl-job/Dolphinscheduler等一种基几种调度工具的开发使用经验,有Dolphinscheduler使用经验优先; 4、具备海量数据采集、加工、分析处理、高并发查询等数据平台的开发设计能力,并有具体的构建海量数据存储、离线/实时数仓等项目实施经验; 5、具有金融行业大数据平台实施项目经验; 6、了解常见的大数据产品和技术路线,如:ClickHouse、Doris、GBase、Kylin、Linkis、Flink CDC、Hudi/Iceberg等更优; 7、学习能力强,适应能力好,有强烈的责任心,主动关注数据发现问题并提出解决方案,具备良好的沟通能力及团队合作精神。
-
岗位职责: 1.负责大数据平台搭建、服务器及BI等系统的基础运维工作; 2.负责制定基于大数据体系的开发流程、开发规范等工作; 3.负责调研各业务部门的数据需求,采集业务需要的各类数据; 4.负责数据仓库模型设计和ETL开发,支撑上层数据应用; 5.负责数据接口开发及对接,整合并优化数据应用流程,实现数据到业务的标准化运行; 6.负责从海量数据中挖掘偏好、构建相关维度的标签体系; 7.负责BI可视化开发,及账号权限运维等工作; 8.负责重点技术攻关,深入研究大数据相关技术和产品,跟进行业发展。 任职要求: 1. ***本科及以上学历,计算机相关专业,4年以上工作经验; 2. 2年以上大数据行业经验,熟悉Hadoop、Hive、spark、flink、kafka、ElasticSearch等常用大数据组件,有实际开发、优化、运维经验; 3. 熟悉Java/Scala语言,有2年以上后台开发经验; 4. 熟悉Oracle、MySQL等关系数据库,精通sql; 5. 熟练使用Linux系统,具备Shell脚本开发能力; 6. 熟练掌握数据仓库理论,有数据模型设计经验,熟练使用ETL工具进行数据抽取,清洗,转换等; 7. BI可视化开发经验。
-
1.大数据开发经验3年+ 2.具备扎实的数据结构和算法基础,能够使用 Java 编程语言进行业务开发 3.熟悉Flink原理与技术应用场景,有业务落地经验,能够熟练使用FllinkSQL和DataStreanAPI,能合理应用状态和算子 4.熟悉 Hadoop\Hive\Kafka\Clickhouse\ElasticSearch\MongoDB 等开源组件且有使用经验,清楚原理和优化 5.熟悉数据参考各类模型理论,了解数仓分层架构、维度模型设计 6.有百TB级别及以上数据处理经验,有电商经验,熟悉用户画像体系者优先,有阿里云产品 DataWorks\Hologres\MaxCompute 使用经验者优先
-
职责描述: 1、负责大数据相关项目产品的实施,包括部署安装、应用探索、性能调测和监控,输出相应报告; 2、负责应用各模块研发阶段从联调、部署到上线发布全流程工作,以及日常运维监控工作; 3、负责对产品进行容器化部署并适配相应的持续集成/部署环境,监控容器运行状态、数据库监控、服务器运行状态等; 4、负责大数据相关集群、组件等搭建运维,故障处理,及时响应等,维护其高可用、高并发、负载均衡等。 任职要求: 1、熟悉各类自动化运维工具,3年以上自动化运维工作经验; 2、熟悉Linux开发环境,熟练使用Shell/Java/Python中的一门脚本语言; 3、熟练掌握Linux基本命令、熟悉TCP/IP协议、基础网络路由协议、熟悉交换机、防火墙等设备基础原理以及用途; 4、对容器化部署有相关应用实践,熟悉docker、及K8S容器编排体系以及周边生态,能熟练搭建管理集群; 5、学习能力强,吃苦耐劳、团队协作性好、责任心强。
-
岗位职责: 1.开展大数据、机器学习相关应用的研究和设计; 2.负责或参与省、市相关科技项目课题工作,并撰写部分或阶段性的研究成果报告; 3.完成单位安排的其他工作; 任职要求: 1. 具有计算机、数学相关专业博士毕业; 2. 熟悉和掌握机器学习等基础理论和专业技术知识,能独立开展研究工作; 3. 善于沟通,具有缜密的逻辑思维能力和较强的问题分析能力; 4. 有良好的沟通能力和团队协作精神。
-
岗位职责: 1.负责公司app、web产品SDK埋点数据采集、业务库数据同步, 2.负责公司数据中台底层数仓搭建、各类主题域表的管理维护,用户画像、标签体系的建设与维护。 3.负责公司数据平台各个应用模块的数仓开发、功能开发、需求迭代。 4.基于业务目标,为业务部门提供技术支撑。 任职要求: 1.本科或以上学历,计算机、统计、软件工程等相关专业毕业; 2.具有2年以上大数据开发经验,熟练掌握SQL语句,具备丰富的HQL性能调优经验; 3.熟悉大数据开发的相关语言,如Java、Python、Scala有大数据开发经验,熟练编写UDF函数; 4.熟悉Hive、flink,Hbase,kudu,impala,Yarn,zookeeper并了解其特性和使用场景优先; 5.熟悉Lambda架构,有离线批处理、实时流计算概念,有实际Flink流计算开发经验优先; 6.熟悉java springboot优先; 7.熟练使用同步采集工具如Sqoop,Flume等。 8.学习能力强,对技术有钻研精神,有解决复杂问题的能力与兴趣;
-
【数据平台开发部】 负责设计和开发数据平台,包括数据仓库、数据集成、ETL工具、数据可视化工具等,以提供高效的数据处理和数据应用能力。具体工作职责: 1、构建和维护数据平台:负责设计、构建和维护公司的数据平台,包括数据仓库、数据湖、数据流水线、数据存储和数据访问层等,以确保数据的可靠性、安全性和易于访问性。 2、开发和维护数据工具和系统:负责开发和维护数据工具和系统,包括数据采集工具、清洗工具、数据分析工具、数据可视化工具等。 3、数据质量管理:负责监控和管理数据的质量,制定和实施数据质量管理策略和流程,以确保数据的质量。 4、广告系统研发:负责开发高效、稳定、安全的广告系统,涉及系统架构设计、软件开发、系统集成、系统优化、系统维护等。 能力要求: 1、10年及以上工作经验,3年以上大数据架构经验,有1-2个大数据平台建设实施成功案例,具有电商行业数据平台数据架构工作经验优先; 2、熟练使用大数据离线处理框架(Hadoop/Hive/Spark)相关技术,有二开或者贡献过开源代码经验优先; 3、熟悉流式计算引擎,对相关框架(Kafka/Storm/SparkStreaming/Flink)熟悉了解,有二开或者贡献过开源代码经验优先; 4、具备大数据平台运维经验,有PB级数据体量运维项目经验优先; 5、熟悉presto、doris、clickhouse、Hudi 数据湖技术,有实际项目经验优先 6、熟悉Linux/Unix系统,精通至少一门编程语言 Java/Python等,有大数据挖掘算法工作经验优先; 7、熟悉数据治理、数据质量管理体系,有实际业务落地经验优先; 8、沟通主动,有较强的工作激情和抗压能力,能组织协同团队开发。
-
岗位职责: 1、数字政府城市大数据平台规划设计; 2、城市大数据平台规划验证及落地实现,包括大数据框架选型、评测、配置、调优; 3、数据存储模型设计、工具产品及应用设计; 4、工具产品及应用开发; 5、数据接入、预处理、清洗、转换、校验、存储等过程脚本开发; 6、城市大数据平台日常运行监控、管理与维护。 任职要求: 1、计算机、数学相关专业本科及以上学历; 2、3年以上架构师、高级研发工程师、运维工作经验; 3、有大数据平台、数据中台、大数据工具产品规划、研发或运维经验; 4、熟练使用HBase、Hive、Spark、Flink、Kafka等主流大数据相关工具、框架,DolphinScheduler等调度系统,有海量数据处理经验; 5、熟练使用mysql、PostgreSQL、Doris、ClickHouse、达梦等数据库; 6、SQL调优经验丰富; 7、精通Python、Java、C++中至少一种编程语言; 8、熟练使用linux、Power designer,Axure,具备较强的文档能力; 9、责任心强、良好的逻辑能力和良好的团队意识。
-
工作地点杭州之江实验室新园区 岗位职责: 1. 负责高性能数据采集组件开发、运维,包括文件、socket端口、数据库等的实时数据采集和处理、监控; 2. 根据业务需求负责对接各类大数据组件,保证数据采集的精确性、高性能; 3. 负责实时数据平台设计与研发工作 岗位要求: 1. 计算机、电子、自动化、人工智能相关专业硕士以上学历; 2. 具备扎实的计算机技术基础,熟练Linux开发环境,熟练掌握JAVA; 3. 具有高并发、高性能系统设计开发经验,能够快速定位大规模集群并行计算问题并解决; 4. 熟悉分布式系统的设计和应用,熟悉分布式、缓存、消息等机制,能够合理应用分布式常用技术解决问题; 5. 具有较强的沟通能力和执行力,工作态度积极主动,有一定的抗压能力及良好的团队合作意识; 6. 掌握Hadoop、Kafka、Spark、Flink、ClickHouse等组件工作原理,有源码优化经验者优先; 7. 了解Mongodb,Docker、Kubernetes的技术架构和原理; 8. 学习能力强,沟通能力强,具有团队意识。
-
工作职责 (1)负责数据仓库模型设计、调度控制、ETL架构设计。 (2)负责数据中台数据治理规划。 任职要求 (1)本科及以上学历,3年以上互联网大数据开发工作经验。 (2)必须掌握数据仓库架构原理,精通维度建模理论,有大型数据仓库从0到1搭建经验。 (3)至少掌握MPP、MR、Spark、Flink其一原理,有实际的项目应用经验。 (4)掌握至少一种ETL工具,精通kettle优先。 (5)精通sql,至少掌握Python,Java,Scala任一开发语言。 (6)有全域数据中台项目经验或数据治理项目经验优先。
-
岗位职责 1.参与微信小店AI产品的规划与落地,深入探索AI技术在客服场景与商达教育场景中的创新应用,挖掘用户对 AI 产品的真实诉求,优化用户体验; 2.结合AI技术,探索智能问答、用户意图识别、经营策略推荐等功能,提升AI在电商客服及商家成长领域价值; 3.高效协调算法、研发、运营、设计等多团队,确保产品规划的落地实施与持续优化。 岗位要求 1.本科及以上学历,一年及以上互联网产品经验,理工科背景优先; 2.对AI行业趋势、大模型技术及应用有深刻理解,对AI产品有热情,有电商类产品经验优先; 3.善于思考,具备较强的用户思维、出色的团队协作与沟通能力,善于引导跨团队/部门合作。
-
岗位职责 1. 使用 Python 设计、开发和维护高性能的后端服务和 API。 2. 参与系统架构设计,优化现有系统的性能和可扩展性。 3. 编写清晰、可维护的代码,并根据需求进行单元测试和集成测试。 4. 与前端工程师、产品经理和其他团队成员紧密合作,推动项目按时交付。 5. 设计和实现 AI 工作流,集成大语言模型和各类 AI 服务到业务系统中。 6. 开发和优化基于 Coze 平台的自动化流程和智能应用。 7. 处理并解决线上及线下系统问题,确保系统的稳定运行。 8. 持续关注后端开发和 AI 技术的最新动向,并推动技术改进和创新。 任职要求 1. 精通 Python,熟悉常见的 Python 开发框架(如 Django、Flask、FastAPI 等)。 2. 熟悉后端开发的相关技术和工具,具备良好的系统设计能力。 3. 具有 AI 工作流设计和开发经验,了解大语言模型 API 集成方案。 4. 有使用 Coze 平台开发智能应用的实践经验,熟悉其工作流设计和功能定制。 5. 熟悉数据库设计和管理,掌握至少一种关系型数据库(如 MySQL)和非关系型数据库(如 Redis、MongoDB)。 6. 熟悉 RESTful API 和 WebSocket 开发,了解常见的认证与授权机制(如 OAuth2、JWT)。 7. 熟悉 Linux 环境下的开发与部署。 8. 具备良好的代码规范意识,熟悉 Git 等版本控制工具。 9. 拥有良好的团队沟通能力,能独立完成任务并愿意分享技术经验。 10. 对 AI 技术有浓厚兴趣,愿意不断学习和实践新技术。
-
职位概述: 我们正在寻找一位富有经验的前端应用工程师,该职位将负责开发、维护和优化我们的前端应用程序,包括但不限于小程序、移动应用和网站。此岗位将与团队紧密合作,确保我们的产品和服务能够满足用户需求,同时保持高质量标准和响应速度。 主要职责: 1. 设计和开发高质量的前端应用程序,包括小程序、移动应用和网站。 2. 与后端团队紧密合作,确保数据安全和系统稳定性。 3. 优化用户体验,提高性能和响应速度。 4. 参与产品设计和开发过程中的用户研究,以提供符合用户需求的前端解决方案。 5. 维护和更新现有前端应用程序,确保其稳定性和安全性。 6. 参与团队的技术讨论和分享,提高团队的技术水平。 职位要求: 1. 计算机科学、软件工程或相关领域的本科及以上学历。 2. 至少3年以上前端开发经验,包括小程序、移动应用和网站的开发经验。 3. 熟练掌握HTML5、CSS3、JavaScript等前端技术。 4. 熟悉小程序开发框架,如uni-app、微信小程序等。 5. 熟悉移动端和PC端响应式布局的设计和开发。 6. 熟悉主流前端库和框架,如React、Vue等。 7. 了解前端性能优化,能够提供有效的性能优化方案。 8. 具备良好的团队协作精神,能够与团队紧密合作,共同解决问题。 9. 具备优秀的问题解决能力,能够在遇到问题时迅速找到解决方案。 加分项: 1. 有小程序、移动应用或网站的设计和开发经验。 2. 有使用过云服务、API和数据交换的经验。 3. 有前端安全和性能优化的实践经验。 4. 有良好的用户研究和交互设计能力。 我们提供具有竞争力的薪酬福利、舒适的工作环境和良好的职业发展机会。我们欢迎所有符合要求的候选人申请此职位,并期待着与您共同创造一个卓越的前端应用程序团队。
-
岗位职责: 1、AI解决方案设计与落地 基于大语言模型(如DeepSeek、LLaMA、Qwen)、知识图谱、RAG(检索增强生成)、模型微调、AI智能体等技术,设计与业务场景深度结合的AI解决方案。 主导或协同团队完成技术方案全流程管理,涵盖需求分析、技术选型、系统开发及交付落地。 深入挖掘客户需求,参与招投标、技术演示及行业案例沉淀,推动AI技术在电商场景的规模化应用。 2、数据处理与模型开发 负责电商领域数据(用户行为、商品信息、交易数据等)的收集、清洗与结构化处理,构建高质量训练数据集。 针对私域电商业务场景(如智能推荐、客服自动化、用户画像分析),制定大模型微调与训练方案,解决模型训练中的技术难题。 搭建高效、可扩展的AI训练系统,推动训练流程的自动化与智能化升级。 职位要求: 1、本科及以上学历,计算机科学、人工智能、信息技术等相关专业优先。 2、独立主导过AI项目全生命周期(需求分析→方案设计→交付落地)。 3、精通大模型提示词、模型微调、知识图谱、RAG、AI智能体等技术。 4、熟悉NLP、CV、ASR、数据分析等AI应用领域,具备实际项目经验。 5、熟练使用主流AI框架(PyTorch、TensorFlow)及开源工具(LangChain)。 我们提供: 参与私域电商领域AI创新应用的机会,直接触达海量用户与业务场景。 具有竞争力的薪资与绩效激励,弹性工作制,完善的培训与晋升通道。


