• 10k-20k 经验1-3年 / 本科
    移动互联网,社交 / 不需要融资 / 50-150人
    【工作职责】 1、负责网络爬虫系统平台的架构设计与开发,完善和重构现有采集系统及服务(如抓取调度,多样化抓取,页面解析和结构化抽取)、技术选型; 2、负责多平台信息的数据采集、抽取、去重、分类、过滤、质量识别等工作; 3、负责对指定页面数据的分析、抓取及破解,对技术预研难点进行攻关; 4、研究爬虫策略和防屏蔽规则,解决封账号、封IP、验证码、页面跳转等难点攻克,提升网页抓取的效率和质量; 【任职资格】 1、本科及以上学历,1年以上相关经验; 2、熟悉网页解析和网页信息抽取经验,有大型分布式采集框架的开发和部署经验; 3、熟练掌握Python语言,精通Scrapy框架及原理,熟悉爬虫技术的攻防策略和技术方案; 4、精通数据采集技术,熟悉HttpClient/jsoup/XPath/CSS/正则表达式/验证码加密处理/代理池等网页信息抽取技术,熟悉HTTP底层协议; 5、精通各种反爬技术,并能够通过多种应对策略(如代理池、模拟登录、验证码与滑块的处理、浏览器渲染等)来保证数据的持续交付; 6、熟悉网页数据采集原理及技术,熟悉基于Cookie的网站登录原理; 7、有大数据清洗、整合与储存经验的优先; 8、良好的编码能力,工作认真细致踏实,逻辑思维缜密,善于分析,以解决技术难题为乐趣,具备良好的沟通交流能力。 9、强烈的主动性与工作责任心,对所负责工作有owner意识,并能自我驱动不断成长;
  • 10k-20k·13薪 经验3-5年 / 本科
    企业服务 / 上市公司 / 150-500人
    岗位职责: 1、负责数据中心日常业务的管理及相关业务接口工作,包括数据标准制定.数据统一采集.数据清洗存储.数据应用等工作的推进; 2、负责数据中心数仓设计、开发、维护和各类数据业务模型建立及算法的实现; 3、基于大数据中心完成各类统计和开发任务,包括指标体系和元数据平台的建设; 4、负责数据中心各平台应用维护工作,保障数据中心各平台稳定运行,并制定并实施安全策略,保障数据安全; 5、参与数据产品需求评估,负责集团各业态指标的建设; 6、监控已上线的数据产品,并不断优化其性能; 7、负责数据中心数据管理和小组团队能力建设,带领团队数据中心各类技术开发; 8、完成部门领导交办的其他工作任务; 任职要求: 1、本科或以上学历,计算机相关专业,三年以上代码编写工作经验; 2、具有扎实的大数据和数据仓库的理论功底,负责过大数据平台或数据仓库设计开发建设; 3、精通大数据全栈架构,精通一种或多种分布式计算、存储、调度框架或工具(Yarn/Hadoop/Hive/MapReduce/Spark/Hbase/Flink/ES等; 4、熟悉大数据即席查询与分析技术体系,具备数据模型设计、ETL开发、OLAP开发等,有实时数仓建设经验的优先; 5、编程基础扎实,精通java语言,熟悉常见设计模式、应用框架;有大型项目架构设计开发、优化、治理,有开源社区贡献者优先;熟悉Python语言,灵活处理数据脚本开发。 6、有良好的团队沟通和协作能力,良好的自驱力和学习能力;主动积极,富有热情,能主动积极的思考和推动数据价值的落地; 7、工作态度严谨认真,责任心强,有较强的执行能力和团队协作能力,能承受工作压力。
  • 4k-6k 经验在校/应届 / 大专
    信息安全,通讯电子 / 未融资 / 50-150人
    技能要求: 大数据采集,数据清洗,数据分析,MySQL,MongoDB 职位描述 1、梳理业务逻辑,对业务数据进行分析和监控,数据驱动支持业务决策; 3、支持日常数据清洗,数据审核,数据标注; 2、支持团队内部数据模型建设。 职位要求 1、计算机、统计、数学相关专业优先; 2、每周保证4天以上; 3、对数据敏感,能熟练使用SQL,熟悉 Hive; 4、抗压能力强,较强的沟通能力,积极主动,肯思考,具有独当一面的能力; 5、熟练掌握常用办公软件。 6、熟练掌握python、R等常用分析语言中的一种。
  • 7k-10k 经验1-3年 / 大专
    移动互联网,企业服务 / 天使轮 / 50-150人
    1、负责测绘、地理信息内外业数据采集、数据处理、建库、资料扫描归档等工作; 2、主要从事国土项目数据处理,包括三调数据编辑、房地一体内业建库、航测立体测图、数据转换等; 3、无人机航测内业数据处理,外业航线规划、飞行、地面站控制及软硬件调试,航拍摄影。 4、适应不定期/短期出差。 5、测绘工程、地理信息系统或计算机等相关专业毕业,大专以上学历 ,男女不限 任职要求: 1、勤奋笃学、为人谦虚,有较好的自我学习和自主学习能力; 2、注重团队配合,工作细心,认真负责; 3、熟悉GIS平台软件(如ArcGIS、AutoCAD、CASS、ENVI、ERDAS、PCI、MapGIS、SuperMap、PCI等其中一种或多种)、熟悉数据处理及建库流程;
  • 30k-60k 经验3-5年 / 本科
    制造业,新能源汽车制造 / 上市公司 / 2000人以上
    岗位职责: 1、负责导航地图数据编译开发; 2、负责导航地图数据编译数据成果质量; 3、支持高精度数据质量相关应用算法和工具的开发; 4、参与编译器重构优化、需求定制开发和增量数据编译发布开发; 5、负责地图数据编译服务平台设计开发。 任职资格: 1、三年以上地图数据编译开发、地图数据处理或者数据编译相关工作经验; 2、熟练掌握C/C++、Python、Shell等开发语言,具有良好的编码风格,熟悉Linux开发,有较强的工程落地能力、业务分解能力; 3、精通地图数据空间关系处理和地理要素空间分析; 4、熟悉地图数据规格NDS、SHP、MIF、GDF; 5、有高精度地图开源规格(如Lanelet2或OpenDRIVE)经验者优先。
  • 12k-18k 经验3-5年 / 本科
    移动互联网 / 未融资 / 150-500人
    岗位职责 1、参与公司数据仓库项目建设,元数据管理,独立完成业务需求分析整理,分析模块/主题的编码实现; 2、大数据ETL开发和优化、工作流调度设计、存储过程开发、自定义函数开发、报表制作; 3、脚本部署与配置管理,工作流异常处理; 4、支持产品和业务部门的数据查询需求; 任职要求 1.本科或以上学历,计算机相关专业,二年以上ETL/数据挖掘相关工作经验,熟悉ETL的实现机制和任务调度机制。 2、熟悉数据仓库体系知识,并有多年政务行业维度建模经验; 3、熟悉关系型数据库部署及优化工作,包含数据库性能优化、高可用方案; 4、熟悉数据ETL工作,掌握一种以上ETL工具如Datastage、informatica、kettle和华为FusionInsight ELK开发经验,有FusionInsight ELK开发经验优先; 5、熟悉SQL语言,至少掌握一种脚本者优先,如shell、python
  • 12k-18k 经验5-10年 / 本科
    移动互联网 / 未融资 / 150-500人
    工作职责: 1、参与售前环节,深入了解客户的需求,并参与解决方案的编写。 2、对客户的需求进行抽象,设计行业级的数据产品架构。 3、对技术供应商的数据产品进行评估、筛选、整合,形成特定业务场景下的数据产品体系。 4、基于政务大数据的核心需求,设计相应的数据产品和组件,并协调开发团队进行数据产品研发。 5、参与数据治理、数据运营工作的全流程,并设计各种工具来提升工作效率、改善治理和运营效果。 6、深挖现有数据的价值,提出数据驱动政务、数据赋能社会的创新性思路和产品形态。 任职要求: 1、本科及以上学历。 2、5年以上的工作经验,2年以上的数据产品经理工作经验。 3、熟练使用Axure等产品设计工具。 4、熟练使用SQL、Python、R中至少一门数据分析语言。 5、有数据中台产品经验,了解大数据生态圈的各类开源组件,了解国内主流数据产品供应商的产品和组件。 6、有数据可视化项目的经验优先。 7、有数据分析挖掘和数据开发背景的优先。 8、有政务信息化项目和大数据项目经验的优先。 9、有数据治理和数据运营经验的优先。
  • 20k-30k 经验5-10年 / 本科
    电商,消费生活 / 不需要融资 / 500-2000人
    职位描述: 岗位职责: 1、构建全面的、准确的、能反映服务业务线特征的整体指标体系, 并基于业务监控指标体系,及时发现与定位业务问题; 2、通过专题研究,对业务问题进行深入分析,为公司运营决策、产品方向、销售策略提供数据支持; 3、沉淀分析思路与框架,提炼数据产品需求,与相关团队(如技术开发团队、销售团队)协作并推动数据产品的落地; 4、与相关团队协作进行数据建模工作,推动业务部门的数据化运营; 5、与相关团队协作(如数据运营团队)组织数据技术与产品相关的理念、技能、工具的培训; 职位要求 1、统计、数学、信息技术、生物统计相关专业; 2、熟练独立编写数据分析报告,及时发现和分析其中隐含的变化和问题; 3、良好的数据敏感度,能从海量数据提炼核心结果,有丰富的数据分析、挖掘、清洗和建模的经验;具有良好的逻辑思维与系统分析能力,有良好的产品运营能力,能够高效地、基于数据、事实和逻辑分析做出重要性和可行性的判断;
  • 12k-20k 经验3-5年 / 本科
    电商,消费生活 / 不需要融资 / 500-2000人
    岗位职责: 1、构建全面的、准确的、能反映服务业务线特征的整体指标体系, 并基于业务监控指标体系,及时发现与定位业务问题; 2、通过专题研究,对业务问题进行深入分析,为公司运营决策、产品方向、销售策略提供数据支持; 3、沉淀分析思路与框架,提炼数据产品需求,与相关团队(如技术开发团队、销售团队)协作并推动数据产品的落地; 4、与相关团队协作进行数据建模工作,推动业务部门的数据化运营; 5、与相关团队协作(如数据运营团队)组织数据技术与产品相关的理念、技能、工具的培训; 职位要求 1、统计、数学、信息技术、生物统计相关专业; 2、熟练独立编写数据分析报告,及时发现和分析其中隐含的变化和问题; 3、良好的数据敏感度,能从海量数据提炼核心结果,有丰富的数据分析、挖掘、清洗和建模的经验;具有良好的逻辑思维与系统分析能力,有良好的产品运营能力,能够高效地、基于数据、事实和逻辑分析做出重要性和可行性的判断;
  • 8k-15k·13薪 经验5-10年 / 本科
    企业服务,工具,通讯电子 / 不需要融资 / 500-2000人
    岗位职责: 1.负责大数据平台产品全生命周期的工作,包含产品需求分析、产品设计、技术研发跟进、产品测试、产品上线、产品培训推广等环节,保证产品目标达成; 2.熟练运用数据中台方法论,主动深入业务,理解业务逻辑,提供支持业务高效运转的数据解决方案。 3.和技术团队合作,结合最新的大数据技术,完善现有的数据流,完善产品的数据展现结果; 4.负责与研发、设计、测试、运维、售后等部门沟通、协调及推进,确保产品的正常落地; 5.协助运维及售后部门对客户提供支持; 6.与行业内的客户沟通,分析及明确需求细节,将客户的需求转化成可实现的产品设计,并输出PRD、流程图、需求说明书、产品规格等产品文档; 岗位要求: 1、3年以上数据产品(大数据平台/数据湖/BI/算法平台等)的工作经验,负责过业务级或平台级数据产品; 2、熟练的原型及文档编写能力,优秀的沟通能力,一定的项目管理经验,能独立负责一条产品线; 3、熟练使用如:Axure、Visio、Mindmanager、Xmind、PPT、墨刀等各种原型绘制工具; 4、熟悉软件产品生命周期管理,掌握软件项目管理基本方法; 5、具有较强的文档编写和表达能力; 6、出色的沟通、组织、协调和项目管理能力,执行力强,有高度责任心和团队合作精神。 7、本科及以上学历,数学、计算机、金融等相关专业
  • 8k-15k 经验1年以下 / 本科
    企业服务,工具,通讯电子 / 不需要融资 / 500-2000人
    岗位职责: 1.负责大数据平台产品全生命周期的工作,包含产品需求分析、产品设计、技术研发跟进、产品测试、产品上线、产品培训推广等环节,保证产品目标达成; 2.熟练运用数据中台方法论,主动深入业务,理解业务逻辑,提供支持业务高效运转的数据解决方案。 3.和技术团队合作,结合最新的大数据技术,完善现有的数据流,完善产品的数据展现结果; 4.负责与研发、设计、测试、运维、售后等部门沟通、协调及推进,确保产品的正常落地; 5.协助运维及售后部门对客户提供支持; 6.与行业内的客户沟通,分析及明确需求细节,将客户的需求转化成可实现的产品设计,并输出PRD、流程图、需求说明书、产品规格等产品文档; 岗位要求: 1、3年以上数据产品(大数据平台/数据库/BI/算法平台等)的工作经验,负责过业务级或平台级数据产品; 2、熟练的原型及文档编写能力,优秀的沟通能力,一定的项目管理经验,能独立负责一条产品线; 3、熟练使用如:Axure、Visio、Mindmanager、Xmind、PPT、墨刀等各种原型绘制工具; 4、熟悉软件产品生命周期管理,掌握软件项目管理基本方法; 5、具有较强的文档编写和表达能力; 6、出色的沟通、组织、协调和项目管理能力,执行力强,有高度责任心和团队合作精神。 7、本科及以上学历,数学、计算机、金融等相关专业
  • 4k-8k·13薪 经验1-3年 / 本科
    企业服务 / 上市公司 / 150-500人
    岗位职责: 1、熟练应用SQL语句; 2、负责大数据平台运维,支持数仓开发,保障大数据平台及批量调度任务正常运行; 3、与团队紧密合作,更好的支撑数据开发,解决数据开发中遇到的技术问题 4、参与需求评估,在技术实现和性能等方面给出意见与建议; 任职要求: 1、计算机相关专业,本科及以上学历; 2、熟悉Java或Scala开发语言优先; 3、了解Hadoop、Hive、Impala等大数据组件基本原理 4、了解批量处理调度架构,熟悉数据抽取、加工的ETL过程; 5、负责排查处理数据源缺失问题; 6、协调故障业务系统的处理; 良好的沟通表达能力和团队合作精神,并有一定的协调、抗压能力,很好的责任心,较强的问题分析和解决能力。
  • 5k-10k 经验1-3年 / 本科
    金融业 / 未融资 / 50-150人
    1、 对新需求进行研究分析,收集数据源,数据规则研究分析,撰写分析报告; 2、 设计合理的数据表结构、数据加工流程、规则、方法的整体方案; 3、 负责业务条线的管理,日常数据支持、优化,确保业务目标的达成; 4、 关注行业动态,对现有数据进行数据整理、清洗、补充、优化,进行相关的深度挖掘,衍生计算; 5、 审核重要数据的准确性和专业性,确保数据的高质量; 6、 及时响应客户反馈的数据问题,分析问题及提出解决方案; 7、 为公司产品提供业务支持,对公司产品定期提出优化建议。 任职资格 1、***本科及以上学历,金融、经济、会计等相关专业优先;获得证券从业资格证书者优先; 2、有1年以上金融数据分析经验,有国际金融数据分析经验者优先; 3、能够熟练使用Excel等office办公软件,对数据敏锐度高; 4、能熟练运用SQL调用数据、核查数据的准确性; 5、具备快速学习能力,有较强的沟通能力,做事认真、细心、有强烈的责任感。
  • 10k-20k 经验1-3年 / 本科
    数据服务|咨询,IT技术服务|咨询,贸易|进出口 / 天使轮 / 少于15人
    你将参与: 1. 底层数据仓库(ODS、DWD、DIM、DWS、ADS)从 0 到 1 的建设、ETL过程的设计与开发; 2. 数据源的业务探查、数据探查、调研、准确性完整性验证; 3. 从数仓全局视角持续提高数据稳定性、优化数仓架构和模型、数据治理等; 4. 数据仓库日常管理、跑批、维护、监控。 我们希望你: 1. 3-5 年大数据开发工作经验,能力够强也可放宽 2. 计算机基础理论知识过硬,熟练 Java 等至少一门编程语言,了解数据库、Web 服务基本原理; 3. 熟悉 Hadoop(HDFS/MapReduce/Hive/HBase)、Spark、Flink 中的一种或几种,熟悉 MySQL 等关系型数据库或 NoSQL 技术; 4. 熟练掌握 SQL 开发,熟练掌握 SQL 的执行过程和优化方法; 5. 具备数据敏感性和探知欲,专注数据开发、数据资产管理、数据价值发现和转化; 6. 强烈的自我驱动,学习能力强,靠谱。 以下是加分项: 1. 了解数据建模理论,具备一定架构能力,能够完成数仓各层级数据模型设计,具备大型数仓 ETL 开发经验; 2. 代码洁癖、严谨、刨根问底; 3. 有爬虫相关开发经验; 4. 不喜欢卷,崇尚工具与效率、自由与责任。
  • 10k-20k 经验1-3年 / 本科
    数据服务|咨询,IT技术服务|咨询,贸易|进出口 / 天使轮 / 少于15人
    你将参与: 1. 底层数据仓库(ODS、DWD、DIM、DWS、ADS)从 0 到 1 的建设、ETL过程的设计与开发; 2. 数据源的业务探查、数据探查、调研、准确性完整性验证; 3. 从数仓全局视角持续提高数据稳定性、优化数仓架构和模型、数据治理等; 4. 数据仓库日常管理、跑批、维护、监控。 我们希望你: 1. 计算机基础理论知识过硬,熟练 Java 等至少一门编程语言,了解数据库、Web 服务基本原理; 2. 熟悉 Hadoop(HDFS/MapReduce/Hive/HBase)、Spark、Flink 中的一种或几种,熟悉 MySQL 等关系型数据库或 NoSQL 技术; 3. 熟练掌握 SQL 开发,熟练掌握 SQL 的执行过程和优化方法; 4. 具备数据敏感性和探知欲,专注数据开发、数据资产管理、数据价值发现和转化; 5. 强烈的自我驱动,学习能力强,靠谱。 以下是加分项: 1. 了解数据建模理论,具备一定架构能力,能够完成数仓各层级数据模型设计,具备大型数仓 ETL 开发经验; 2. 代码洁癖、严谨、刨根问底; 3. 有爬虫相关开发经验; 4. 不喜欢卷,崇尚工具与效率、自由与责任。