1、负责爬取HTML页面所需数据，并对数据进行清洗、解析、归档、输出等； 2、负责设计和开发分布式的网络爬虫，数据的采集与爬取、调度、监控、自动化运行等； 3、负责实时监控爬虫的进度和警报反馈，提升爬虫系统稳定性、可扩展性。  4、负责js渲染抓取，反爬虫策略研究，验证码识别等采集支撑服务建设；  5、参与公司业务平台的数据的挖掘和分析，协助进行产品改进。 任职资格 1. 本科以上，计算机或相关专业毕业，扎实的Python基础，熟悉多线程编程环境，熟悉常见开源框架； 2、熟悉基于正则表达式、XPath、CssSelector、beautifulsoup等网页信息解析技术； 3、熟悉Scrapy、feapder等主流爬虫框架框架，能够解决封账号、封IP、验证码、网页限制爬取等问题，且有实际经验； 4、熟悉常见的反爬机制，并对反爬具有一定的应对措施策略且有一定研究，如协议破解、模拟点击等；  5、熟悉代理IP池、Headers认证和Cookie等；

1、扎实的编程技术功底，具备严谨的逻辑思维； 2、熟悉C#编程语言以及WinForm开发； 3、熟悉Web后台开发技术； 4、有网络爬虫开发经验者优先； 5、了解JS/VUE前端开发技术；

工作职责: 1.负责爬虫服务架构设计、研发、爬虫效率的优化，完成数据采集、解析处理、入库及备份等数据日常工作； 2.负责爬虫核心技术研究、开发工作，对反爬虫屏蔽具有相应的应对策略； 任职资格: 1. 本科及以上学历，有2年及以上Python爬虫开发相关经验，理工科优先； 2. 有电商/供应链相关工作经验优先； 3. 熟练掌握python，熟悉mongoDB、redis等数据库，熟练使用linux操作系统； 4. 熟悉正则表达式、xpath等解析工具，了解前端html，css，js等相关知识。 5. 具备一定的js逆向基础。掌握常用爬虫框架(如 requests, scrapy等)，有处理反爬的经验； 6. 具有良好的团队协作精神，思维活跃、逻辑严谨。

岗位职责： 1、负责公司社交工具、内容爬虫的开发与维护； 2、使用Go语言实现公司的相关产品； 3、通过单元测试、自动化以及代码审查等提升优化代码质量； 4、负责代码的重构和升级，保证代码的长期稳定性。 任职要求： 1、大专及以上学历，计算机相关专业； 2、熟悉不同的GOLANG组件或框架； 3、熟练掌握MySQL、mongodb、Redis，熟悉Linux者优先； 4、具备多线程理论知识，有多线程程序设计经验优先； 5、有良好的算法基础和清晰的编程思路，具备良好的团队合作精神； 6、有大型互联网后端服务器系统设计开发经验者优先； 7、有社交工具、内容爬虫相关经验者优先。

岗位职责： 1. 根据研发任务诉求，完成数据的采集、清洗、整合、分析等工作； 2. 协助组织和调配相关数据，支持训练任务，并参与持续调优迭代； 任职要求： 1、统计/计算机/数学等相关专业，有一定的数理统计基础 2、熟悉爬虫和反爬相关技术，有数据采集、加工、分析、处理相关工作经验者优先 3、精通python，熟悉文本处理及统计分析相关技术。 4、良好的逻辑思维能力、较强的数据分析和问题解决能力。 5、工作认真细致、积极主动，有良好的执行力和高度的责任心 6、具备良好的学习能力，优秀的沟通协调能力及团队合作精神。

职位职责： 日常实习：面向全体在校生，为符合岗位要求的同学提供为期3个月及以上的项目实践机会。 1、了解机器人流程自动化或爬虫抓取采集相关工作经验； 2、了解主流机器人流程自动化及爬取技术及爬虫框架工具，如Selenium/Puppeteer/Scrapy/PhantomJS等； 3、熟悉Python语言，具备算法和数据结构能力； 4、熟练使用办公软件，精通Excel常用函数，具备基础数据分析处理能力； 5、优秀的分析、沟通、思考能力，良好的团队合作能力。 职位要求： 1、2025届及以后毕业，本科及以上学历在读，财务管理或计算机相关专业计算机相关专业优先； 2、学习能力强，工作积极主动，有责任心。

职位描述： 在Mentor指导下，进行爬虫及反爬系统开发。 要求： 1、熟练的Python或C++编程能力 2、善于解决开放式问题（提供证明） 3、熟悉网络协议和操作系统基本原理（编码级别） 4、有爬虫相关系统开发经历（加分项） 5、有逆向工程能力或经历（加分项） 6、数理化生等基础专业的同学（加分项）

*该岗位仅向24届本/硕学生开放，需进行线下面试 【主要职责】 1、使用Python、Java等开发语言，编写爬虫程序，对指定的多个网站进行网页抓取、数据提取； 2、负责网页信息抽取、数据清洗、入库、服务化等研发和优化工作； 3、参与开发和设计分布式网络爬虫系统，进行多平台信息的抓取和分析工作； 4、负责线上问题维护及性能调优。 【职位要求】 1、专科或以上学历，计算机、数据科学等相关专业； 2、熟练掌握Python/Java等一到两种开发语言； 3、熟练掌握MySQL数据库设计和开发经验，掌握一定的NOSQL数据库开发经验，诸如MongoDB，Hbase等数据库； 4、具备良好的编程习惯和团队协作能力； 5、具有强烈的责任心和团队合作精神； 6、有APP逆向、拦截分析、JS解密等经验者加分。 福利待遇： 1、工作时间9:00-18:00，午休12:00-13:00，双休，享受法定节假日； 2、实习期间将有专业的导师进行指导，连续实习三个月及以上可提供实习证明； 3、可能转正为正式员工，享受公司福利待遇。

岗位职责 1. 协助进行scrapy爬虫项目的运维工作，以及数据的清洗提取工作。 2. 根据任务需求，协助开发网页端或App端的数据爬取工作。 3. 在指导下解决开发中碰到的问题，并具备良好的沟通能力。 岗位要求 1. 计算机科学，工程或相关学科在读本科生； 2. 了解Python；有SQL和NoSQL技术的经验优先； 3. 了解网络抓取原理、HTTP协议，有了解常见的反爬虫原理者优先； 4. 有使用requests, Scrapy, BS4, xpath, regex等工具进行数据抓取的经验者优先； 5. 了解数据清洗，有使用Pandas进行数据处理的经验者优先； 6. 了解版本控制工具(例如git), 数据库管理系统(Mysql)； 7. 英文基础良好者优先； 8. 愿意学习和在短时间内掌握新的技能和方法；擅长团队合作。 9. 能7月中之前尽快入职者优先，持续时间4个月及以上，每周至少3天到岗，可长期实习者优先

岗位职责： 熟练掌握在linux（centos，ubuntu）下开发。 熟练掌握mysql，postgresql数据库使用，redis使用。 熟练掌握web页面结构分析，使用chrome，firefox进行包括html，css，js等的解析。可以使用web-driver进行页面模拟交互，熟练使用爬虫。 熟练掌握python，django，flask，vue进行数据分析，计算，数据库存取，web页面开发，解析。 熟练掌握docker，git及上述开发，部署，运维。 具备良好的编码习惯，结构清晰，命名规范，逻辑性强，代码冗余率低；数据结构和算法基础扎实, ACM程序设计比赛获奖者优先； 有实际项目经验者优先考虑。 具备良好代码书写规范，团队合作和分享精神。 对创新技术有着非常强烈的求知欲，愿意不断学习新知识，不断更新自己的技术储备。 有扎实的英语功底，并且能够轻松的阅读英文文档。 职位要求： 1.计算机相关专业专科以上学历在校生，研二优先。 2.能够保证三个月及以上的实习时间，每周至少保证四天及以上出勤，欢迎寒暑期实习。 3. 执行力强，懂得要遵守企业价值观和工作纪律。 4. 工作地点在上海市松江区，可以提供住宿或住宿补贴。 5. 投递简历前请仔细阅读上述能力要求，避免浪费彼此时间。

职位描述： 1、参与大型采集系统的架构设计和优化开发（爬虫方向） 2、解决大批量网站的通用性规则提取以及疑难站点的规则抽取问题 3、参与独立爬虫开发和后续数据处理 职位要求： 1、在校大学生，可以全职实习的优先 2、熟练使用 Python, scrapy, xpath,有pandas，numpy等数据处理经验的优先 3、有参与大型爬虫系统设计经验的优先

职位描述： 1、 参与数据采集项目； 2、负责开发爬虫程序，进行大量数据源（网站、APP、API接口）的大规模采集与预处理工作。 3、优化采集程序的算法逻辑和策略，提升爬虫抓取效率和质量。 职位要求： 1、熟悉 Python，具备扎实的代码能力和数据结构算法功底； 2、具有 SQL 基础，熟悉 MySQL 或其它主流关系型数据库； 3、熟悉 HTML 网页结构，熟悉 HTTP 协议，有网页开发经验优先； 4、使用 Requests, Scrapy 或者其它框架开发过爬虫者优先，熟悉 Redis 优先； 5、抗压能力、学习能力强，做事认真负责； 6、***在读研究生、本科生，可全职实习3个月及以上 请同学们在简历中或平台对话框备注可到岗时间及实习时长

岗位描述： 1、理解业务场景，深入挖掘和分析海量数据，得出重要的业务结论； 2、合理地将分析、模型结果展示输出，包括不仅限于分析报告、可视化工具等 ； 3、提供封装成脚本或服务的算法模型，与其他业务模块对接集成。 岗位要求： 1.***本科及以上学历，计算机、数学、统计学等相关专业，有数理统计理论基础； 2. 熟练掌握Python开发语言,熟练掌握数据库及sql,熟悉Numpy,Pandas,Matplotlib,Pytorch,Tensorflow等框架者优先； 3. 熟练掌握机器学习相关模型算法（决策树，多元回归，聚类等）； 4 具备一定的开发能力，熟悉shell命令/爬虫/docker/git等工具者优先； 5. 具备较强的逻辑分析能力及良好的团队合作能力。

你可算来了 我们需要你： 1.画你喜欢、我们喜欢、客户喜欢的画； 2.我们的客户不油腻，皆为互联网企业（腾讯、B站、oppo、vivo等），我们期待你能够输出自己的见解和想法，大胆提出不一样的思路和建议，并且将其落地执行； 3.快速准确理解客户需求，并根据自己的理解和思考构建画面，独立&团队协作完成项目； 4.2024年我们期待能够与更多优秀的插画师一起共事，共同成长。 我们希望你： 1.实力够硬，有自己擅长的画风领域，且能兼顾多种不同风格的绘画，高效率高质量的完成工作； 2.对于画面创意有自己独特的视角和理解，能够根据需求快速输出多种创意方案； 3.具备良好的沟通能力，善于对设计&绘画的表达，具备良好的团队合作精神； 4.对项目有责任心，有主人翁意识，确保自己经手的项目对的起自己的专业能力； 5.身体强壮，骨骼惊奇，具备较强的抗压能力； 6.对行业趋势和咨询保持敏感，熟悉AI工具的使用，时刻保持学习的心态引导自己不断突破； 7.投递简历的同时请附上作品（pdf格式）或链接地址，能认真看到这里再投简历的都是好孩子。 公司福利： 1.公司正经，五险一金也正经 2.护照得有，年度团建，紧张之余放松身心 3.尽可能保证你有充足的睡眠，弹性工作，不打卡 4.加班到深夜独自回家不安全，打车吧，公司报销 5.周末加班调休 6.每年一次升职加薪的机会确保收入与能力成正比 7.年底年终奖，回家开心过年 8.不定期组织下午茶、聚餐，奶茶团 9.宠物友好，可带宠物上班（爬虫猛兽非常人能撸的请谨慎）公司有招财猫一只，欢迎来撸 10.能认真看到这里的，应聘成功率增加25%

工作职责： 1.负责规划、设计和开发爬虫相关系统，进行多平台多终端信息的抓取和分析。 2.基于抓取系统的数据抓取、清洗等设计开发。 3.配合业务线，完成实时数据与离线数据的爬取与对接。 任职要求： 1.精通Python语言\MYSQL，熟练使用常用模块，使用过Flask web框架； 2.能够解决封账号、封IP采集等问题，解决网页抓取、信息抽取等问题 3.熟悉爬虫工作原理，深入了HTTP协议内容 4.至少了解一种主流爬虫框架的架构及原理，有具体工程经验，如 scrapy / pyspider等 5.了解基于Cookie的登录原理，熟悉常用的信息抽取技术，如正则表达式、XPath等 6.对常见各类反爬方式（如账号/IP封禁、验证码、js混淆加密、滑块验证、数据混淆等）有一定解决经验