• 30k-40k·13薪 经验3-5年 / 本科
    文娱|内容,广告营销 / 未融资 / 500-2000人
    职位描述 1、熟悉Scrapy,有丰富的爬虫及反爬虫相关经验 2、负责复杂验证码的破解技术调研和实现,负责爬虫技术的调研和破解 3、研究反爬机制,处理抓包,下载等环节的疑难问题 4、负责数据下载、抽取、清洗、分类、聚类等工作 5、负责爬虫核心算法的优化、充分利用资源 职位要求(该岗位须驻外) 1、3年爬虫经验以上 2、大规模网络内容采集系统项目经验 3、对网页数据抓取、信息提取、去重、清洗有丰富经验 4、精通爬虫相关语言,python或nodej等 5、对分布式领域有一定了解,具有开发、调试或维护的相关经验优先
  • 15k-22k·14薪 经验3-5年 / 大专
    移动互联网 / 不需要融资 / 500-2000人
    "1、负责网络爬虫系统的设计与开发工作; 2、负责多平台的信息抓取、解析等研发与优化工作; 3、负责抓取信息的深度提取与挖掘,对全量数据有深刻理解及方案; 4、负责抓取技术难点攻克 " "1、大专学历及以上,计算相关相关专业,有扎实的计算机基础知识和编程功底,3年及以上开发工作经验; 2、熟练网页抓取原理、技术及正则表达式,熟练从结构化和非结构化的数据中获取信息; 3、熟练使用python技术; 4、有较丰富的分布式爬虫系统开发经验,熟悉HTML、JavaScript等前端技术; 5、精通scrapy、scrapy-redis等开源框架,对scrapy-redis有深入了解; 6、熟练使用django、flask等后台服务框架 7、熟悉反爬虫、验证码识别技术者优先; 8、熟悉mq、kafka、docker、ES技术者优先; 9、熟练使用mysql、mongoDB等数据库"
  • 15k-25k 经验3-5年 / 本科
    企业服务,人工智能 / 未融资 / 15-50人
    网络信息安全,爬虫,攻防,全栈技术工程师
  • 15k-18k 经验3-5年 / 大专
    社交 / 不需要融资 / 50-150人
    一、任职要求(并不表示部分条件未达到则一定不会聘用): 1.熟练使用Python标准库和流行的第三方库,精通Python语言; 2.熟悉以下主流服务器端开源系统或者其中一部分:Redis/MongoDB/RabbitMQ/Memcache/Nginx; 3.熟悉JAVA或想转型Python者优先; 4.熟悉RESTful web service规范、熟悉面向对象的设计思想; 5.熟悉mysql的各种存储引擎,熟悉索引工作原理,有丰富的mysql性能优化经验; 6.重视Code Review,知道良好的编程习惯的标准,对代码和设计质量有严格要求; 7.熟悉Tornado/Flask/Gevent/Django等常用开发框架,至少有其中一个的最佳实践或深入研究过其源码及机制; 二、岗位职责 1.开发自动点击谷歌浏览器插件按钮; 2.收集用户信息;
  • 25k-30k 经验3-5年 / 大专
    社交 / 不需要融资 / 50-150人
    一、任职要求(并不表示部分条件未达到则一定不会聘用): 1.熟练使用Python标准库和流行的第三方库,精通Python语言; 2.熟悉以下主流服务器端开源系统或者其中一部分:Redis/MongoDB/RabbitMQ/Memcache/Nginx; 3.熟悉JAVA或想转型Python者优先; 4.熟悉RESTful web service规范、熟悉面向对象的设计思想; 5.熟悉mysql的各种存储引擎,熟悉索引工作原理,有丰富的mysql性能优化经验; 6.重视Code Review,知道良好的编程习惯的标准,对代码和设计质量有严格要求; 7.熟悉Tornado/Flask/Gevent/Django等常用开发框架,至少有其中一个的最佳实践或深入研究过其源码及机制; 二、岗位职责 1.开发自动点击谷歌浏览器插件按钮; 2.收集用户信息;
  • 8k-12k·13薪 经验3-5年 / 大专
    企业服务,数据服务 / 不需要融资 / 15-50人
    岗位职责: 1、负责分布式网络爬虫系统的架构设计与开发,不断优化爬虫策略和破解各种反爬措施; 2、负责爬虫系统相关的管理、监控、告警及可视化功能设计与开发,实时管理和掌握爬虫系统运行状态; 3、负责网页数据的采集、抽取、清洗、消重、入库及分析等工作; 4、负责与产品经理、UI、前后端工程师等紧密沟通协作,积极推动爬虫系统相关开发及优化工作,保障爬虫系统的稳定可靠运行。 任职要求: 1、具有大专或以上学历,2年以上爬虫系统开发经验,有分布式爬虫相关经验; 2、精通python语言和常见的开发框架,熟悉Scrapy、Pyspider、Webmagic、Nutch、Selenium等主流爬虫相关框架,熟悉代理技术及其应用; 3、熟悉常见的反爬策略,熟悉JS防护、混淆、逆向分析等技能,熟悉各种浏览器检测/反检测手段; 4、熟练使用Re、XPath、BeautifulSoup、PyQuery等解析提取数据; 5、熟悉Django、Flask等任一种的Python Web开发框架; 7、熟悉MySQL、MongoDB、Redis、Elasticsearch等数据库; 8、了解Linux操作系统,熟练使用Linux常用命令,熟悉docker容器的运用; 9、对数据挖掘分析、自然语言处理、深度学习、AI大模型等相关技术有一定认识和经验的优先; 10、优秀的自驱能力、高度的责任心、积极的合作精神,良好的沟通能力、问题定位分析能力。 PS:周末双休,节假日正常放假,我们追求高效工作,而非无意义的加班内卷。
  • 9k-10k 经验3-5年 / 大专
    企业服务 / 未融资 / 50-150人
    ▋工作年限 5年工作经验以上 ▋年龄要求 28-35之间 ▋学历要求 大专及本科以上 ▋岗位要求 1.熟练使用Python语言和PyQt界面开发,能够独立解决问题 2.有数据采集、手机端/PC端/WEB网页浏览器自动化经验 3.熟悉HTTP(s)、WEBSOCKET(s)协议,熟悉抓包分析数据 4.有Playwright、Airtest、Appium、Selenium、Uiautomation、UIAutomator2、PyAutoGUI其中一个框架的使用经验 5.熟练使用MySQL/SqlServer/Oracle/MangoDB任一数据库,和RestAPI开发 6.对Windows/Linux/Android操作系统的基本操作 7.能够独立调试代码和分析测试失败的原因,具备解决复杂问题的能力 8.与开发团队、产品团队及其他相关方有效沟通,确保测试需求和结果被正确理解 9.软件开发和测试技术不断更新,保持学习新工具和技术的能力非常重要 ▋岗位职责 负责甲方的推广引流软件开发(用户采集、拉人进群、建立社群、自动推广) ▋试用期 3个月
  • 10k-18k·14薪 经验不限 / 本科
    游戏 / 不需要融资 / 500-2000人
    任职要求: 1. 本科及以上学历 2. 有Python爬虫相关经验,有web端JS逆向经验,熟练使用Scrapy框架 3. 熟悉HTML、XPath、正则表达式、AJAX、HTTP协议等 4. 熟悉MySQL、NoSQL等,了解Git版本管理工具 5. 熟悉分布式爬虫以及各种抓包工具 6. 熟悉消息队列,如rabbitmq,kafka等 加分项: 1. 有GUI工具pyqt开发经验 2. 有app逆向开发经验,熟悉ast,frida,objection,能够独立逆向小程序,app等 3. 有爬虫平台相关开发经验,如xxljob等
  • 4k-7k 经验在校/应届 / 大专
    数据服务 / 不需要融资 / 少于15人
    岗位职责: 熟练掌握在linux(centos,ubuntu)下开发。 熟练掌握mysql,postgresql数据库使用,redis使用。 熟练掌握web页面结构分析,使用chrome,firefox进行包括html,css,js等的解析。可以使用web-driver进行页面模拟交互,熟练使用爬虫。 熟练掌握python,django,flask,vue进行数据分析,计算,数据库存取,web页面开发,解析。 熟练掌握docker,git及上述开发,部署,运维。 具备良好的编码习惯,结构清晰,命名规范,逻辑性强,代码冗余率低;数据结构和算法基础扎实, ACM程序设计比赛获奖者优先; 有实际项目经验者优先考虑。 具备良好代码书写规范,团队合作和分享精神。 对创新技术有着非常强烈的求知欲,愿意不断学习新知识,不断更新自己的技术储备。 有扎实的英语功底,并且能够轻松的阅读英文文档。 职位要求: 1.计算机相关专业专科以上学历在校生,研二优先。 2.能够保证三个月及以上的实习时间,每周至少保证四天及以上出勤,欢迎寒暑期实习。 3. 执行力强,懂得要遵守企业价值观和工作纪律。 4. 工作地点在上海市松江区,可以提供住宿或住宿补贴。 5. 投递简历前请仔细阅读上述能力要求,避免浪费彼此时间。
  • 7k-9k 经验5-10年 / 大专
    电商 / A轮 / 少于15人
    app逆向,网站爬虫,app爬虫。看个人工作经验。
  • 7k-14k 经验1-3年 / 不限
    企业服务,工具 / 天使轮 / 15-50人
    特别提醒:人不在深圳的不要随便投递简历。谢谢。 1、负责业务端数据稳定抓取、存储; 2、沟通产品需求,建立机器学习模型并不断优化 3、能够独立完成系统模块开发; 4 年及以上实际开发经验,精通python语言开发,同时掌握其他语言优先; 5、精通爬虫和反爬技术,精通http底层协议,linux基本命令;精通深度抓取、动态网页技术抓取、浏览器模拟抓取、APP抓取等技术; 6、熟练使用mysql数据库、ES集群、redis、js逆向、正则提取; 7、熟悉机器学习,了解深度学习框架,有实际开发者优先; 8、有开发爬虫框架经验优先,熟悉反爬虫、验证码识别技术者优先; 9、逻辑清晰,专注技术有追求有热情,良好的团队合作精神及学习能力;
  • 12k-24k 经验在校/应届 / 本科
    软件开发 / 未融资 / 150-500人
    工作职责: 1、独立负责网络爬虫系统的设计与开发; 2、负责和业务沟通抓取需求,满足业务的发展需要; 3、负责大数据产品所需网站的信息抓取、解析、清洗等研发与优化工作; 任职要求: 1. 计算机或相关专业,本科及以上学历; 2. 熟悉软件工程,熟悉常用数据结构和算法; 3. 熟悉Python语言 、掌握爬虫框架scrapy , 熟悉分布式爬虫管理框架Gerapy, 爬虫管理scrapyd ,分布式爬虫scrapy-redis 4. 熟悉Linux操作系统以及shell脚本; 5. 熟悉HTML,JavaScript,xpath,css selector,熟悉HTTP协议; 6. 英语水平达到CET6或以上; 7. 工作细心,认真负责,具备较强的学习能力; 8.了解Git版本管理工具。
  • 10k-20k 经验5-10年 / 本科
    金融 / 天使轮 / 少于15人
    岗位职责: 1、与业务团队沟通,明确爬虫项目的目标和需求,确定要抓取的数据范围、格式和用途,为产品业务提供数据支持。 2、编写高效、稳定的 Python 爬虫代码,挖掘并整合外部第三方数据,并对抓取到的数据进行的清洗和整理,增强数据分析的广度与深度; 3、优化爬虫程序的性能,提高抓取速度和效率; 4、建立和完善公司内部的知识图谱体系,提高数据的可访问性和价值。 任职资格: 1、**本科及以上,数学、统计学、计算机科学等相关专业优先,拥有5年以上金融或科技行业的相关工作经验。 2、精通python语言,具备扎实的编程功底,具有良好的程序设计能力; 3、精通爬虫原理,精通Scrapy、pyspider等主流爬虫框架框架;具有RPA项目经验; 4、精通常用的反扒技术,对互联网各种类型数据交互模式熟悉,知道如何处理需登录网站、动态网页等各种情况下的数据采集方法。 5、熟悉常见ip限制、滑块、UA限制、验证码反爬、登录限制、headers认证和cookie限制等反爬套路及破解方法,且有实际经验; 6、熟练使用MySQL、MongoDB,熟悉Hadoop、ElasticSearch等技术; 7、熟练使用Pandas, NumPy等进行数据清洗、处理,提供数据服务以及数据管理; 8、能独立完成爬虫系统的搭建和运维。
  • 12k-20k 经验1-3年 / 本科
    教育 / 未融资 / 150-500人
    Python科目现在也需要一名直播运营,需要懂IT 如果你: 喜欢与人沟通, 热爱讲师工作, 在大厂996干够了,拥有出色的Python技能及沟通能力; 渴望丰厚的奖金收入,专注自己的目标并坚持不懈; 具有良好的团队合作意识并具有强烈的责任感与客户服务意识;; 想要有更宽阔的长期职业发展; 欢迎加入我们! 1、熟悉分布式系统、多线程,精通scrapy、selenium框架以及原理 2、熟悉TCP/IP、HTTP、XPath、beautifulsoup4、正则表达式等相关技术 3、精通爬虫和反爬技术、精通JS逆向、APP逆向,精通http底层协议;精通深度抓取、动态网页技术抓取、浏览器模拟抓取、APP抓取等技术 4、沟通表达佳,有授课经验 有博客撰写习惯或者在企业内外部有技术分享经验者优先
  • 11k-15k 经验3-5年 / 本科
    企业服务 / 不需要融资 / 15-50人
    职位描述 1、负责攻克高难度的反爬,诸如人机识别、JS逆向、Android逆向等 2、负责开发及维护超大规模站点,深入挖掘站点有价值的数据 3、参与爬虫通用组件、工具、系统的设计开发 职位要求 1、3年以上爬虫工作经验 2、具备丰富的Python爬虫经验,熟悉JS逆向、Android逆向,有攻克高难度站点经验 3、具备扎实的技术基础,如常见的网络协议、Linux操作系统、常用数据库等,可以独立分析解决新出现的技术问题 4、缜密的逻辑思维能力,热爱技术,喜欢钻研,注重代码质量 5、对前后端开发熟悉加分