该职位已失效,看看其他机会吧

数据采集开发工程师

1.9-2.1万
  • 上海徐汇区
  • 3-5年
  • 大专
  • 全职
  • 招5人

职位描述

PythonScrapyPLAYWRIGHTSeleniumBeautifulSoupUIAUTOMATORfrida
岗位职责:
1、负责日常采集需求,设计和开发分布式网络爬虫。
2、负责手机端App采集、各类web端网页内容采集等。
3、解决日常封账号、IP、过验证码等风控问题。
任职要求:
1、2年及以上爬虫相关开发经验,具备web网页端、App端采集经验。
2、熟练掌握Python编程语言及常用采集工具框架,如playwright,selenium、Scrapy、BeautifulSoup
等。
3、熟练掌握PC/Android自动化采集技术,如uiautomator,frida注入等技术。
4、熟悉风控逆向相关技术,国内外验证码破解等;熟悉TLS 指纹、逆向、混淆、JS补环境等技术,以及各类加密算法,譬如(AES、RSA、Base64,Md5、SHA 系列等)。
5、具有良好的沟通能力、学习能力、分析解决问题能力,有较强的责任心、自驱力和成长型思维;
6、有长期规模化采集系统建设经验优先;有computer use/phone use等agent相关数据采集经验优先。
查看全部

工作地点

上海徐汇区西岸艺术中心

职位发布者

梁银焕/人事专员

立即沟通
公司Logo西安笃定信息技术有限公司
西安笃定信息技术有限公司位于西安高新产业开发区,是一家在高新技术应用领域中专业从事移动互联网APP产品开发服务,商业模式创新,用户体验设计,软件定制开发整体解决方案提供商。主要从事企业品牌网站建设(企业官网,商城功能类别的网站开发);APP开发(提供商城类或功能类APP开发);微信端开发(微信商城、微信官网);UI设计(企业级软件的平面设计)等互联网产业。公司拥有一批长期专业从事直销软件开发、软件定制的专业人才,具有雄厚的技术开发实力,全方位满足客户的需求。我们的团队是一支育满活力的强大生力军,热爱工作,热爱生活,具有创新意识的年劝力量,并对于整合相关企业互联网产品有独到见解,兢兢业业,协同互助,尽善、尽美。
公司主页