更新于 3月15日

python爬虫工程师

1-1.3万
  • 南昌青山湖区
  • 1-3年
  • 大专
  • 全职
  • 招1人

职位描述

PythonJavaScriptJava数据挖掘爬虫开发数据清洗电子商务云计算/大数据
【任职要求】
1.大专以上学历,25-30岁,专业不限;
2.具备完整的电商数据采集经验,熟悉行业内(包括海外)主流电商平台的数据结构、API规则及反爬策略;
3.熟悉移动端数据抓取(包括逆向分析、脱壳),熟练掌握Apktool、dex2jar、JD-GUI、Frida、IDA等工具,能独立完成电商APP的数据抓取与分析;
4.具备3年以上大规模爬虫/反爬经验,熟悉HTTP协议、浏览器原理、前端JS逆向、移动端抓包等技术,有大数据量、高并发项目经验者优先;
5.熟悉至少Python、Java、JavaScript其中一种,掌握开源爬虫框架(Scrapy、WebMagic、Nutch、Heritrix等),有自研爬虫框架经验者优先;
6.有丰富的反爬经验,能解决复杂验证码(图片/滑块)、账号限制、IP封锁等问题,并具备实际应对策略;
【岗位职责】
1.负责行业内(包括海外)主流电商平台、短视频平台的数据采集系统开发与优化,确保高效、稳定的数据抓取能力;
2.设计并优化反爬虫策略,提升突破验证码、IP封锁、行为检测等防护机制的能力,提升爬虫稳定性;
3.持续跟进最新爬虫技术、反爬策略及电商数据生态,优化爬虫框架,提升系统可维护性与可扩展性。

工作地点

南昌青山湖区云中城-A座云中城A座22楼昀晗贸易

认证资质

营业执照信息

职位发布者

刘先生/招聘主管

刚刚活跃
立即沟通
公司Logo义乌市昀晗贸易有限公司江西分公司
我们是一家综合型电商公司,成立于2016年,现团队成员1000人左右。公司总部位于浙江义乌CBD商业中心-万达写字楼,运维团队办公面积近2000平,义乌仓储面积近20000平,同时设有江西分公司,办公面积1700平,南昌仓储面积12000平。涉及平台有:(淘宝、天猫、拼多多,速卖通、亚马逊、虾皮、wish)等国内外电商平台,经营店铺数近百家。销售产品包含:居家日用、收纳整理、家装主材、基础建材、五金工具、厨房烹饪、餐饮具等品类,在售商品SKU数量超3万+。
公司主页