职位描述
数据爬虫反爬虫PythonJavaScrapyrequests反反爬机制搭建数据质量校验多源数据采集
工作职责
1. 负责广告营销场景下的多源数据采集方案设计与落地,包括网站、APP、API等渠道的数据抓取。
2. 搭建反反爬机制与IP代理池,解决高防网站的采集障碍,保障数据获取的稳定性与合规性。
3. 建立数据质量校验体系,对采集数据进行清洗、去重与格式标准化,输出可用的结构化数据。
4. 监控采集任务运行状态,优化采集效率与资源占用,定期输出数据采集报告。
1. 负责广告营销场景下的多源数据采集方案设计与落地,包括网站、APP、API等渠道的数据抓取。
2. 搭建反反爬机制与IP代理池,解决高防网站的采集障碍,保障数据获取的稳定性与合规性。
3. 建立数据质量校验体系,对采集数据进行清洗、去重与格式标准化,输出可用的结构化数据。
4. 监控采集任务运行状态,优化采集效率与资源占用,定期输出数据采集报告。
工作地点
上海杨浦区复华商业大厦

工作地点

公司信息
成都江柏泉科技有限公司
未融资 · 20-99人 · 互联网广告/营销
已审核
工商信息
企业名称 成都江柏泉科技有限公司
企业类型 有限责任公司(自然人独资)
法人代表 文熙
经营状态 存续
成立时间 2025-11-28
注册资本 50万元
认证资质
营业执照信息
相似职位
查看更多数据采集(可实习岗位)

中专/中技
数据爬虫
数据埋点
数据抽取
反爬虫
工业自动化/机器人
电气机械/电力设备
专用设备制造
半导体/芯片
寒暑假
银行资料采集员(无经验可带薪培训-非电销)
1.2-1.6万 招商银行股份有限公司信用卡中心
大专
银行
带薪培训
就近分配
六险一金
节假日福利
各种团建活动
新人培训
入职培训
新员工带薪
员工带薪培训
一对一带教
带团队
签订劳动合同
每月生日会
定期团建
各种节日
数据采集工程师
8000-15000元 沈阳东硕信息技术有限公司
本科
3-5年
Modbus
OPC
PROFINET
SCADA
PLC
数据采集
化工
工业自动化/机器人
钢铁/有色金属冶炼及加工
PLC系统数据采集工程师
7000-12000元 沈阳东硕信息技术有限公司
本科
3-5年
数据采集方案设计
Modbus
PROFINET
OPC UA
PLC调试
MES系统
计算机软件
钢铁/有色金属冶炼及加工
工业自动化/机器人
化工
最新招聘
热门城市
热门职位
热门公司
义乌市小蛋蛋文化传媒有限公司
永德县九花百货店(个人独资)
北京万恒智通再生资源科技有限公司
徐州一方物流有限公司
盱眙书得电子商务有限公司
邯郸市永年区后马营盛欣水泥彩瓦厂
珠海市澳天置业发展有限公司
临沂文升食品有限公司
常州新笛文化传媒有限公司
四川鑫中辉建筑工程有限公司
昆玉市招聘
茂名招聘
泉州招聘
湘西招聘
克孜勒苏柯尔克孜招聘
铁岭招聘
泰安招聘
合肥招聘
塔城招聘
鹰潭招聘
七台河招聘
吉安招聘
白城招聘
洛阳招聘
广元招聘
张家口招聘
聊城招聘
福州招聘
台湾招聘
南充招聘

更新于 5月7日



