职位描述
数据爬虫反爬虫PythonJavaSQLScrapy广告场景数据采集数据清洗校验多渠道数据源采集
工作职责
1. 负责互联网广告场景下目标数据的采集方案设计与执行,覆盖网页、APP等多渠道数据源。
2. 搭建并维护数据采集体系,优化采集策略以提升数据抓取效率与准确性。
3. 处理采集过程中的反爬机制,通过技术手段突破访问限制,保障数据获取的稳定性。
4. 对采集数据进行清洗、校验与结构化处理,输出符合业务需求的高质量数据集。
5. 监控数据采集链路的运行状态,及时排查并解决数据缺失、异常等问题。
1. 负责互联网广告场景下目标数据的采集方案设计与执行,覆盖网页、APP等多渠道数据源。
2. 搭建并维护数据采集体系,优化采集策略以提升数据抓取效率与准确性。
3. 处理采集过程中的反爬机制,通过技术手段突破访问限制,保障数据获取的稳定性。
4. 对采集数据进行清洗、校验与结构化处理,输出符合业务需求的高质量数据集。
5. 监控数据采集链路的运行状态,及时排查并解决数据缺失、异常等问题。
工作地点
佛山南海区坚美大厦

认证资质
营业执照信息

更新于 今天



