数据采集

工作职责
1. 负责广告营销场景下的多源数据采集方案设计与落地，包括网站、APP、API等渠道的数据抓取。
2. 搭建反反爬机制与IP代理池，解决高防网站的采集障碍，保障数据获取的稳定性与合规性。
3. 建立数据质量校验体系，对采集数据进行清洗、去重与格式标准化，输出可用的结构化数据。
4. 监控采集任务运行状态，优化采集效率与资源占用，定期输出数据采集报告。