职位描述
数据爬虫反爬虫PythonJavaSQLScrapy多源异构数据采集数据质量监控数据标准化交付
工作职责:
1. 负责多源异构数据(如网页、API、数据库等)的采集方案设计与落地执行。
2. 开发并维护数据采集工具,优化采集效率与稳定性,解决反爬、数据格式不一致等问题。
3. 对采集数据进行清洗、校验与质量监控,确保数据准确性与完整性。
4. 配合业务团队需求,输出标准化的数据交付成果,支撑下游数据分析与应用。
1. 负责多源异构数据(如网页、API、数据库等)的采集方案设计与落地执行。
2. 开发并维护数据采集工具,优化采集效率与稳定性,解决反爬、数据格式不一致等问题。
3. 对采集数据进行清洗、校验与质量监控,确保数据准确性与完整性。
4. 配合业务团队需求,输出标准化的数据交付成果,支撑下游数据分析与应用。
工作地点
湖北省武汉市武昌区八一路299号

认证资质
营业执照信息

更新于 今天




