职位描述
PythonJavaFlumeKafka数据采集方案设计ETL流程数据质量监控
工作职责:
1. 负责业务系统(如数据库、日志、API接口)的数据采集方案设计与落地,保障数据的完整性与时效性。
2. 搭建并维护数据采集链路,监控数据质量,及时处理采集过程中的异常问题(如数据丢失、格式错误)。
3. 优化采集策略,提升数据传输效率,降低系统资源消耗。
4. 与数据仓库、业务分析团队协作,明确数据需求,输出标准化的采集数据。
1. 负责业务系统(如数据库、日志、API接口)的数据采集方案设计与落地,保障数据的完整性与时效性。
2. 搭建并维护数据采集链路,监控数据质量,及时处理采集过程中的异常问题(如数据丢失、格式错误)。
3. 优化采集策略,提升数据传输效率,降低系统资源消耗。
4. 与数据仓库、业务分析团队协作,明确数据需求,输出标准化的采集数据。
工作地点
重庆合川区合川城投大厦

认证资质
营业执照信息

更新于 今天




