职位描述
PythonJavaFlumeKafka多源异构数据采集数据采集监控体系搭建数据采集流程优化
工作职责:
1. 负责多源异构数据(结构化/非结构化/半结构化)的采集方案设计与落地,覆盖API接口、日志文件、数据库等多种数据源。
2. 搭建数据采集监控体系,实时跟踪采集任务状态,快速定位并解决数据延迟、丢失等异常问题。
3. 优化采集流程与技术方案,提升数据采集的效率与稳定性,降低系统资源消耗。
4. 与业务团队协作,理解数据需求,输出标准化的数据采集规范与文档。
1. 负责多源异构数据(结构化/非结构化/半结构化)的采集方案设计与落地,覆盖API接口、日志文件、数据库等多种数据源。
2. 搭建数据采集监控体系,实时跟踪采集任务状态,快速定位并解决数据延迟、丢失等异常问题。
3. 优化采集流程与技术方案,提升数据采集的效率与稳定性,降低系统资源消耗。
4. 与业务团队协作,理解数据需求,输出标准化的数据采集规范与文档。
工作地点
南京玄武区御湖国际大厦

认证资质
营业执照信息

更新于 2026-05-20 00:00:00




