职位描述
数据抽取PythonJavaSqoopFlume数据采集监控搭建采集流程优化数据采集规范制定
工作职责:
1. 负责多源异构数据(结构化/非结构化)的采集方案设计与落地,覆盖API接口、数据库、日志文件等场景。
2. 搭建数据采集监控体系,实时跟踪采集任务状态,快速定位并解决数据丢失、延迟等异常问题。
3. 优化采集流程与算法,提升数据获取效率与质量,降低系统资源消耗。
4. 与业务团队协作,明确数据需求,输出标准化的数据采集规范与文档。
1. 负责多源异构数据(结构化/非结构化)的采集方案设计与落地,覆盖API接口、数据库、日志文件等场景。
2. 搭建数据采集监控体系,实时跟踪采集任务状态,快速定位并解决数据丢失、延迟等异常问题。
3. 优化采集流程与算法,提升数据获取效率与质量,降低系统资源消耗。
4. 与业务团队协作,明确数据需求,输出标准化的数据采集规范与文档。
工作地点
宁波鄞州区河清南路百丈东路口304

认证资质
营业执照信息

更新于 今天




