岗位职责：
1. 负责数据汇聚与同步开发，设计并实现与上级政府平台及市级政府数据共享平台的数据同步机制。
2. 负责ETL数据清洗规则库建设，设计、开发和管理。
3. 负责数据质量评估体系构建，建立数据质量评估模型，实现数据质量预警机制。
5. 负责ETL流程设计与优化，设计高效的数据抽取、转换、加载（ETL）流程，优化数据处理性能。
6. 负责数据接口开发与维护，开发与维护数据接口，处理接口对接、数据格式转换、异常处理等工作。
7. 负责数据同步监控与运维，建立数据同步状态监控机制，及时发现并处理数据同步异常，编写运维文档。
8. 负责技术方案设计与文档编写，参与数据管理子系统的技术方案设计，编写ETL开发规范、数据清洗规则文档、接口对接文档等技术文档。
9. 负责数据问题排查与优化，分析并解决数据处理过程中的性能瓶颈、数据质量问题，持续优化ETL流程。
任职要求：
1、熟练使用Apache NiFi或Kettle（至少一种），有5年以上ETL项目经验
2、精通SQL，熟悉MySQL、Oracle、SQL Server等主流数据库
3、有多数据源集成经验，熟悉WebService、RESTful API接口对接
4、 掌握数据清洗、数据质量管理方法
5、熟悉Linux系统，能编写Shell脚本；熟悉Elasticsearch、消息队列（Kafka/RabbitMQ）
6、有数据仓库建模经验；会Python或Java编程