职位描述
数据治理数据中台开发SqlJavaPythonHadoopFlinkSpark
任职要求
具备3年及以上相关岗位从业经验:12、熟悉大数据处理框架,如Hadoop、Spark,熟悉Hive 数据仓库组件及HiveSQL 编写;及分布式存储系统,如HDFS、HBase;3、熟练掌握主流数据库使用,如Oracle、SQLServer、国产数据库等;精通
5
SQL开发,熟悉数据治理各个领域;4、熟悉数据处理和分析流程,能独立进行简单的数据分析和报告撰写;5、具备独立的数据治理开发及问题解决能力,能够负责数据类项目的数据服务T作加断握接入外押居答笑
一、 核心技能要求
1. SQL与数据库优化
- 熟练编写复杂SQL查询,支持多表关联和聚合分析
- 具备SQL性能调优能力,能识别并优化慢查询(如索引设计、避免不必要子查询)
- 了解数据库设计范式(3NF等)
2. 数据架构设计
- 熟悉数据仓库分层架构(ODS → DWD → DWS → ADS)
- 掌握数据模型设计(星型模型、雪花模型、宽表模型)
3. ETL与数据处理
- 具备ETL流程设计经验
- 了解非结构化数据存储方案(HDFS等)
- 能够提取关键元数据(技术元数据、业务元数据)
4. 数据标准、元数据与数据质量管理体系构建
- 数据标准制定,包括字段规范定义、编码规则设计及主数据(MDM)全域标识统一,确保跨部门数据一致性
- 设计元数据管理体系,实现全链路数据血缘追踪、影响分析及元数据自动采集,支撑数据资产化管理
- 建立数据质量评估框架,覆盖准确性、一致性、完整性、时效性等多维度质量规则定义与监控,推动数据治理闭环
5. 数据安全与隐私保护
- 设计敏感数据分级分类体系,实现动态数据掩码、脱敏等应用层防护措施
- 构建数据安全全生命周期管理机制,确保合规性
二、 优先考虑
- 有政务数据治理经验者优先
- 熟悉主流数据治理平台(dataworks等)者优先
- 掌握Python/Shell脚本者优先
5
SQL开发,熟悉数据治理各个领域;4、熟悉数据处理和分析流程,能独立进行简单的数据分析和报告撰写;5、具备独立的数据治理开发及问题解决能力,能够负责数据类项目的数据服务T作加断握接入外押居答笑
一、 核心技能要求
1. SQL与数据库优化
- 熟练编写复杂SQL查询,支持多表关联和聚合分析
- 具备SQL性能调优能力,能识别并优化慢查询(如索引设计、避免不必要子查询)
- 了解数据库设计范式(3NF等)
2. 数据架构设计
- 熟悉数据仓库分层架构(ODS → DWD → DWS → ADS)
- 掌握数据模型设计(星型模型、雪花模型、宽表模型)
3. ETL与数据处理
- 具备ETL流程设计经验
- 了解非结构化数据存储方案(HDFS等)
- 能够提取关键元数据(技术元数据、业务元数据)
4. 数据标准、元数据与数据质量管理体系构建
- 数据标准制定,包括字段规范定义、编码规则设计及主数据(MDM)全域标识统一,确保跨部门数据一致性
- 设计元数据管理体系,实现全链路数据血缘追踪、影响分析及元数据自动采集,支撑数据资产化管理
- 建立数据质量评估框架,覆盖准确性、一致性、完整性、时效性等多维度质量规则定义与监控,推动数据治理闭环
5. 数据安全与隐私保护
- 设计敏感数据分级分类体系,实现动态数据掩码、脱敏等应用层防护措施
- 构建数据安全全生命周期管理机制,确保合规性
二、 优先考虑
- 有政务数据治理经验者优先
- 熟悉主流数据治理平台(dataworks等)者优先
- 掌握Python/Shell脚本者优先







