该职位已失效,看看其他机会吧

大数据开发工程师

1.2-1.8万
  • 南昌东湖区
  • 3-5年
  • 本科
  • 全职
  • 招1人

职位描述

数据治理数据架构Spark
岗位职责:
1. 负责大数据平台(Hadoop/Spark/Flink等)的搭建、维护和优化,保障数据系统的稳定性与扩展性。
2. 参与企业级数据治理体系建设,包括但不限于:
- 制定并落地数据标准(命名规范、口径一致性等);
- 完善元数据管理(数据血缘、资产目录、业务属性标签);
- 设计数据质量监控规则(完整性、准确性、时效性),推动问题闭环;
- 配合完成数据安全分级分类、权限管控及脱敏方案。
3. 设计与开发数据仓库(ODS/DWD/DWS/ADS),构建高复用、易追溯的数据模型与ETL流程。
4. 开发实时/离线数据处理管道(Data Pipeline),确保数据高效、准确触达业务端。
5. 协同业务部门梳理关键数据资产,推动数据治理成果在业务场景中的实际应用。
任职要求:
1.本科及以上学历,计算机、数据科学相关专业,3年以上大数据开发经验。
2. 精通Hadoop生态技术(Hive/Spark/Flink),熟悉性能调优及资源管理。
3.熟练使用SQL和至少一门编程语言(Java/Scala/Python),能编写高效ETL代码。
4.熟悉数据治理方法论,有数据质量、元数据管理、数据血缘等工具实战经验。
5.了解数据安全规范(GDPR、个人信息保护法等)及相关技术实现(加密/脱敏)。
6. 主导或深度参与过企业数据治理项目,熟悉DCMM等评估体系。
7.熟悉数据建模工具或数据治理平台。
8.有数据资产盘点、数据价值评估等经验者优先。
9.具备较强的跨团队协作能力,能推动治理规范在业务部门落地。
10.对数据敏感,注重细节,有较强的责任心和流程规范意识。
查看全部

工作地点

南昌东湖区江西省生态环境厅

认证资质

营业执照信息

职位发布者

许女士/HRBP

昨日活跃
立即沟通
公司Logo北京嘉诚瑞杰信息技术有限公司
北京嘉诚瑞杰信息技术有限公司(简称嘉诚瑞杰)是长春嘉诚信息技术股份有限公司的全资子公司。嘉诚信息以软件和信息技术服务为主营业务,创始于1995年,于2015年10月28日成功登陆新三板,总部设在长春。二十多年间,嘉诚信息自主研发了数十项高科技产品,先后为党委、政府、检法司监、商务、交通、金融、卫生医疗、制造企业等多个领域的客户提供了软件开发、系统集成以及网络安全等全方位专业服务。嘉诚信息拥有软件产品著作权100余项,在30余行业成功应用,取得良好口碑。在大数据监督方面,嘉诚信息走向全国的拳头产品——“公益诉讼大数据应用平台”,以互联网+、大数据和人工智能、云计算等技术破解业务难题,全国首创,技术领先。2016年由吉林省长春市人民检察院牵头进行试点建设,目前已经在吉林省全省推广。在四川、甘肃、内蒙、江苏、安徽、辽宁、福建、山西等省份签约且建设成果突出。在黑龙江,重庆,陕西等省开展试点,效果显著。公益诉讼大数据应用平台得到行业专家和客户的高度认可。在网络安全服务方面,嘉诚信息能够向客户提供网络安全全生命周期及等保全流程的安全服务。现拥有多名通过国际、国内、厂家高级认证的高端安全技术人才及国内一线白帽子。嘉诚信息具有信息安全等级保护测评及其他网络安全相关资质,连续两年被评为“全国网络安全等级保护测评机构先进单位”,在全国CNAS能力验证及攻防比赛上,连续四年取得省内第一、东北区第一、国内领先的好成绩。在司法行政领域,嘉诚率先推出综合数据研判平台,以预测、预警、预防+研判为核心目标,通过对监狱、戒毒、社矫、监管各行业数据相关性分析、因果性分析与模型处理,实现为应用者提供决策输出,真正实现工作聚焦、应用提升、研判输出。今日嘉诚,众志成城,致力于成为客户业务创新、数字化转型最可信赖的合作伙伴。嘉诚信息,正在成为中国政务软件信息化的核心力量!
公司主页