职位描述
数据治理数据建模数据仓库SqlHadoopFlink
一、岗位职责
实时数据中台建设:
负责基于主流大数据技术栈构建高性能的实时计算平台,涵盖实时数据接入、流式任务开发以及高并发数据的存储与检索,确保数据处理的低延迟与高可用性。
数据治理与血缘分析:
执行全流程的数据治理工作,通过对 SQL 脚本的深度解析,建立并维护全链路的数据血缘关系,保障数据从来源到应用的可追溯性和模型逻辑的严谨性。
二、任职要求
实时中台技术栈:
精通 Flink 实时计算框架,具备流批一体开发经验,熟悉状态管理与算子优化。
熟练操作 Hadoop 生态组件及 Kafka 消息队列,能够处理海量并发数据。
熟悉 Redis 等高速缓存数据库,具备解决高性能读写问题的能力。
掌握 ETL 任务编排工具,具备复杂任务流的设计能力。
数据治理与建模能力:
具备深厚的 SQL 功底,能够编写高效、复杂的查询语句。
熟悉维度建模理论,能够独立完成数据模型的设计与优化。
具备数据血缘分析经验,能够通过自动化工具或脚本解析数据间的依赖关系。
三、综合素质要求
逻辑分析能力:能够快速解析复杂业务逻辑,并将其转化为技术实现路径。
工程化能力:具备良好的代码规范,重视系统的稳定性与可维护性。
持续学习倾向:对大数据与实时计算领域的新技术保持高度关注,并能快速学习与落地。
实时数据中台建设:
负责基于主流大数据技术栈构建高性能的实时计算平台,涵盖实时数据接入、流式任务开发以及高并发数据的存储与检索,确保数据处理的低延迟与高可用性。
数据治理与血缘分析:
执行全流程的数据治理工作,通过对 SQL 脚本的深度解析,建立并维护全链路的数据血缘关系,保障数据从来源到应用的可追溯性和模型逻辑的严谨性。
二、任职要求
实时中台技术栈:
精通 Flink 实时计算框架,具备流批一体开发经验,熟悉状态管理与算子优化。
熟练操作 Hadoop 生态组件及 Kafka 消息队列,能够处理海量并发数据。
熟悉 Redis 等高速缓存数据库,具备解决高性能读写问题的能力。
掌握 ETL 任务编排工具,具备复杂任务流的设计能力。
数据治理与建模能力:
具备深厚的 SQL 功底,能够编写高效、复杂的查询语句。
熟悉维度建模理论,能够独立完成数据模型的设计与优化。
具备数据血缘分析经验,能够通过自动化工具或脚本解析数据间的依赖关系。
三、综合素质要求
逻辑分析能力:能够快速解析复杂业务逻辑,并将其转化为技术实现路径。
工程化能力:具备良好的代码规范,重视系统的稳定性与可维护性。
持续学习倾向:对大数据与实时计算领域的新技术保持高度关注,并能快速学习与落地。
工作地点
武汉江汉区圈外数字创意产业园

公司信息
公司介绍
亚信万联,成立于2018年7月。作为亚信集团的重要组成团队,运用和集成云计算、区块链、物联网、及人工智能等创新技术,协同亚信生态优势资源,提供行业云服务、应用解决方案和场景运营。“产业互联网领航者”是亚信集团的目标。聚合数字化人才和技术,构建和运营万物互联的产业数字化平台,这是我们亚信万联的使命和梦想。欢迎加入我们,这是一个彼此关爱、互助协同,勇于创新、追求卓越的集体,在工作中找到意义,为社会创造价值,成就企业和个人的共同梦想。
工商信息
企业名称 亚信万联科技(南京)有限公司
企业类型 有限责任公司
法人代表 沈岚
经营状态 存续
成立时间 2018-07-09
注册资本 1000万元
认证资质
营业执照信息

更新于 5月18日



