岗位职责:
1、负责大数据平台架构设计、开发与建设;
2、负责制定大数据平台技术规范及标准,为应用平台的设计、开发与部署提供指导;
3、负责产品数据安全体系建设,编制数据安全技术与管理解决方案,并推进相关方案及工具的落地及应用;
4、调研大数据平台相关新技术并推动落地,且能将其应用于现有系统平台。
任职资格:
1、本科及以上学历,计算机、软件工程等相关专业优先;
2、具备3年及以上数据仓库或数据湖工作经验,支撑过PB级数据存储及治理的经验者优先;
3、精通Java语言,熟练使用SpringBoot、Mybatis、Mysql、Redis、Kafka、Elastic Search等框架与中间件;
4、熟悉Hadoop/Spark平台下的大数据技术,以及HDFS、Hive、Flink、Doris等技术原理,并有相关开发经验;
5、具备数据治理相关经验,了解数据标准制定、数据质量评估指标与方法,能够参与数据治理体系的建设与落地。