岗位职责:
1.负责公司大数据平台的架构设计与技术选型,参与数据库、计算引擎、存储方案等技术决策;
2.参与数据治理体系建设,推动元数据管理、数据质量管理、数据资产管理等能力的产品化落地;
3.负责数据治理相关技术方案的设计、实施与落地,优化数据标准,提升数据质量与可用性;
4.参与数据中台建设,负责数据采集、清洗、存储、计算、服务等全链路开发与优化;
5.负责数据仓库模型设计、ETL开发、数据指标体系构建,支撑业务分析与决策;
6.持续关注大数据领域前沿技术(如云原生、湖仓一体、AI+数据治理等),结合业务场景进行技术评估与创新应用;
7.主导或参与数据类产品的规划、方案设计与版本迭代落地,推动产品能力持续优化;
8.参与面向业务场景的数据模型、数据挖掘和处理算法的设计与开发。
任职要求:
1.统招本科及以上学历,大数据、计算机相关专业,3年以上大数据工作经验;
2.熟练掌握至少一门编程语言(Java/Python等),熟悉SQL,能独立完成数据处理、算法实现或脚本开发;
3.熟悉大数据技术体系,掌握Hadoop、Spark、Flink、Kafka等主流大数据组件的原理、适用场景及优缺点,能熟练进行部署、配置与优化;
4.熟悉数据湖/湖仓一体架构,熟练掌握Hive、Spark SQL等查询引擎;
5.熟悉MySQL、ClickHouse、Doris等数据库/数据仓库,了解其适用场景及优化方案;
6.熟悉数据治理理论框架(如DAMA-DMBOK),具备数据标准管理、元数据管理、数据质量管理、主数据管理等经验,有实际数据治理项目经验;
7.熟悉数据全生命周期流程,能规范推进各环节的落地与优化,了解数据安全与合规要求;
8.熟悉主流开源项目、云厂商大数据产品,具备云原生大数据架构设计与迁移经验;
9.了解BI分析工具(DataEase、FineBI等)及数据可视化技术,有数据服务API开发经验者优先;
10.具备跨部门沟通协调能力,能够有效组织并推进数据相关产品的落地;
11.持有大数据相关职业资格证书(如CDA、CDGA)者优先。