岗位要求(任职资格):
工作经验:3年以上大数据开发相关工作经验,具备完整的数据平台或数据仓库项目落地经验;
数据仓库能力:
熟悉数据仓库建模理论(如维度建模、星型/雪花模型、分层设计等);
有从0到1参与或主导企业级数据仓库(Data Warehouse)或数据湖(Data Lake)架构设计与实施的经验;
熟练掌握ETL/ELT开发流程,能设计高效、可维护的数据加工链路;
技术栈要求:
精通至少一种主流大数据处理框架,如 Apache Spark、Flink、Hive、MapReduce 等;
熟悉 Hadoop 生态系统(HDFS、YARN、HBase、Kafka 等);
熟练使用 SQL,并具备复杂查询优化能力;
掌握 Python / Java / Scala 中至少一种开发语言;
项目经验:
具备多个中大型大数据项目实战经验,如用户行为分析、实时数仓、BI 报表体系、数据治理平台等;
熟悉数据质量监控、元数据管理、调度系统(如 Airflow、DolphinScheduler)等配套工具;
具备数据产品思维,能与业务、算法、BI 团队高效协作。