大数据开发工程师

岗位职责：
1.设计、开发并维护大数据处理架构，涵盖Hbase、Hadoop 生态系统。
2.深度参与完整的数据仓库设计和建设工作，保障数据的精准性、完整性与一致性。
3.开发和优化数据提取、转换和加载（ETL）流程，提高数据处理效率。
4.熟练运用数据分析工具和先进技术，进行精细的数据清洗、预处理以及建模工作， 为深度的数据分析和挖掘提供坚实支持。
5.灵活利用 Python 语言进行复杂的数据预处理和特征工程。
6.与跨职能团队紧密合作，深入理解业务需求，精心提供切实可行的数据解决方案。
7.严密监控和优化大数据系统的性能，及时、有效地解决各类技术问题和突发故障。
8.迅速处理数据处理任务中出现的内存溢出等棘手性能问题。
要求：
1.持有计算机科学、统计学、数学或相关领域的本科及以上学历。
2.具备至少 3 年的大数据项目开发经验，熟悉 Hbase、Hadoop 生态系统及相关技术。
3.熟练掌握 Java、Python、Scala 等编程语言，熟悉一种及以上的主流数据库
4.精通数据仓库设计原则，熟练运用 SQL 进行复杂查询和数据操作。
5.拥有良好的问题解决能力与团队合作精神，能够在高强度工作环境下独立开展工作。
6.对新兴技术抱有强烈的学习热忱和探索欲望，能够迅速适应业务需求的动态变化。
加分项：
具有在云平台（如阿里云）上的大数据开发经验。
熟悉阿里云的相关数据产品，如 MaxCompute、DataWorks 等。
拥有数据可视化和数据分析报告的丰富经验。