Hadoop

工作职责
1. 负责Hadoop集群的架构设计、部署实施与日常运维，保障集群的高可用性与稳定性。
2. 针对大规模数据处理场景，优化HDFS、MapReduce、YARN等组件的性能，提升数据处理效率。
3. 参与大数据平台的技术方案设计，解决数据存储、计算过程中的关键技术问题，支持业务需求落地。
4. 建立集群监控与告警机制，快速定位并解决集群运行中的故障，保障数据安全与业务连续性。
任职要求
1. 本科及以上学历，计算机相关专业，具备扎实的分布式系统理论基础。
2. 3年以上Hadoop生态系统（HDFS、MapReduce、YARN、Hive、Spark等）的实战经验，熟悉集群部署与配置。
3. 掌握Linux系统操作与Shell脚本编程，具备自动化运维工具（如Ansible）使用经验者优先。
4. 具备较强的问题分析与解决能力，能独立完成集群性能调优与故障排查。
5. 熟悉云计算平台（如AWS、阿里云、华为云）的大数据服务者优先。