hadoop工程师

工作职责
1. 负责Hadoop分布式集群的搭建、部署、监控与日常运维，保障集群稳定运行。
2. 基于Hadoop生态系统（HDFS、MapReduce、YARN等）进行数据存储与计算方案设计，支撑通信行业海量数据处理需求。
3. 优化Hadoop集群性能，解决数据倾斜、资源瓶颈等问题，提升数据处理效率。
4. 参与数据仓库建设，与业务团队协作完成数据ETL流程设计与实施。
任职要求
1. 本科及以上学历，计算机、通信等相关专业，3年以上Hadoop相关工作经验。
2. 精通Hadoop生态技术栈（HDFS、MapReduce、YARN、Hive、Spark等），熟悉分布式系统原理。
3. 具备Hadoop集群调优、故障排查经验，能独立解决生产环境中的复杂问题。
4. 熟悉Linux系统操作，掌握Shell、Python等脚本语言，具备一定的编程能力。
5. 有通信/网络设备行业数据处理经验者优先。