职位描述
系统运维云计算软件/IT服务
工作职责
1. 负责Hadoop生态集群(HDFS、YARN、MapReduce、Hive、Spark等)的部署、监控与日常运维,保障系统高可用性。
2. 制定并执行集群性能优化方案,解决数据存储、计算任务中的瓶颈问题。
3. 快速响应并处理集群故障,通过日志分析定位根因,制定预防措施。
4. 推动运维流程自动化,编写Shell/Python脚本实现集群配置管理、备份恢复等任务。
5. 配合数据团队完成数据迁移、扩容等需求,保障业务连续性。
任职要求
1. 本科及以上学历,计算机相关专业,3年以上大数据运维经验。
2. 精通Hadoop生态组件原理,熟悉HDFS、YARN、Hive、Spark等核心服务的部署与调优。
3. 掌握Linux系统管理、网络配置及Shell/Python脚本编程,具备自动化运维思维。
4. 熟悉监控工具(如Prometheus、Grafana)及日志分析平台,具备较强的故障排查能力。
5. 具备大规模集群管理经验,了解分布式系统的容错机制与性能优化方法。
1. 负责Hadoop生态集群(HDFS、YARN、MapReduce、Hive、Spark等)的部署、监控与日常运维,保障系统高可用性。
2. 制定并执行集群性能优化方案,解决数据存储、计算任务中的瓶颈问题。
3. 快速响应并处理集群故障,通过日志分析定位根因,制定预防措施。
4. 推动运维流程自动化,编写Shell/Python脚本实现集群配置管理、备份恢复等任务。
5. 配合数据团队完成数据迁移、扩容等需求,保障业务连续性。
任职要求
1. 本科及以上学历,计算机相关专业,3年以上大数据运维经验。
2. 精通Hadoop生态组件原理,熟悉HDFS、YARN、Hive、Spark等核心服务的部署与调优。
3. 掌握Linux系统管理、网络配置及Shell/Python脚本编程,具备自动化运维思维。
4. 熟悉监控工具(如Prometheus、Grafana)及日志分析平台,具备较强的故障排查能力。
5. 具备大规模集群管理经验,了解分布式系统的容错机制与性能优化方法。







