大数据运维工程师

工作内容：
1、负责大数据平台底层组件(HDFS,YARN,HIVE)的日常维护，线上问题处理，监控告警处理，开发团队技术支持；
2、负责大数据平台周边组件azkaban、flink、promethues服务的维护和故障处理；
3、负责云服务组件kafka、redis、ADB、polardb各种数据库的维护和管理；
4、负责应用系统的轻量技术保障，包括系统监控、系统巡检、系统备份、系统安全评估；负责对接监控平台，根据系统及业务需求优化监控指标；负责云资源的管理及对接，包括阿里云、华为云等；负责提供系统运维技术支持，提供解决方案等；
5、负责数据库的日常维护，包括数据库权限管理、巡检监控、备份恢复等；负责提供数据库技术支持，包括性能测试、调整、优化等；解答各类技术问题，诊断和解决数据库故障、错误和异常问题；定期进行错误日志分析，评估系统的稳健性和可靠性；负责数据库自动化运维工具和平台建设。
岗位要求：
通用能力：
要求统招本科及以上学历
1、具备较强的沟通协调能力，能自主推动项目进展和问题解决；
2、具备较强的工作责任意识，能自主跟进工作的任务直至闭环；
3、具备较强的团队协作意识，能服从领导安排、团队协同作战；
4、具备较强的客户服务意识，能站在客户视角思考和解决问题；
5、具备较强的知识学习能力，能主动学习新技术、新业务知识；
6、具有工作吃苦耐劳的精神，能适应加班、短期出差及24h倒班。
技术要求：
1、具备CDH集群的组件部署, 节点扩容,资源优化等运维工作能力；
2、熟系linux操作系统命令，掌握shell脚本编写,具备自动化运维能力；
3、具备100+节点以上或pb级大数据集群运维经验；
4、熟悉操作系统应用常用命令，包括Linux、Windows等；
5、熟悉常用运维脚本语言，如Shell/Python/Golang等；
6、熟悉容器化（K8S、Docker）、中间件（redis、kafka、es、rocketmq等）及其他常见平台运维技术；
7、熟悉大型数据库技术和工具，包括Mysql、SQL Server、Oracle、PostgreSQL、MogonDB、Redis等；
8、熟悉主流云计算平台（阿里云、腾讯云、华为云等）， 具备阿里云全栈产品的高效部署与运维实操能力优先；
9、熟悉持续集成，对CI/CD流水线有实际设计落地经验；
10、熟悉主流的promethus、grafana、ELK、阿里云监控、阿里云ARMS等监控工具；
11、具有cdh,或cdp管理员认证优先。
*具有石油石化能源零售行业经验者优先，特别优秀可放宽学历和工作经验。