数据运维工程师

2、负责大数据平台底层组件(HDFS,YARN,HIVE)的日常维护，线上问题处理，监控告警处理，开发团队技术支持；
3、负责大数据平台周边组件azkaban、flink、promethues服务的维护和故障处理；
4、负责云服务组件kafka、redis、ADB、polardb各种数据库的维护和管理；
5、负责应用系统的轻量技术保障，包括系统监控、系统巡检、系统备份、系统安全评估；负责对接监控平台，根据系统及业务需求优化监控指标；负责云资源的管理及对接，包括阿里云、华为云等；负责提供系统运维技术支持，提供解决方案等；
6、负责数据库的日常维护，包括数据库权限管理、巡检监控、备份恢复等；负责提供数据库技术支持，包括性能测试、调整、优化等；解答各类技术问题，诊断和解决数据库故障、错误和异常问题；定期进行错误日志分析，评估系统的稳健性和可靠性；负责数据库自动化运维工具和平台建设。岗位要求1、具备CDH集群的组件部署, 节点扩容,资源优化等运维工作能力；
2、熟系linux操作系统命令，掌握shell脚本编写,具备自动化运维能力；
3、具备100+节点以上或pb级大数据集群运维经验；
4、熟悉操作系统应用常用命令，包括Linux、Windows等；
5、熟悉常用运维脚本语言，如Shell/Python/Golang等；
6、熟悉容器化（K8S、Docker）、中间件（redis、kafka、es、rocketmq等）及其他常见平台运维技术；
7、熟悉大型数据库技术和工具，包括Mysql、SQL Server、Oracle、PostgreSQL、MogonDB、Redis等；
8、熟悉主流云计算平台（阿里云、腾讯云、华为云等）， 具备阿里云全栈产品的高效部署与运维实操能力优先；
9、熟悉持续集成，对CI/CD流水线有实际设计落地经验；
10、熟悉主流的promethus、grafana、ELK、阿里云监控、阿里云ARMS等监控工具；
11、具有cdh,或cdp管理员认证优先；
12、熟悉石油石化大型能源企业（中石油、中海油、中石化等）中下游业务、DCMM 标准、项目管理者优先。