大数据开发工程师

主要工作职责
1. 参与公司大数据中心建设，核心代码开发等任务；根据要求编写相关技术文档；
2. 大数据平台的搭建、维护和优化工作；
3. 审核开发人员的系统设计和代码质量，书写技术文档和制定开发规范；
4. 系统性能优化，安全加固，保证系统的安全、稳定、快速运行；
5．参与公司外部项目建设和定制化开发；
6. 交付高质量的代码，迭代优化数据中心产品;
任职资格
1.计算机、软件工程、通信等相关专业，本科以上学历；
2.5年以上Java开发经历，1年以上Scala开发经历；
3.3年以上大数据开发经验，掌握Hadoop生态系统内常见项目的使用（Kafka、HDFS、Hive、HBase、Zookeeper、Yarn、ES等），具有MapReduce\Spark \Flink\Hudi\Ice berg\ES\关系图谱等的开发经验，熟悉DataX、Kettle等ETL工具，熟悉XXLJob、Azkaban等开源调度，有数据仓库开发经验，有大数据平台安装部署及调优经验，有实际大数据项目经验优先；
4.熟悉Spring Cloud/boot微服务体系，擅长分布式、搜索引擎、缓存、jvm调优、序列化、nio、RPC调用框架等；
5.熟练使用Oracle、Mysql、Sql Server、MongoDB、Postgre SQL、Redis、达梦、神舟通用、南大通用、高斯等数据库；
6.有良好的计算机和网络基础，熟悉Linux文件系统、内核、性能调优，熟悉掌握Linux常规命令，了解脚本编程(Shell/Perl/Python其中一种）；
7.代码编写规范，思路清晰，逻辑性强，工作态度认真；
8.责任心强，有良好沟通能力和团队合作精神。有敏捷开发经验有限；
9.具备数据治理、数据资产管理、数据分析等相关项目经验者优先；
10.有开源背景的优先；