大数据开发工程师

岗位职责：
1、负责公司整体大数据平台的架构规划、选型与设计，构建高可用、高扩展、低延迟的PB级数据处理体系；
2、解决海量数据采集、清洗、存储、计算及服务化过程中的核心技术难题（如数据倾斜、背压、容错等）；
3、建立和完善数据治理体系，包括数据标准、元数据管理、数据质量监控、血缘分析及生命周期管理；
4、负责数据安全架构设计，落实数据分级分类、隐私计算、权限管控及合规性要求；
5、负责TSP/FOTA等系统的分析、设计和代码开发；
6、参与需求分析、与相关人员一起探讨、设计、实现产品的新功能；
任职要求：
1、计算机等相关专业，三年以上Java/大数据开发经验；
2、深入理解Spark、Flink、MapReduce、Hive、HUE、Airflow等计算框架原理，有内核级优化或二次开发经验者优先；
3、精通HDFS、Paimon、Doris/StarRocks、Elasticsearch等存储引擎的选型与调优；
4、熟练掌握Kafka、Pulsar等消息中间件的高吞吐架构设计；
5、熟悉Docker、Kubernetes，有在公有云（AWS/腾讯云/Azure）或私有云上构建大数据平台的经验；
6、精通SpringCloud/SpringFramework/Mybatis/Maven/MySQL等；
7、大学英语CET-4级或以上，能独立阅读英文资料，撰写英文文档；
8、有车联网相关系统的开发经验优先；
9、具有良好的抗压能力、学习能力和团队合作能力；