更新于 3月3日

资深大数据开发工程师

1-2万
  • 杭州滨江区
  • 3-5年
  • 本科
  • 全职
  • 招1人

职位描述

数据平台KafkaRedisMySQLSparkFlinkJava数据治理数据架构数据挖掘PythonSql
大数据开发工程师
【岗位职责】
1、负责专业领域大数据平台核心服务研发,包括设备数据接入、解析、存储及统计分析。
2、参与网关接入层的协议开发与优化,支持 JT/T 808-2013、JT/T 1078、国六、GB/T 32960 等通信协议。
3、负责数据流转链路的建设与优化,涵盖 Kafka 消息中间层、Redis 缓存层、MySQL 数据存储层。
4、参与 Spark、Flink、Hive、Doris、HBase 等大数据组件开发,实现设备核心核心指标计算。
5、负责专业领域设备数据链路的性能调优与系统监控,确保高并发下的实时稳定接入。
6、支撑业务部门的数据管理、数据分析等场景化需求落地。
【任职要求】
1、本科及以上学历,计算机、软件工程、通信或相关专业;
2、5年以上Java后端或大数据开发经验,具备平台级项目交付经验;
3、熟悉设备通信机制,理解粘包、拆包、心跳、超时重连等网络通信原理;
4、熟悉 JT/T 808、国六、GB/T 32960 等协议,具备协议解析与数据落库经验;
5、熟练掌握 Kafka、Redis、MySQL 等中间件及数据库;
6、具备 Spark、Flink、Hive、HBase、Doris、OBS 等大数据组件的开发或调优经验;
7、熟悉数据流转链路及消息可靠性设计,具备系统调优和问题定位能力;
8、了解 Linux 环境及常用脚本工具,具备线上问题排查经验;
9、具备良好的沟通能力与团队协作意识,能独立承担复杂模块设计与开发。

工作地点

杭州市-滨江区-湖西路

职位发布者

谢女士/人事经理

当前在线
立即沟通
公司Logo杭州智能变革科技有限公司
杭州智能变革科技有限公司成立于2020年,位于浙江省杭州市滨江区,专注人工智能应用领域的技术研发与服务。公司核心业务包括人工智能应用软件开发,以及技术咨询、转让、推广等配套服务,致力于为客户提供AI技术落地的解决方案。作为技术驱动型企业,公司聚焦AI算法优化与场景化应用,通过持续的技术创新,形成从需求分析到产品交付的全流程服务能力,助力客户提升业务效率。目前,公司依托扎实的技术积累,为各行业客户提供定制化AI应用支持,逐步构建起技术研发与服务落地的核心竞争力。
公司主页