该职位已失效,看看其他机会吧

大数据开发工程师

1.8-2万
  • 北京门头沟区
  • 3-5年
  • 本科
  • 全职
  • 招1人

职位描述

KafkaNettyHbaseTIDBCLICKHOUSEDORIS大数据开发
招聘岗位:大数据开发 专业要求: 计算机科学、软件工程或相关专业 工作地点:北京 学历要求:本科及以上 工作职责:1、数据采集与传输: 使用Kafka和Netty构建高吞吐、低延迟的数据采集 和传输系统。 设计和优化数据管道,确保数据的实时性和可靠 性。 2、数据存储与管理: 使用HBase、TiDB、ClickHouse、Doris、 StarRocks等数据库进 行数据存储和管理。 设计和优化数据存储方案,确保数据的高效查询 和分析。 3、数据计算与处理: 使用Spark和Flink进行大规模数据的批处理和流 处理。 开发和优化数据处理算法,提升计算性能和效率。 4、系统优化与监控: 对现有系统进行性能调优,解决瓶颈问题。 设计和实施系统监控方案,确保系统的稳定运行。 5、团队协作与文档编写: 与团队成员紧密合作,参与技术讨论和代码评审。 编写技术文档,记录系统设计和实现细节。 职位要求:1、教育背景: 计算机科学、软件工程或相关专业本科及以上学历。 2、技术技能: 精通Kafka和Netty,具备大规模数据采集和传输系统的开发经 验。 熟悉HBase、TiDB、ClickHouse、Doris、StarRocks等数据 库,具备数据存储和管理的实际经验。 精通Spark和Flink,具备大规模数据批处理和流处理的实际经 验。 熟悉分布式系统原理,具备系统性能调优和故障排查的能力。 3、编程语言: 精通Java/Scala/Python等编程语言,具备良好的编码习惯。 4、工具与框架: 熟悉Linux操作系统,具备Shell脚本编写能力。 熟悉常用的开发工具和框架,如Maven、Git、Docker等。 5、软技能: 有大数据平台架构设计经验。 具备良好的沟通能力和团队协作精神。 具备较强的学习能力和问题解决能力。 薪资待遇:面议
查看全部

工作地点

北京门头沟区莲石湖西路98号院7号楼606室

职位发布者

刘女士/人事经理

刚刚活跃
立即沟通
公司Logo北京中航智德科技有限公司
北京中航智德科技有限公司,成立于2014-12-22,注册资本为1000万人民币,法定代表人为杨光,经营状态为存续,经营范围包括技术开发、服务、咨询、转让、推广;仪器仪表、机电设备、模具的产品研发;机械电气设备制造;模具制造;仪器仪表制造;计算机系统服务;软件开发;销售机械设备、电子产品、计算机、软件及辅助设备、五金交电、通讯设备(不含卫星地面接收、发射设备)、汽车配件、办公设备、针纺织品、化工产品(不含危险化学品)、仪器仪表;货物进出口、技术进出口、代理进出口。(市场主体依法自主选择经营项目,开展经营活动;以及依法须经批准的项目,经相关部门批准后依批准的内容开展经营活动;不得从事国家和本市产业政策禁止和限制类项目的经营活动。)
公司主页